일반기술

멀티모달 사용자 인터페이스를 이용한 대화형 전시 시스템

본 기술은 3D 입력모듈로부터 시선의 방향 및 봉의 움직임을 입력 받아 그에 따라 전시물의 디스플레이상태를 변경하는 것을 특징으로하는 멀티모달 사용자 인터페이스를 이용한 대화형 전시시스템구축의 기술로서 인간과 컴퓨터의 상호작용을 간편하게 하고 비용면에서도 저렴한 전시스템을 구현할 수 있는 효과가 있다본 기술은 멀티모달 사용자 인터페이스를 이용한 디지털 전시 시스템에 관한 것으로 레드볼과 블루밴드를 가진 봉 및 스크린의 상부에 장착되어 봉을 들고 있는 사용자의 이미지를 촬영하는 카메라를 구비하고 카메라가 제공한 이미지에서 사용자의 눈의 위치 및 명암을 분석하여 시선의 방향을 계산하는 시선추적모듈과 이미지에서 봉의 수평 및 수직위치를 인식하고 이미지에 나타난 레드볼의 크기를 이용하여 스크린과 봉과의 거리를 계산함으로써 봉의 움직임을 추적하는 행동인식모듈을 포함하는 3D입력모듈 및 3D입력모듈로부터 시선의 방향 및 봉의 움직임을 입력받아 그에 따라 전시물의 디스플레이 상태를 변경하는 3D GUI 툴킷을 포함하는 컴퓨터를 구비하는 것을 특징으로 하는 멀티모달 사용자 인터페이스를 이용한 대화형 전시시스템을 제공함으로써, 인간과 컴퓨터의 상호작용을 간편하게 하고 비용면에서도 저렴한 전시시스템을 구현할 수 있는 효과가 있다.