일반기술

시청각 기반 사용자 인식 및 제스쳐인식기술

본 기술은 컴퓨터나 휴대단말장치, 로봇장치에서 사용자를 인식하기 위해 원거리(3~5m) 얼굴인식과 잡음환경하에서 문장독립형태에 대해서 화자인식을 수행하고, 제스쳐의 의도 및 행동을 인식하여 여러 종류의 응용 프로그램에 활용할 수 있는 시청각 기반 사용자 인식 및 제스쳐 인식의 핵심기술이다.본 기술의 사용자 얼굴 인식 시스템은 사용자가 제한된 환경에서 근거리 정면얼굴만을 대상으로 하는 반면, 지능형 로봇, 디지털 홈, 보안 시스템 등에서의 사용자 얼굴 인식은 근거리뿐만 아니라 원거리(3~5m)에서도 얼굴인식의 필요성이 증대되고 있는 중요 기술이다. 한편, 카메라를 통해 얼굴인식을 수행하기 어려운 상황에서 사용자의 음성으로부터 화자를 인식하는 기술이 필요하다. 이 기술은 잡음환경이나 문장이 독립인 형태에서도 사용자를 인식할 수 기술이며 인간과 기계간의 상호작용에 대한 연구가 활발히 진행됨에 따라 음성 인터페이스에 대한 수요가 점점 많아지고 있다. 게다가 카메라 영상 기반 제스처 인식 시스템은 입력된 영상에서 제스처 사용자를 추출하고 사용자의 손 움직임을 추출하고 추적한 다음 사용자의 동작에서 의미있는 제스처 동작 영역을 추출하여 인식하여 로봇을 자동 제어하거나 멀티미디어, TV등의 여러 시스템을 자동으로 제어할 수 있는 제스처 인식 핵심 기술이다. 제스처 인식은 최근 몇 년 동안 로봇의 동작 제어 및 시스템 제어용으로 사용자의 제스처를 인식하여 자연스러운 서비스 및 편의를 제공할 수 있도록 하기 위해 계속 연구되어온 분야로써 시각을 기반으로 한 인식 분야에서는 핵심 기술로 계속 연구되어온 분야이다.① 얼굴검출 및 원거리 얼굴인식 시스템 ㄱ. 얼굴검출 모듈 l 영상처리플랫폼 l 얼굴 검출 기능 l 얼굴 검증 기능 ㄴ. 원거리 얼굴인식 모듈 l 얼굴영역 전처리 기능 l 얼굴특징 추출 기능 l 얼굴검증 및 인식 기능 ② 화자인식 시스템 ㄱ. 음성처리 모듈 l 음성처리 플랫폼 l au 파일 포맷 지원 기능 ㄴ. 끝점 및 특징 추출 모듈 l 끝점추출 기능 l 음성 특징추출 기능 ㄷ. 등록화자 모델링 및 인식 모듈 l 등록화자 모델 구축 기능 l 화자 혼합도 추출 기능 l 화자 인식 기능 ③ PC용 카메라 기반 제스처 인식 시스템 ㄱ. 영상처리 모듈 l 영상처리플랫폼 l AVI 파일 포맷지원 기능 l 영상 화질 개선 기능 l 영상 윤곽선 추출 기능 ㄴ. 모션 추출모듈 l 모션영역 추출 기능 l 사용자 영역 추출 기능 ㄷ. 제스처 인식 모듈 l 얼굴 영역 추출 기능 l 손 영역 추출 기능 l 손 영역 추적 기능 l 의미있는 제스처 영역 추출 기능 l 특징 추출 기능 l 제스처 인식 기능