일반기술

얼굴 애니메이션을 위한 디에스엠 복원 방법

본 발명은 비정형 3차원 점들의 집합으로부터 직접 얼굴 모델을 디에스엠(DSM : Displaced Subdivision Mesh)으로 복원할 수 있도록 함으로써 얼굴 애니메이션에 편리함을 제공해주도록 한 얼굴 애니메이션을 위한 디에스엠(DSM) 복원방법에 관한 것으로서, 이러한 본 발명은, 입술의 경계를 자동으로 생성하여 스캔 모델에 적용하고, 메쉬(mesh)의 양을 최대로 줄여서 모델의 전송에 효율성을 높인다. 즉, 송신할 때는 적은 양의 얼굴 모델을 전송하고, 수신측에서 웨이블릿(wavelet)을 이용하여 다시 원래대로 복원해낼 수 있도록 한다. 또한, DSM 단계의 조절이 가능하므로 시점 거리에 따라 단계를 조절하여 효과적으로 모델을 애니메이션시킬 수 있도록 하며, 근거리에서는 완전히 애니메이션을 시키고, 일정 거리 이상에서는 입이나 이마 등의 주요 부분만 애니메이션시킬 수도 있다.얼굴 애니메이션을 위한 디에스엠(DSM : DISPLACED SUBDIVISION MESH) 복원 방법에 있어서, 3차원 스캔 얼굴 데이터를 입력받은 후, 포인트 클라우드 데이터로 컨트롤 메쉬를 생성하는 제1단계와; 복원된 서브디비전 마스크를 이용하여 변위 맵을 생성하는 제2단계와; 상기 생성한 컨트롤 메쉬의 애니메이션을 위한 RETARGETED 컨트롤 메쉬를 생성하는 제3단계와; 상기 생성한 RETARGETED 컨트롤 메쉬로부터 다단계 DSM으로의 표정을 부여하여 RETARGETED 서브디비전 메쉬를 생성하는 제4단계와; 상기 생성한 컨트롤 메쉬와 변위 맵을 이용하여 모델의 상세화를 조절하기 위한 분석 필터 및 합성 필터를 생성하는 제5단계와; 상기 생성한 RETARGETED 서브디비전 메쉬에 상기 분석 필터 및 합성 필터를 적용하여 RETARGETED DSM을 생성하는 제6단계를 포함하여 이루어짐을 특징으로 하는 얼굴 애니메이션을 위한 디에스엠(DSM) 복원 방법.