표정과 동작 데이터의 자동 동기화 기술
Automatic Synchronization of Separately-Captured Facial Expression and Motion Data
2
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
본 논문은 동작 포착 장비를 통해 각각 따로 포착된 얼굴과 동작 데이터의 자동 동기화 기술에 대해 다룬다. 광학식 동작 포착 기기를 사용할 때 얼굴 표정과 동작의 포착은 별도로 이루어지는 경우가 많으며, 이 경우 두 데이터 간의 동기화 수행하여야 자연스로운 애니메이션을 만들 수 있다. 본 연구에서는 두 데이터 간의 공통 부분인 목 및 얼굴의 전체적인 움직임 데이터를 기준으로 비선형 시간 변형을 통해 동기화를 수행하는 기법을 제안한다. 연구 결과를 간단한 실험 시나리오에 적용하여 기술의 효과성 여부를 검증하였다.
Abstract
In this paper, we present a new method for automatically synchronize captured facial expression data with its corresponding motion data. In a usual optical motion capture set-up, a detailed facial expression can not be captured simultaneously in the motion capture session because its resolution requirement is higher than that of the motion capture. Therefore, those are captured in two separatesessions and need to be synchronized in the post-process to be used for generating a convincing character animation. Based on the patterns of the actor's neck movement extracted from those two data, we present a non-linear time warping method for the automatic synchronization. We justify our method with the actual examples to show the viability of the method.
참고문헌 (13)
- M. Brand, "Voice puppertry", Proceedings of ACM SIGGRAPH92, pp.21~28 (1992)
- Z. Deng, "efase: expressive facial animation synthesis and editing with phoneme-isomap controls", Proceedings of ACM SIGGRAPH, 2006, 251~260
- S. Kshirsagar, "Visyllable based speech animation", Computer Graphics Forum, 22(3), pp.632~640 (2003)
- E. Chuang, "Mood swings: expressive speech animation", ACM Transactions on Graphics, 24(2), pp.331~347 (2005)
- P. Joshi, "Learning controls for blend shape based realistic facial animation", Proceedings of ACM SIGGRAPH, 2003, 187~192
- 신성용, "An Example-based Approach for Facial Expression Cloning", ACM SIGGRAPH, 2003, 167~176[DOI]
- E. Ju, "Expressive facial gestures from motion capture data", COMPUTER GRAPHICS FORUM, 27, pp.381~388 (2008), The Eurographics Association and Blackwell Publishing
- F. Pighin, "Synthesizing realistic facial expressions", Proceedings of ACM SIGGRAPH 98, pp.75~84 (1998)
- W. Ma, "Facial performance synthesis using deformation-driven polynomial displacement maps", ACM Transactions on Graphics, 27(5), pp.121~ (2008)
- B. Horn, "Closed-form solution of absolute orientation using unit quaternions", Journal of the Optical Society of America, A(4) (1987)
- J. Lee, "General construction of time-domain filters for orientation data", IEEE TRANSACTIONS ON VISUALIZATION AND COMPUTER GRAPHICS, 8(2), pp.119~128 (2002), IEEE COMPUTER SOC
- A. Bruderlin, "Motion signal processing", Proceedings of ACM SIGGRAPH 95 (1995)
- 박상일, "광학식 동작 포착 장비를 이용한 노이즈에 강건한 얼굴 애니메이션 제작", 한국게임학회 논문지, 10(5), pp.103~114 (2010), 한국게임학회