The Journal of the Korea institute of electronic communication sciences (한국전자통신학회논문지)

Korea Institute of Electronic Communication Science (한국전자통신학회)
권호 표지

Facial Animation Generation by Korean Text Input

한글 문자 입력에 따른 얼굴 에니메이션

  • 김태은 (남서울대학교 멀티미디어학과) ;
  • 박유신 (중앙대학교 첨단영상학과)
  • Received : 2009.04.01
  • Accepted : 2009.04.29
  • Published : 2009.06.30
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper, we propose a new method which generates the trajectory of the mouth shape for the characters by the user inputs. It is based on the character at a basis syllable and can be suitable to the mouth shape generation. In this paper, we understand the principle of the Korean language creation and find the similarity for the form of the mouth shape and select it as a basic syllable. We also consider the articulation of this phoneme for it and create a new mouth shape trajectory and apply at face of an 3D avatar.

본 논문에서는 얼굴 애니메이션을 좀 더 실질적으로 표현하기 위하여 한글 생성의 원리와 입 모양 형태의 유사성을 기반으로 기본 음소를 선정하고 이를 이용하는 새로운 알고리듬을 제안한다. 카메라를 통해 얻어진 특징 점 이용이 아닌, 모션 캡쳐 (Motion Capture) 장비를 사용하여 실제 입모양의 움직임 데이터를 취득하여 취득된 데이터를 지수 증,감 형태로 나타내어 발성에 대한 음소를 표현하고 연속된 음절을 표현하기 위하여 지배 함수(Dominance Function)와 혼합 함수(Blending Function)를 적용하여 동시 조음에 대한 표현을 해결하였다. 또한 음절 간의 결합 시간을 입 주변의 마커(Marker) 거리 값의 변위를 이용하여 그 기울기 값에 따라 시간 지연을 함으로 현실감 있는 사용자 입력 문자에 대한 입 모양 궤적 데이터를 생성하는 실험 결과를 보여준다.

Keywords

References

  1. R. Chellappa, C. H. Wilson and S. Sirohey, "Human and Machine Recognition of Faces : A Survey", Proc. of the IEEE, Vol. 83, No. 5, pp. 705-740, May 1995. https://doi.org/10.1109/5.381842
  2. 한영환, 홍승홍, "연속 영상에서의 얼굴표정 및 제스처 인식", 의공학회지, Vol. 20, No. 4, pp.419-425, 1999.
  3. Jun-yong Noh, Ulrich Neumann, " Expression Cloning", SIGGRAPH 2001.
  4. 이인서, 박운기, 전병우, "MPEG-4 FAP기반 얼굴 근육모델을 이용한 Facial Animation", 춘천멀티미디어 학술회의, pp.147-151, Feb. 2000.
  5. Kwang-Sik Kong and Chang-Hun Kim, "MODELING COARTICULATION IN KOREAN VISUAL SPEECH", Proceedings of the first CGIM conference, pp.207-210, Jun. 1998.
  6. G. Yang and T.S. Huang, " Human face detection in a complex background", Pattern Recognition, Vol. 27, No. 1, pp.55-63, 1994.
  7. Sims, Karl., "Particle Animation and Rendering Using Data Parallel Computation", Computer Graphics(SIGGRAPH'90 Proceedings), pp.405-413, 1990.
  8. Parke, F. I., "Parametrized models ofr facial animation", IEEE Computer Graphics, Vol. 2, No. 9, pp.61-68, 1982.
  9. Fu Jie Huang, and Tsuhan Chen., "Real-time lip-synch face animation driven by human voice", In IEEE Multimedia Signal Processing Workshop, LosAngeles, California, 1998
  10. Hill, D.R., Pearce., & Wyvill, B.m, "Animating Speech: And automated Approach using speech synthesized by Rules", The Visual Computer, Vol. 3, pp.277-289, 1988. https://doi.org/10.1007/BF01914863
  11. Nahas, M., Huitric, H. and Saintourens, "M.(1988) Animation of a B-spline figure", The Visual computer, Vol. 3, pp.272-276. https://doi.org/10.1007/BF01914862
  12. Cohen, M.M. & Massaro, D.W., "Modeling Coarticulation in Synthetic Visual Speech", In Thalman N.M. & Thalmann D. (Eds) Models and Techniques in Computer Animation, Tokyo : Springer-Verlag, 1993.
  13. Cohen, M.M. & Massoro, D.M., "Modeling Coarticulation in Synthetic Visual Speech", In Thalman N.M. & Thalmann D. (Eds) Models and Techniques in Computer Animation, Tokyo : Springer-Verlag.