Journal of KIISE:Computing Practices and Letters (한국정보과학회논문지:컴퓨팅의 실제 및 레터)

Korean Institute of Information Scientists and Engineers (한국정보과학회)
권호 표지

Adaptive Keyframe-Based Tracking for Augmented Books

증강 책을 위한 적응형 키프레임 기반 트래킹

  • Received : 2009.12.22
  • Accepted : 2010.01.28
  • Published : 2010.04.15
Download PDF
⟨ Previous Next ⟩

Abstract

An augmented book is an application that augments such multimedia elements as virtual 3D objects generated by computer graphics, movie clips, or sound clips to a real book using AR technologies. It is intended to bring additional education and entertainment effects to users. For augmented books, this paper proposes an adaptive keyframe-based page tracking method to estimate the camera's 6 DOF pose in real-time after recognizing a page and performing wide-baseline keypoint matching. For a page tracking, proposed method in this paper chooses a proper keyframe and performs a tracking in two step of coarse-to-fine stage. As a result, the proposed method in this paper guarantees a robust tracking to view-point and illumination variations and real-time.

증강 책(Augmented book)이란, 컴퓨터 그래픽 기술로 생성된 3D 물체, 동영상, 소리영상과 같은 멀티미디어 요소들을 증강현실 기술을 이용하여 실제 책에 증강시킨 책을 말한다. 증강 책은 책을 읽는 독자들에게 흥미를 유발시키고, 책에 좀 더 몰입할 수 있도록 하여, 교육 및 엔터테인먼트 효과를 증대시키는 것이 목적이다. 증강 책을 위한 기술은 크게 페이지 인식 그리고 페이지 트래킹으로 나눌 수 있는데, 본 논문에서는 페이지가 인식된 후, 정교한 페이지 트래킹을 위한 카메라의 6 자유도 자세를 추정하기 위해 적응형 키프레임 기반 페이지 트래킹 기술을 제안한다. 페이지가 인식된 이후에는 트래킹을 위해 가장 알맞은 키프레임을 선정한 후 coarse-to-fine의 두 단계에 걸쳐 트래킹을 수행하였다. 결과적으로 본 논문에서 제안된 트래킹 방법은 시점 변화와 조명 변화에 좀 더 강인하고 실시간성을 보장한다.

Keywords

References

  1. Cho K., Lee J., Yang H. S., A Realistic e-Learning System based on Mixed Reality. In Proc. 13th International Conference on Virtual Systems and Multimedia, pp.57-64, 2007.
  2. Taketa N., Hayash K., Kato H., Nishida S., Virtual pop-up book based on augmented reality. In Proc. HCI, pp.475-484, 2007.
  3. Juan M. C., Rey B., Perez D., Tomas D., Alca N. M.: The memory book. In Proc. 2005 ACM SIGCHI International Conference on Advances in computer entertainment technology, pp.379-380, 2005.
  4. Scherrer C., Pilet V., Fua P., Lepetit V., The haunted book. In Proc. 7th IEEE/ACM International Symposium on Mixed and Augmented Reality, 2008.
  5. Lepetit V., Fua P., Monocular Model-Based 3D Tracking of Rigid Objects: A Survey. Computer Graphics and Vision, vol.1, no.1, pp.1-89, 2005. https://doi.org/10.1561/0600000001
  6. Reitmayr G., Drummond T., Going out: Robust Model-based Tracking for outdoor Augmented Reality. 6th IEEE/ACM International Symposium on Mixed and Augmented Reality, pp.109-118, 2006.
  7. Davison A.J., Reid I.D., Molton N.D., Stasse O., MonoSLAM: Real-time Single Camera SLAM. IEEE Transactions on Pattern Analysis and Machine Intelligence, vol.29, no.6, pp.1052-1067, 2007.
  8. Klein G., Murray D., Parallel tracking and mapping for small AR workspaces. 6th IEEE and ACM International Symposium on Mixed and Augmented Reality, pp.255-234, 2007.
  9. Rosten E., Drummond T., Machine learning for high-speed corner detection. In Proc. 9th European Conference on Computer Vision, pp.430-443, 2006.
  10. Yang H. S., Cho. K., Soh J., Jung J., Lee J., Hybrid Visual Tracking for Augmented Books. In Proc. ICEC, pp.161-166, 2008.
  11. Varadarajan V., Lie Groups, Lie Algebras and Their Representation. SpringerVerlag, 1974.
  12. Huber P.: Robust Statistics. Wiley, 1981.