DOI QR코드

DOI QR Code

Disparity-based Depth Scaling of Multiview Images

변이 기반 다시점 영상의 인식 깊이감 조절

  • Jo, Cheol-Yong (Kangwon National University, Dept.. of Computer, Info. & Telecom) ;
  • Kim, Man-Bae (Kangwon National University, Dept.. of Computer, Info. & Telecom) ;
  • Um, Gi-Mun (ETRI, Broadcasting and Telecommunications Convergence Research Lab.) ;
  • Hur, Nam-Ho (ETRI, Broadcasting and Telecommunications Convergence Research Lab.) ;
  • Kim, Jin-Woong (ETRI, Broadcasting and Telecommunications Convergence Research Lab.)
  • 조철용 (강원대학교 컴퓨터정보통신공학과) ;
  • 김만배 (강원대학교 컴퓨터정보통신공학과) ;
  • 엄기문 (한국전자통신연구원 (ETRI) 방송통신융합연구부문) ;
  • 허남호 (한국전자통신연구원 (ETRI) 방송통신융합연구부문) ;
  • 김진웅 (한국전자통신연구원 (ETRI) 방송통신융합연구부문)
  • Published : 2008.11.30

Abstract

In this paper, we present a depth scaling method for multiview images that could provide an 3D depth that a user prefers. Unlike previous works that change a camera configuration, the proposed method utilizes depth data in order to carry out the scaling of a depth range requested by users. From multivew images and their corresponding depth data, depth data is transformed into a disparity and the disparity is adjusted in order to control the perceived depth. In particular, our method can deal with multiview images captured by multiple cameras, and can be expanded from stereoscopic to multiview images. Based upon a DSCQS subjective evaluation test, our experimental results tested on an automultiscopic 3D display show that the perceived depth is appropriately scaled according to user's preferred depth.

본 논문에서는 사용자에게 보다 실감있고, 사용자가 선호하는 다시점 3D 영상의 3D 입체감을 제공할 수 있는, 다시점 3D 동영상의 인식 깊이감을 조절하는 기법을 제안한다. 카메라 배열을 변경하는 기존의 방법들과 달리, 제안한 기법은 사용자가 요청하는 깊이 범위의 스케일링을 활용하기 위하여 영상의 깊이 데이터를 활용한다. 다시점 영상 및 해당 시점의 깊이 영상을 입력받아 각 화소의 변이로 변환하고, 각 화소의 변이를 조절함으로써 인식되는 깊이감을 조절하게 된다. 제안 방법은 다시점 카메라로부터 획득한 다시점 영상의 처리가 가능하며, 또한 2-시점 입체영상부터 다시점 영상까지 적용이 가능하다. 실험에서는 제안한 방법을 통하여 깊이감이 조절된 다시점 동영상을 다시점 3D 모니터로 시청하였을 때, 깊이감이 사용자가 선호하는 깊이에 따라서 스케일되는 것을 DSCQS(Double Stimulus Continuous Quality Scale)으로 확인하였다.

Keywords

References

  1. J. Lou, H. Cai and J. Li, "A real-time interactive multi-view video system," Proceedings of the 13th annual ACM International Conference on Multimeida, pp. 161-170, 2005
  2. C. L. L. Zitnick, S. B. B. Kang, M. Uyttendaele, S. A. J. A. J. Winder, and R. Szeliski, "High-quality Video View Interpolation Using a Layered Representation," ACM SIGGRAPH and ACM Trans. on Graphics, Vol. 23, Issue 3, pp. 600-608, Aug. 2004 https://doi.org/10.1145/1015706.1015766
  3. C. Fehn, R. de la Barré and S. Pastoor, "Interactive 3-DTV concepts and key technologies," Proceedings of the IEEE, Special Issue on 3-D Technologies for Imaging & Display, 94(3):524-538, March 2006
  4. L. Lipton and M. Feldman, "A new autostereoscopic display technology: The Synthagam," white paper, StereoGraphics Corporation
  5. A. Redert, R-P Berretty, C. Varekamp, O. Willemsen, J. Swillens, and H. Driessen, "Philips 3D solutions : from content creation to visualization," IEEE Proc. of the 3rd international symposium on 3D Data Processing, visualization, and transmission (3DPVT'06), pp. 429-431, 2006
  6. I. Feldmann, O. Schreer, and P. Kauff, "Nonlinear Depth Scaling for Immersive Video Applications," Proceedings of WIAMIS 2003, April 9-11 2003
  7. G. Jones, D. Lee, N. Holliman, and D. Ezra, "Controlling Perceived Depth in Stereoscopic Images," Stereoscopic Displays and Virtual Systems VIII, Proceedings of SPIE, Vol. 4297, pp. 42-53, 2001
  8. L. Stelmach, W. Tam, F. Speranza, R. Renaud, and T. Martin, "Improving the Visual Discomfort of Stereoscopic Images," Stereoscopic Displays and Virtual Systems X, Proceedings of SPIE-IS&T Electronic Imaging, SPIE, Vol. 5006, pp. 269-282, 2003
  9. http://www.3dvsystems.com/
  10. R. Hartley and A. Zisserman, Multiple View Geometry in Com- puter Vision, Cambridge University Press, 2nd edition, 2003
  11. http://research.microsoft.com/vision/InteractivVisualMediaGroup/ 3DVideoDownload/, Microsoft Research
  12. http://www.spatialview.com