DOI QR코드

DOI QR Code

Georeferencing of Indoor Omni-Directional Images Acquired by a Rotating Line Camera

회전식 라인 카메라로 획득한 실내 전방위 영상의 지오레퍼런싱

  • 오소정 (서울시립대학교 대학원 공간정보공학과) ;
  • 이임평 (서울시립대학교 도시과학대학 공간정보공학과)
  • Received : 2012.02.10
  • Accepted : 2012.04.30
  • Published : 2012.04.30

Abstract

To utilize omni-directional images acquired by a rotating line camera for indoor spatial information services, we should register precisely the images with respect to an indoor coordinate system. In this study, we thus develop a georeferencing method to estimate the exterior orientation parameters of an omni-directional image - the position and attitude of the camera at the acquisition time. First, we derive the collinearity equations for the omni-directional image by geometrically modeling the rotating line camera. We then estimate the exterior orientation parameters using the collinearity equations with indoor control points. The experimental results from the application to real data indicate that the exterior orientation parameters is estimated with the precision of 1.4 mm and $0.05^{\circ}$ for the position and attitude, respectively. The residuals are within 3 and 10 pixels in horizontal and vertical directions, respectively. Particularly, the residuals in the vertical direction retain systematic errors mainly due to the lens distortion, which should be eliminated through a camera calibration process. Using omni-directional images georeferenced precisely with the proposed method, we can generate high resolution indoor 3D models and sophisticated augmented reality services based on the models.

회전식 라인 카메라로 취득한 전방위 영상을 실내 공간정보 서비스에 활용하려면 취득한 영상을 실내 좌표계를 기준으로 정교하게 참조할 수 있어야 한다. 이에 본 연구는 실내 전방위 영상의 외부표정요소 - 취득한 시점의 카메라의 위치와 자세를 정확하게 추정 할 수 있는 지오레퍼런싱 방법을 제안한다. 이를 위하여 먼저 회전식 라인 카메라를 기하학적으로 모델링하여 전방위 영상에 대한 공선방정식을 유도한다. 실내 기준점을 공선방정식에 적용하여 실내 전방위 영상의 외부표정요소를 추정한다. 실측데이터에 적용한 결과 외부표정요소의 위치는 1.4mm의 정밀도로, 자세는 $0.05^{\circ}$의 정밀도로 추정할 수 있었다. 수평방향으로 약3픽셀, 수직방향으로 약 10픽셀 정도의 잔차가 남아 있었다. 특히 수직방향으로는 렌즈의 왜곡에 의한 시스템적 오차가 포함되어 있는 것으로 분석되었고 이는 카메라 캘리브레이션을 통해 제거되야 할 것으로 판단된다. 제시된 방법을 이용하여 정밀하게 지오레퍼런싱된 전방위 영상으로부터 고해상도 실내 3차원 모델을 생성하고 이에 기반한 정교한 증강현실 서비스가 가능할 것으로 기대된다.

Keywords

References

  1. 나종기, 박운용, 문두열, 김진수 (2004). Direct Georeferencing을 이용한 도화 정확도 분석, 한국측량학회 학술대회논문집, pp. 263-268.
  2. 송연경, 박운용, 박홍기 (2005). Direct Georeferencing에 의한 CCD 영상의 적용기법, 한국측량학회지, 제23권, 제1호, pp. 77-88.
  3. 오태완, 이임평 (2010), 모바일매핑시스템으로 취득한 중첩 전방위 영상으로부터 3차원 객체좌표의 결정, 한국측량학회지, 제28권, 제3호, pp. 189-196.
  4. 최경아, 이임평 (2009), UAV 기반 저가 멀티센서시스템을 위한 무기준점 AT를 이용한 영상의 Georeferencing, 한국측량학회지, 제27권, 제2호, pp. 249-260.
  5. Bae, S. and Kim, B. (2005), Accuracy Analysis of Image Orientation Technique and Direct Georeferencing Technique, 한국GIS학회, 한국GIS학회지, 제13권, 제4호, pp. 373- 380.
  6. Huang, F., Wei, S. and Klette, R. (2003), Comparative Studies of Line-based Panoramic Camera Calibration, 2003 Conference on Computer Vision and Pattern Recognition Workshop, Washington, DC, USA, pp. 71-77.
  7. Juho, K. and Sami, B. (2004), A Generic Camera Calibration Method for Fish-Eye Lenses, the 17th International Conference on Pattern Recognition, Cambridge, UK, pp. 10- 13.
  8. Kang, S. B. and Weiss, R. (1997), Characterization of Errors in Compositing Panoramic Images, IEEE Computer Society Conference on Computer Vision and Pattern Recognition, San Juan, Puerto Rico, pp. 103-109.
  9. Li, R., Yan, L. and Di, K., Wu, B. (2008), A New Ground- Based Stereo Panoramic Scanning System, the XXIth ISPRS Congress, Beijing, China, pp. 723-727.
  10. Li, Y. and Shum, H. Y. (2004), Stereo Reconstruction from Multiperspective Panoramas, IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 26, No. 1, pp. 45-62. https://doi.org/10.1109/TPAMI.2004.1261078
  11. Oh, S. and Lee, I. (2011), Estimation of 3D Object Points from Omni-directional Images Acquired by A Rotating Line Camera, the 32nd Asian Conference on Remote Sensing, Taipei, Taiwan.
  12. Shum, H. and Szeliski, R. (1999), Stereo Reconstruction from Multiperspective Panoramas, 7th International Conference on Computer Vision ICCV'99, Kerkyra, Greece, pp. 14-21.
  13. Tang, W. K. and Hung, Y. S. (2001), Concentric Panorama Geometry, 8th IEEE Conference on Mechatrinics and Machine Vision in Practice, Hong Kong, China, pp. 507-512.
  14. Torii, A., Sugimoto, A. and Imiya, A. (2003), Mathematics of a Multiple Omni-Directional System, the 2003 Conference on Computer Vision and Pattern Recognition Workshop, Washington, DC, USA, pp. 1063-6919.
  15. Wei, S., Huang, F. and Klette, R. (2002), The Design of a Stereo Panorama Camera for Scenes of Dynamic Range, 16th International Conference on Pattern Recognition (ICPR 2002), Quebec, Canada, pp. 635-638.
  16. Huang, F., Wei, S. and Klette, R. (2006), Rotating Line Cameras: Model and Calibration, IMA Preprint Series #2104, Institute for mathematics and ITS applications, University of Minnesota.

Cited by

  1. Calibration of a Rotating Stereo Line Camera System for Indoor Precise Mapping vol.31, pp.2, 2015, https://doi.org/10.7780/kjrs.2015.31.2.11
  2. Indoor 3D Modeling Using a Rotating Stereo Frame Camera System and Accuracy Evaluation vol.32, pp.5, 2016, https://doi.org/10.7780/kjrs.2016.32.5.9
  3. 영상집성 자동화 시스템 개발을 위한 비측량용 카메라의 최적 촬영각 및 중복도 결정 vol.21, pp.2, 2012, https://doi.org/10.7319/kogsis.2013.21.2.117
  4. 실내공간 데이터 기반의 응용 서비스를 위한 세밀도 모델에 관한 연구 vol.32, pp.2, 2012, https://doi.org/10.7848/ksgpc.2014.32.2.143
  5. 영상 데이터를 활용한 실내 토폴로지 구현에 관한 연구 vol.34, pp.3, 2012, https://doi.org/10.7848/ksgpc.2016.34.3.329
  6. Establishing Required LOD and Positioning Accuracy for Indoor Spatial Information Applications in Public Administrative Works vol.35, pp.2, 2012, https://doi.org/10.7848/ksgpc.2017.35.2.103
  7. Integrating Image and Network-Based Topological Data through Spatial Data Fusion for Indoor Location-Based Services vol.2020, pp.None, 2012, https://doi.org/10.1155/2020/8877739