Affine Model for Generating Stereo Mosaic Image from Video Frames

비디오 프레임 영상의 자유 입체 모자이크 영상 제작을 위한 부등각 모델 연구

  • Received : 2009.07.08
  • Accepted : 2009.08.03
  • Published : 2009.09.30

Abstract

Recently, a generation of high quality mosaic images from video sequences has been attempted by a variety of investigations. Among the matter of investigation, in this paper, generation on stereo mosaic utilizing airborne-video sequence images is focused upon. The stereo mosaic is made by creating left and right mosaic which are fabricated by front and rear slices having different viewing angle in consecutive video frames. For making the stereo mosaic, motion parameters which are able to define geometric relationship between consecutive video frames are determined. For determining motion parameters, affine model which is able to explain relative motion parameters is applied by this paper. The mosaicing method using relative motion parameters is called by free mosaic. The free mosaic proposed in this paper consists of 4 step processes: image registration with reference to first frame using affine model, front and rear slicing, stitching line definition and image mosaicing. As the result of experiment, the left and right mosaic image, anaglyphic image for stereo mosaic images are showed and analyzed y-parallax for checking accuracy.

최근 항공 비디오 영상을 이용한 고해상도 모자이크 영상제작에 대한 연구가 큰 관심사로 대두되고 있다. 그 중, 본 논문에서는 입체 모자이크 영상 제작에 그 목적을 두고 있다. 입체 모자이크 영상은 연속된 비디오 프레임 영상에서 각기 다른 촬영 각도를 가지고 있는 전방과 후방 슬라이스 영상을 추출한 후, 각각을 모자이킹하여 좌우모자이크 영상을 생성함으로써 제작되어진다. 입체 모자이크 영상을 제작하기 위해서는 프레임 영상간의 기하학적 관계를 규명할 수 있는 이동변수(motion parameters)가 결정되어져야 한다. 본 논문에서는 이러한 이동변수 중, 상대적인 이동변수를 규명할 수 있는 부등각 모델을 적용하였다. 이러한 상대적인 이동변수를 사용하여 모자이크 영상을 제작하는 방법을 자유 모자이크라고 한다. 자유 모자이크 과정은 결정된 이동변수를 이용하여 첫 번째 프레임 영상을 기준으로 영상등록을 수행한 후, 전방 및 후방 슬라이스 영상 추출, 접합선 추출, 영상 모자이킹 과정을 거쳐 수행된다. 본 연구의 결과로 좌우 모자이크 영상과 이를 이용한 여색입체 모자이크 영상을 나타내었으며, 정확도 분석을 위하여 종시차 분석을 수행하였다.

Keywords

References

  1. Kumar, R., Sawhney, H., Asmuth, J., Pope, J. and Hsu, S., 1998, "Registration of video to georeferenced imagery", ICPR98, vol. 2:1393-1400.
  2. Rousso, B., Peleg, S., Finci, I. and Rav-Acha, A., 1998, "Universal mosaicing using pipe projection", ICC'98, pp.945-952.
  3. Huang, H. C. and Hung, Y. P., 1998, "Panoramic stereo imaging system with automatic disparity warping and seaming", Graphical Models and Image processing, 60(3):196-208. https://doi.org/10.1006/gmip.1998.0467
  4. Peleg, S. and Ben-Ezra, M., 1999, "Stereo panorama with a single camera", Proc. IEEE CVPR99 : 395-401.
  5. Shum, H. and Szeliski, R., 1999, "Stereo reconstruction from multiperspective panoramas", Proc. IEEE ICCV99, 14-21.
  6. Zhu, Z., Hanson, A. R., Schultz, H., Stolle, F. and Riseman, E. M., 1999, "Stereo mosaics from a moving video camera for environmental monitoring", First International Workshop on Digital and Computational Video, Tampa, Florida, USA, pp. 45-54.
  7. Zhu, Z., Riseman, E. M. and Hanson, A. R., 2001, "Parallel-perspective stereo mosaics", ICCV'01, Vancouver, Canada.
  8. Zhu, Z., Hanson, A. R., Bassali, H. S., Schultz, H. J. and Riseman, E. M., 2001, "Generating seamless stereo mosaics from aerial video", ASPRS18th Biennial Workshop on Color Photography & Videography in Resource Assessment, May 16-18, University of Massachusetts, Amherst.