Journal of Broadcast Engineering (방송공학회논문지)

The Korean Institute of Broadcast and Media Engineers (한국방송∙미디어공학회)
권호 표지
DOI QR코드

DOI QR Code

Visible Image Enhancement Method Considering Thermal Information from Infrared Image

원적외선 영상의 열 정보를 고려한 가시광 영상 개선 방법

  • 김선걸 (가톨릭대학교 디지털미디어학부) ;
  • 강행봉 (가톨릭대학교 디지털미디어학부)
  • Received : 2013.05.13
  • Accepted : 2013.07.22
  • Published : 2013.07.30
Download PDF
⟨ Previous Next ⟩

Abstract

The infrared and visible images are represented by different information due to the different wavelength of the light. The infrared image has thermal information and the visible image has texture information. Desirable results are obtained by fusing infrared and visible information. To enhance a visible image, we extract a weight map from a visible image using saturation, brightness. After that, the weight map is adjusted using thermal information in the infrared image. Finally, an enhanced image is resulted from combining an infrared image and a visible image. Our experiment results show that our proposed algorithm is working well to enhance the smoke in the original image.

가시광 영상과 원적외선 영상은 각각 질감 정보와 열 정보를 가지므로 서로 다른 정보를 표현한다. 그러므로 가시광 영상 개선을 위해 가시광 영상의 정보만을 이용하는 것보다 가시광 영상에서 존재하지 않는 원적외선 영상의 열 정보를 이용하는 것이 보다 좋은 결과를 얻을 수 있다. 본 논문에서는 원적외선 영상을 이용한 효과적인 가시광 영상 개선을 위해 가시광 영상에서 개선이 필요한 정도에 따라 가중치 맵을 만든다. 가중치 맵은 채도와 밝기를 이용하여 계산하며 원적외선 영상에서 열 정보를 고려하여 값을 조정한다. 마지막으로 조정된 가중치 맵을 이용하여 원적외선 영상의 정보와 가시광 영상의 정보를 융합함으로써 두 영상의 정보를 효과적으로 포함한 결과 영상을 생성한다. 실험결과에서는 가시광 영상에서 개선이 필요한 영역을 원적외선 영상 정보와의 융합으로 원본의 가시광 영상보다 향상된 결과를 보여준다.

Keywords

References

  1. H.Li,B.S.Manjunath, and S.K.Mitra, "Multisensor image fusion using the wavelet transform", Graphical Models and Image Processing, Vol.57, no.3, pp.235-245 , May 1995 . https://doi.org/10.1006/gmip.1995.1022
  2. P.Burt and R.Kolczynski, "Enhanced image capture through fusion," in Proc. 4th International Conference on Computer Vision, pp:173-182, Berlin 1993.
  3. P.E. Debevec and J.Malik, "Recovering high dynamic range radiance maps from photographs", In SIGGRAPH, 1997.
  4. K. Devlin. "A review of tone reproduction techniques." Technical report, University of Bristol, 2002. 1
  5. E.Reinhard, M. Stark, P. Shirley, and J. Ferwerda. "Photographic tone reproduction for digital images.", In SIGGRAPH , 2002
  6. A.Toet, "Hierarchical image fusion," Machine Vision and Applications, vol.3, no.1, pp. 1-11, 1990 https://doi.org/10.1007/BF01211447
  7. L.Schaul, C.Fredembach, and S.Susstrunk, "color image dehazing using the near-infrared" , in Proc. IEEE Int. Conf. on Image Proc., Cairo, Egypt, 2009.
  8. C. Fredembach, N. Barbuscia, and S.Susstrunk, "Combining visible and near-infrared images for realistic skin smoothing," in Proc. IS&T/SID 17th Color Imaging Conference, Albuquerque, NM, 2009.
  9. C. Tomasi and R. Manduchi. "Bilateral filtering for gray and color images" In ICCV, 1998. 4.
  10. J. Huang and D. Mumford. "Statistics of natural images and models". In CVPR, 1999. 3
  11. N.J.W. Morris , S. Avidan , W. Matusik and H. Pfister, "Statistics of Infrared Images" , IEEE Conference on Computer Vision and Pattern Recognition 2007, CVPR'07. 1-7p
  12. Xiaopeng Zhang, "Enhancing Photographs with Near Infrared Images", IEEE Computer Society Conference on Computer Vision and Pattern Recognition 2008, Ankorage, US.
  13. L. Neumann and A. Neumann. Color style transfer techniques using hue, lightness and saturation histogram matching. In Computational Aesthetics in Graphics, Visualization and Imaging, 2005. 2
  14. J.C.Nunes, Y.Bouanoune, E.Delechelle, O.Niang, Ph.Bunel, "Image analysis by bidimensional empirical mode decomposition," Image and Vision Computing 21 (2003) 1019-1026 https://doi.org/10.1016/S0262-8856(03)00094-5
  15. Xiuqiong Zhang, "Comparison of EMD Based Image Fusion Methods", Pro ICCAE 2009, Bangkok, Thailand 2009 : 302-305