Journal of the Institute of Electronics Engineers of Korea SP (대한전자공학회논문지SP)

The Institute of Electronics and Information Engineers (대한전자공학회)
권호 표지

Edge-Directed Color Interpolation on Disjointed Color Filter Array

분리된 컬러 필터 배열을 이용한 에지 방향 컬러 보간 방법

  • Oh, Hyun-Mook (Institute of TMS Information Technology, Yonsei University) ;
  • Yoo, Du-Sic (Institute of TMS Information Technology, Yonsei University) ;
  • Kang, Moon-Gi (Institute of TMS Information Technology, Yonsei University)
  • 오현묵 (연세대학교 전기전자공학과 TMS 정보기술사업단) ;
  • 유두식 (연세대학교 전기전자공학과 TMS 정보기술사업단) ;
  • 강문기 (연세대학교 전기전자공학과 TMS 정보기술사업단)
  • Published : 2010.01.25
Download PDF
⟨ Previous Next ⟩

Abstract

In this paper, we present a color interpolation algorithm that uses novel edge direction estimator and region classifier. The proposed edge direction estimator accurately determines the edge direction based on the correlation between the images obtained by the channel separated and down-sampled Bayer color filter array(CFA) pattern. The correlation is defined based on the similarity between the edge direction in the local region of the image and the shifting direction of the images. Also, the region of an image is defined as the flat, the edge, and the pattern-edge regions, where the edges are appeared repeatedly. When all the pixels in the image are classified into the three different regions, each pixel is interpolated horizontally or vertically according to the estimated direction. Experimental results show that the proposed algorithm outperforms the conventional edge-directed methods on objective and subjective criteria.

본 논문은 새로운 에지 방향 추정 방법과 영상의 영역 세분화에 기반을 둔 컬러 보간 알고리즘을 제안한다. 제안하는 에지 방향 추정은 컬러 필터 배열(color filter array: CFA)의 채널 별 분리와 표본 줄임(down-sampling)을 통해 획득한 영상 사이에 존재하는 에지 방향성 상관관계를 바탕으로 이루어진다. 에지 방향성 상관관계는 영상 간의 샘플링 위치와 각 영상의 국부위치에서의 에지 방향성 사이에 존재하는 방향의 유사성을 바탕으로 정의한다. 영상의 영역을 분류함에 있어서 평탄, 에지 영역뿐만 아니라 반복되는 에지가 나타나는 패턴 에지 영역을 구분함으로써 영역을 세분화 한다. 이렇게 구분한 영역 각각에 대해 수직 혹은 수평 방향 에지를 검출하여 에지 방향에 따라 보간함으로써 오류를 최소화 하는 에지 방향성 컬러 보간이 이루어진다. 실험 결과를 통해 제안하는 방법이 기존 방법에 비해 수치적인 면과 시각적인 면에서 뛰어난 결과를 보임을 확인할 수 있으며, 제안하는 영역 세분화와 에지 방향 추정을 통해 영상의 고주파 영역에서 성능이 향상됨을 확인할 수 있다.

Keywords

References

  1. B. E. Bayer, "Color imaging array," U.S. Patent 3 971 065, Jul. 1976.
  2. B. K. Gunturk, J. Glotzbach, Y. Altunbasak, R. W. Schafer, and R. M. Merserean, "Demosaicking: color filter array interpolation in single chip digital cameras," IEEE Signal Processing Mag., vol. 22, no. 1, pp. 44-54, Jan. 2005. https://doi.org/10.1109/MSP.2005.1407714
  3. R. Kimmel, "Demosaicing: Image reconstruction from color CCD samples," IEEE Trans. Image Precessing, vol. 8, no. 9, pp. 1221-1228, Sep. 1999. https://doi.org/10.1109/83.784434
  4. S. W. Park and M. G. Kang, "Color interpolation with variable color ratio considering crosschannel correlation," SPIE Opt. Eng., vol. 43, no. 1, pp. 34-43, Jan. 2004.
  5. J. E. Adams Jr., "Interactions between color plane interpolation and other image processing functions in electronic photography," Proc. SPIE, vol. 2416, pp. 144-151, Feb. 1995.
  6. S. C. Pei and I. K. Tam, "Effective color interpolation in CCD color filter arrays using signal correlation," IEEE Trans. Circuits Syst. Video Technol., vol. 13, no. 6, pp. 503-513, Jun. 2003. https://doi.org/10.1109/TCSVT.2003.813422
  7. L. Zhang and X. Wu, "Color demosaicking via directional linear minimum mean square-error estimation," IEEE Trans. Image Processing, vol. 14, no. 12, pp. 2167-2178, Dec. 2005. https://doi.org/10.1109/TIP.2005.857260
  8. B. K. Gunturk, Y. Altunbasak and R. M. Mersereau, "Color plane interpolation using alternating projections," IEEE Trans. Image Processing, vol. 11, no. 9, pp. 997-1013, Sep. 2002. https://doi.org/10.1109/TIP.2002.801121
  9. D. Alleysson, S. Susstrunk and Jeanny Herault, "Linear demosaicing inspired by the human visual system," IEEE Trans. Image Processing, vol. 14, no. 4, pp. 439-449, Apr. 2005. https://doi.org/10.1109/TIP.2004.841200
  10. J. E. Adams and J. F. Hamilton, "Design of practical color filter array interpolation algorithms for digital cameras," Proc. SPIE, vol. 3028, pp. 117-125, 1997.
  11. C. W. Kim and M. G. Kang, "Noise insensitive high resolution color interpolation scheme considering cross-channel correlation," SPIE Opt. Eng., vol. 44, no 12, pp. 127006:1-15, Dec. 2005.
  12. X. Wu and N. Zhang, "Primary-consistent soft-decision color demosaicking for digital cameras (patent pending)," IEEE Trans. Image Processing, vol. 13, no. 9, pp. 1263-1274, Sep. 2004. https://doi.org/10.1109/TIP.2004.832920
  13. K. Hirakawa and T. W. Parks, "Adaptive homogeneity-directed demosaicing algorithm," IEEE Trans. Image Processing, vol. 14, no. 3, pp. 360-369, Mar. 2005. https://doi.org/10.1109/TIP.2004.838691
  14. K. Chung and Y. Chan, "Color demosaicing using variance of color differences," IEEE Trans. Image Processing, vol. 15, no. 10, pp. 2944-2955, Oct. 2006. https://doi.org/10.1109/TIP.2006.877521