Video Summary Technique using Content Curve in MPEG Compressed Domain

MPEG 압축 영역에서 내용 곡선을 이용한 Video 요약 기법

  • Published : 2002.10.01

Abstract

This paper proposes a method to extract the content curve that reflects changes in video content from the MPEG video in the compressed domain, and also describes a video summary generation technique which can read video effectively and rapidly from the content curve. Existing video summary techniques have a disadvantage of taking significant amount of time to generate the video summary due to complex calculations in the decoding process. Moreover, the existing techniques, which use video content curve, require to perform many calculations to process the high dimensional content curve. However, the proposed technique generates video summary fast via the linear approximation of the proposed curve, after extraction the two dimensional content curve directly. In addition, the proposed technique has a merit that the user can set any number of key-frames and amount of calculation that form the video summary.

본 논문은 MPEG으로 압축 부호화 된 동영상에서 동영상 내용의 변화를 반영하는 내용 곡선을 추출하는 방법을 제안하고, 내용 곡선으로부터 효율적이고 빠르게 동영상을 열람할 수 있는 동영상 요약을 생성하는 기법에 대하여 기술하고 있다. 기존의 동영상 요약 기법들은 복호화 과정에서 대체로 계산이 복잡하여 동영상 요약을 만들어 내는 데에 적지 않은 시간이 소요되는 단점을 보유하고 있다. 또한 동영상의 내용 곡선을 이용한 기존의 용약 기법은 고차원의 내용 곡선을 처리하는 데에 있어 많은 계산을 필요로 하게 된다. 그러나 제안된 기법은 MPEG 압축 영역에서 직접 2차원의 내용 곡선을 추출한 뒤 제안된 곡선의 선형 근사 기법을 통하여 고속으로 동영상 요약을 만들어 낸다. 또한 제안된 기법을 동영상 요약을 구성하는 대표 프레임의 개수와 계산량을 사용자가 원하는 만큼 설정할 수 있는 장점도 있다.

Keywords

References

  1. Ying Li et al, 'An Overview of Video Abstraction Techniques,' HP Laboratory TechnicaI Report, HPL-2001-191, JUL. 2001
  2. Y. Taniguchi, 'An intuitive and efficient access interface to real-time incoming video based on automatic indexing,' Proc. of ACM Multimedia, pp. 25-33, NOV. 1995
  3. F. Arman, R. Depommier, A. Hsu and M. Y. Chiu, 'Content based browsing of video sequence,' Proc. of ACM Multimedia, pp. 97-103, AUG. 1994
  4. B. Gunsel, A. M. Tekalp. 'Content-based video abstraction,' IEEE Proceedings of International Conference on Image Processing, pp.769-774, IL, USA, October 1998
  5. Frederic Dufaux, 'Key frame selection to represent a video,' IEEE Proceedings of International Conference on Image Processing, Vol. 2, pp. 275 -278, 2000
  6. Jeho Nam, Ahmed H. Tewfik, 'Video Abstract Of Video,' IEEE 3rd Workshop on Multimedia Signal Processing, pp. 117-122, 1999
  7. Yihong Gong, Xin Liu 'Video summarization using singular value decomposition,' IEEE Proceedings of Conference on Computer Vision and Pattern Recognition, Vol. 2, pp. 174-180, 2000
  8. Yihong Gong, Xin Liu, 'Video summarization with minimal visual content redundancies,' IEEE Proceedings of International Conference on Image Processing, Vol. 2, pp. 362-365, 2001
  9. E. K. Kang, S. J. Kim, J. S. Choi, 'Video Retrieval based on Scene Change Detection in Compressed Streams', IEEE Trans. Consumer Electronics, Vol. 45, No. 3, pp. 932-936, Aug., 1999 https://doi.org/10.1109/30.793648
  10. Deniel DeMenthon, Vikrant Kobla, DavidDoennann, 'Video Summarization by Curve Simplification,' The 6th ACM International Multimedia Conference, pp. 211-218, 1998
  11. ISO/IEC 11172-2, 'Information technology - generic coding of moving pictures and associated audio for digital storage media at up to aboutl.5mbit/s - part - 2: Video,' 1993
  12. W. H. Ptess, B. P. Flannery, S. A. Teukolsky, W.T. Vetterling, Numerical Recipes in C, The Art of Scientific Computing, Cambridge Univ. Press, 1988
  13. Tae-Hee Kim, Woong-Hee Lee and Dong-Seok Jeong, 'Automatic Video Genre Identification Method in MPEG compressed domain,' Proceedings of ITC-CSCC '2002 International Conference, pp. 1527-1530, Phuket, JUL. 2002