실감방송을 위한 차세대 디지털 텔레비전 시대에는 초고화질 영상 디스플레이 장치와 3차원 영상이 널리 보급될 전망이다. 본 논문에서는 실감방송시대의 두 축인 초고화질 영상 디스플레이 장치와 3차원 영상 시대를 대비하는 관점에서 스테레오스코픽 3차원 영상을 활용한 초고해상도 영상 생성 방안을 제안한다. 2차원 입력영상에서 확대된 2차원 영상을 얻는 기존 접근 방식을 확장하여, 3차원 영상 융합에 바탕을 둔 초고해상도 영상을 생성한다. 먼저 입력된 영상의 국부 특성을 분석하고, 평탄 영역과 비평탄 영역에 따른 적응적 영상 해상도 개선을 수행한다. 효율적 연산을 위해 평탄 영역에서는 전통적 해상도 개선 방법을 적용하고, 비평탄 영역에서는 자기 유사성을 활용한 탐색을 기반으로 3차원 영상에 담긴 부가 정보를 효과적으로 검색하고 융합하여 해상도 개선에 활용한다. 실험 결과를 통해 3차원 영상에 내재된 부가 정보의 활용이 초고해상도 영상 복원 성능을 개선함을 보인다.

In the next generation of digital television for realistic video broadcasting, ultra high-definition display devices and three-dimensional video contents are expected to be widespread. This paper proposes a super-resolution image reconstruction method based on stereoscopic three-dimensional image fusion in order to prepare for the era of realistic video broadcasting with ultra high-definition display devices and three-dimensional video contents. The traditional approach in which a two-dimensional image is enlarged from the given two-dimensional image is extended to generate a super-resolution image based on three-dimensional image fusion. First the local characteristic of an input image is analyzed and then an adaptive image resolution enlargement scheme is applied for smooth and nonsmooth region. For efficient processing, the traditional resolution enlargement method is applied in the smooth region. However, in the nonsmooth region, the additional information contained in the three-dimensional image is effectively explored and fused by self-similarity searching to improve the quality of image resolution enhancement. Experimental results show that super-resolution image reconstruction quality can be improved with the utilization of additional information inherent in the three-dimensional image.

1. 서 론
 2. 영역 적응적 초고해상도 영상복원
  2-1. 스테레오스코픽 3차원 영상모델과 초고해상도
  2-2. 영역구분
  2-3. Back-projection기반 초고해상도 영상복원
  2-4. 자기 유사성을 이용한 3차원 융합 방안
  2-5. Side-by-side 포맷 영상에 적용방안
 3. 모의실험
 4. 결 론
 Acknowledgement
 참고문헌

• 김성득(안동대학교 전자공학교육과) | Sung Deuk Kim