3차원 영상통신을 위한 다시점 영상의 효과적 표현과 압축

본 논문에서는 효율적인 영상기반 렌더링에 기초하여 3차원 영상통신을 실현하는 방법을 제안한다. 송신측에서 서로 다른 시점에서 촬영된 기준영상(reference image)들을 효과적으로 압축하여 전송하면 수신측에서는이를 이용하여 임의시점의 영상을 합성함으로써 3차원 영상통신을 실현한다. 기준영상은 한 개의 주영상(primary image)과 여러 개의 부영상(secondary image)들로 나뉜다. 제안방법은 주영상의 깊이맵(depth map)을 추출하고, 주영상과 부영상 사이의 기하학적 관계를 이용함으로써 부영상을 효율적으로 부호화하는 것으로서 주영상에서는 관측되지 않고 부영상에서만 관측되는 영역, 즉 부영상 고유영역만을 부호화하도록 구성되어 있다. 따라서 제안방법에서 전송되어야 하는 정보는 각 영상의 카메라 파라미터, 주영상, 주영상의 깊이맵, 부영상 고유영역 영상이다. 이들 정보의 효과적인 전송을 위해 부영상 고유영역 영상의 압축에 초점을 두고, 블록기반 부호화를 제안한다. 부영상 고유영역에 대한 압축방법으로써 LPE(Low-Pass Extrapolation) 패딩(padding), DIEL (Directional Interpolation along the Epipolar Line) 예측법, 이 두 방식의 장점을 결합한 하이브리드 방법을 제안하고 적용한다. 상하좌우 및 가운데의 5개 시점에서 촬영한 기준영상을 사용한 모의실험 결과, 각각을 독립적으로 부호화하는 것 보다 약 1/3로 비트수를 줄일 수 있었으며 부영상의 비트수만을 계산하면 약 1/7로 줄일 수 있었다.