본문 바로가기
KERD
논문KCI 등재

다시점 영상 생성을 위한 DIBR 기반의 깊이 정확도 향상 방법

Enhancement Method of Depth Accuracy in DIBR-Based Multiview Image Generation

박경신|김민영|조용주
한국정보처리학회|2016.09|정보처리학회논문지. 컴퓨터 및 통신시스템 (KIPS Transactions on Computer and Communication Systems)|제5권 제9호|pp. 237-246|DOI http://dx.doi.org/10.3745/KTCCS.2016.5.9.237

0

조회

0

다운로드

0

인용

0

참고문헌

키워드

전처리깊이 영상 기반 렌더링다시점 영상깊이지도비균등 영역분할 양자화DIBR(Depth Image Based Rendering)Multi-View ImageDepth-MapPre-ProcessingNon-Uniform Domain-Division Quantization
주제분류컴퓨터학

초록

DIBR (Depth Image Based Rendering)은 동일 시점의 색상 영상과 깊이 영상을 참조해서 임의 개수의 중간 시점 영상을 생성하는 기법으로 무안경식 다시점 입체 디스플레이를 위한 콘텐츠 제작에 활용할 수 있다. 본 연구에서는 DIBR 기법을 사용해서 생성되는 다시점 중간 영상의 객관적 품질에 깊이 정확도가 미치는 영향에 대해 설명한다. 본 연구는 먼저 사람이 인지할 수 없는 범위에서 왜곡을 보장하기위한 최소 깊이 양자화 계수를 도출한다. 그리고 장면 구성의 특성에 따라 같은 양자화 수준에서 깊이 정보의 정확도를 효과적으로 표현하기 위한 비균등 영역분할 양자화 방법을 선형 양자화와 비교 분석한 결과를 제시한다.

Abstract

DIBR (Depth Image Based Rendering) is a multimedia technology that generates the virtual multi-view images using a color image and a depth image, and it is used for creating glasses-less 3-dimensional display contents. This research describes the effect of depth accuracy about the objective quality of DIBR-based multi-view images. It first evaluated the minimum depth quantization bit that enables the minimum distortion so that people cannot recognize the quality degradation. It then presented the comparative analysis of non-uniform domain-division quantization versus regular linear quantization to find out how effectively express the accuracy of the depth information in same quantization levels according to scene properties.

참고문헌 (36)

  1. D. Lanman., "Content-Adaptive Parallax Barriers : Optimizing Dual-Layer 3D Displays using Low-Rank Light Field Factorization", Proceedings of ACM SIGGRAPH Asia 2010 papers (SIGGRAPH ASIA '10), 29(6) (2010), ACM
  2. A. J. Woods, "Investigating the cross compatibility of IR‐controlled active shutter glasses", Proc. of SPIE Stereoscopic Displays and Applications XXIII, 8288(1C), 1(10), pp.1~10 (2012)
  3. New breakthrough of the 3D TV markget : ‘Glasses-free 3D’ technology, "KOCCA", ~ (2012)
  4. "Digital Multimedia Broadcasting (DMB) Video-Associated Stereoscopic Data Service", Standard No. TTAK.KO-07.0064, ~ (2008)
  5. J. I. Jung, "Color Correction Algorithm Based on Camera Characteristics for Multi-view Video Coding", Signal, Image, and Video Processing (2012)
  6. 최규형, "효율적인 대규모 다중 카메라 보정 시스템", 한국정보기술학회논문지, 9(7), pp.215~222 (2011), 한국정보기술학회
  7. C. Fehn, "Depth-Image-Based Rendering(DIBR), Compression and Transmission for a New Approach on 3D-TV", Proc. SPIE Stereoscopic Display and Virtual Reality Systems XI, 5291, pp.93~104 (2004)
  8. C. Fehn, "A 3D-TV Approach Using Depth-Image-Based Rendering(DIBR)", Proc. of Visualization, Imaging, and Image Processing, pp.482~487 (2003)
  9. N. Hur., "3DTV Broadcasting and Distribution Systems", IEEE Transactions on Broadcasting, 57(2), pp.395~407 (2011)
  10. A. Redert., "ATTEST : Advanced Three-dimensional Television System Technologies", 3D Data Processing Visualization and Transmission, pp.313~319 (2002)
  11. 김민영, "DIBR 기반 다시점 영상 생성 시뮬레이션 시스템 설계 및 구현", 한국정보기술학회논문지, 10(8), pp.189~198 (2012), 한국정보기술학회[DOI]
  12. L. Do., "Quality Improving Techniques for Free-Viewpoint DIBR", Proc. of IEEE 3D-TV CON’09, pp.1~4 (2009)
  13. L. Zhang, "Stereoscopic Image Generation Based on Depth Images for 3D TV", Proc. IEEE Trans. on In Broadcasting, 51(2), pp.191~199 (2005)
  14. M. Magnor., "Multi-View Image Coding with Depth Maps and 3-D Geometry for Prediction", Proc. of SPIE: Visual Communications and Image Processing, pp.263~271 (2001)
  15. S. B. Lee., "Segment-based Multiview Depth Map Estimation Using Belief Propagation From Dense Multi-view Video", Proc. of IEEE, 3DTV Conference:The True Vision-Capture, Transmission and Display of 3D Video, pp.193~196 (2008)
  16. 이재호, "깊이맵의 전처리와 깊이 정보의 기하학적 분석을 통한 최적의 스테레오스코픽 영상 자동 생성 기법", 방송공학회 논문지, 14(2), pp.164~177 (2009), 한국방송∙미디어공학회
  17. G. M. Um., "Investigation on the Effect of Disparity-Based Asymmetrical Filtering of Stereoscopic Video", Proc. SPIE 5150, Visual Communications and Image Processing 2003, pp.110~118 (2003)
  18. W. J. Tam., "Smoothing depth maps for improved stereoscopic image quality", Proceedings of SPIE Conf. Three-Dimensional TV, Video, and Display III, pp.162~172 (2004)
  19. K. J. Oh, "Non-linear Bi-directional Prediction for Depth Coding", Advances in Multimedia Information Processing - PCM 2009, 5879, pp.522~531 (2009)
  20. X. Ye., "Computational Multi-View Imaging with Kinect", IEEE Transactions on Broadcasting, 60(3), pp.540~554 (2014)
  21. Gyu-cheol Lee, "Real-time Virtual-viewpoint Image Synthesis Algorithm Using Kinect Camera", Journal of Electrical Engineering & Technology, 9(3), pp.1016~1022 (2014), 대한전기학회
  22. Q. H. Nguyen., "Depth Image-Based Rendering with Low Resolution Depth", Proc. IEEE, the 2nd ICIP, pp.553~556 (2009)
  23. Q. Yang., "Spatial-Depth Super Resolution for Range Images", Proc. IEEE CVPR’07, pp.1~8 (2007)
  24. W. Jang, "Hybrid disparity map generation method based on reliability", Proceedings of the Korean Society of Broadcast Engineers Conference, 2015(7), pp.73~74 (2015)
  25. J. Diebel, "An application of markov random fields to range sensing", Advances in Neural Information Processing Systems, 18, pp.291~298 (2006)
  26. G. Leon., "3D Video Quality Evaluation with Depth Quality Variations", Proc. of IEEE 3DTV Conference, pp.301~304 (2009)
  27. 김태우, "움직임 객체 기반의 하이브리드 깊이 맵 다운샘플링 기법", 한국통신학회논문지, 37(11), pp.918~926 (2012), 한국통신학회
  28. J. H. Jung., "Effect of fundamental depth resolution and cardboard effect to perceived depth resolution on multi-view display", OSA, Optics Express, 19(21), pp.20468~20482 (2011)
  29. S. Zinger., "Free-viewpoint depth image based rendering", Journal of Visual Communication and Image Representation, 21(5-6), pp.533~541 (2010)
  30. K. J. Oh., "Hole-Filling Method Using Depth Based In-Painting for View Synthesis in Free Viewpoint Television(FTV)and 3D Video", Proc. of 27th Conference on Picture Coding Symposium, pp.233~236 (2009)
  31. 김민영, "Effects of Depth Map Quantization for Computer-Generated Multiview Images using Depth Image-Based Rendering", KSII Transactions on Internet and Information Systems, 5(11), pp.2175~2190 (2011), 한국인터넷정보학회
  32. 김현수, "Picture Quality According to the Type of Detector in Full-field Digital Mammography", Journal of the Korean Physical Society, 58(2), pp.364~371 (2011), 한국물리학회
  33. I. Ideses., "Depth Map Quantization – How much is sufficient?", Proc. of IEEE 3DTV Conference, pp.1~4 (2007)
  34. 윤치환, "ROI(Region Of Interest)기반의 차등적 이미지 압축에 관한 연구", 한국정보통신학회논문지, 18(3), pp.679~686 (2014), 한국정보통신학회[DOI]
  35. S. P. Lloyd, "Least Squared Quantization in PCM", IEEE Trans. Information Theory, 28(2), pp.129~137 (1982)
  36. "The Depth Buffer: 12.07012.070 Why is there more precision at the front of the depth buffer?"[URL]

관련 논문AI추천

다시점 디스플레이 중간 영상 생성에서 깊이 정보 양자화 방법이 미치는 영향에 관한 연구김석환, 박경신, 조용주, 천수민, 최지영(사)한국컴퓨터게임학회 · 컴퓨터게임및콘텐츠논문지2013 · 제26권 제4호다시점 동영상의 계층적 깊이영상 기반 표현, 부호화 및 중간 시점 보간 기법윤승욱, 호요성에스케이텔레콤 (주) · Telecommunications Review2007 · 제17권 제6호3차원 비디오 생성을 위한 깊이 영상의 시점간 상관도 향상 방법이상범, 호요성에스케이텔레콤 (주) · Telecommunications Review2011 · 제21권 제6호자유시점 TV를 위한 다시점 비디오의 계층적 깊이 영상 표현과 H.264 부호화신종홍(사)디지털산업정보학회 · (사)디지털산업정보학회 논문지2011 · 제7권 제2호3D 디스플레이어에서의 화면 시차 제어를 위한 입체 영상 재생성 기법이선민, 최수미, 최종무(사)한국컴퓨터그래픽스학회 · 한국컴퓨터그래픽스학회논문지2010 · 제16권 제4호3차원 비디오 시스템을 위한 가상시점 영상 합성 및 다시점 비디오 부호화 방법오관정, 호요성에스케이텔레콤 (주) · Telecommunications Review2011 · 제21권 제3호

이 간행물의 다른 논문 (9건)

Beacon 위치측위 기술과 행정주소를 연계한 재난재해 상황 전파 연구이재광, 모은수pp. 211-216데이터 추론에 의한 민감한 정보를 보호하기 위한 효율적인 데이터 출판 방법고혜경pp. 217-222Seamless 가상 환경을 위한 Migration Agent 서버 개발정성종, 원동현, 안동언pp. 223-228소셜 네트워크 서비스의 단어 빈도와 범죄 발생과의 관계 분석김용우, 강행봉pp. 229-236연근해 가두리 양식장 모니터링을 위한 센서네트워크 시스템신동현, 김창화pp. 247-260
원문 보기