3차원 공간 스캔을 위한 ToF-Stereo 융합 센서 시스템 설계
Design of ToF-Stereo Fusion Sensor System for 3D Spatial Scanning
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
본 논문에서는 3차원 객체의 인식률을 높이고 객체 검출 품질이 보장되며, 환경에 강건한 3차원 공간 스캔용 ToF-Stereo 융합 센서 시스템을 제안한다. ToF-Stereo 센서 융합 시스템은 ToF 센서와 Stereo RGB 센서의 센싱 값을 융합하는 방식을 사용하며, 하나의 센서가 동작하지 않더라도 다른 하나의 센서를 이용하여 계속해서 객체를 검출해 나갈 수 있다. ToF 센서와 Stereo RGB 센서의 센싱 거리, 센싱 해상도, 빛 반사도 및 조도 등에 따른 품질이 달라지므로, 신뢰도 추정에 기반하여 센서의 기능을 조절할 수 있는 모듈을 두었다. ToF-Stereo 센서 융합 시스템은 ToF 센서와 Stereo RGB 센서의 센싱 값을 결합하고, 신뢰도를 추정한 후 신뢰도에 따라 센서의 기능을 조절하여 두 센싱 값을 융합하므로 3차원 공간 스캔의 품질을 향상할 수 있다.
Abstract
In this paper, we propose a ToF-Stereo fusion sensor system for 3D space scanning that increases the recognition rate of 3D objects, guarantees object detection quality, and is robust to the environment. The ToF-Stereo sensor fusion system uses a method of fusing the sensing values of the ToF sensor and the Stereo RGB sensor, and even if one sensor does not operate, the other sensor can be used to continuously detect an object. Since the quality of the ToF sensor and the Stereo RGB sensor varies depending on the sensing distance, sensing resolution, light reflectivity, and illuminance, a module that can adjust the function of the sensor based on reliability estimation is placed. The ToF-Stereo sensor fusion system combines the sensing values of the ToF sensor and the Stereo RGB sensor, estimates the reliability, and adjusts the function of the sensor according to the reliability to fuse the two sensing values, thereby improving the quality of the 3D space scan.
참고문헌 (12)
- 김동엽, "SPAD과 CNN의 특성을 반영한 ToF 센서와 스테레오카메라 융합 시스템", 로봇학회 논문지, 13(4), pp.230~236 (2018), 한국로봇학회[DOI]
- Gyo-Yoon Lee, "Low Resolution Depth Interpolation using High Resolution Color Image", Smart Media Journal, 2(4), pp.9~19 (2013)
- 송창호, "다양한 환경에서 강건한 RGB-Depth-Thermal 카메라 기반의 차량 탑승자 점유 검출", 로봇학회 논문지, 13(1), pp.31~37 (2018), 한국로봇학회[DOI]
- R. Nair, "High accuracy TOFand stereo sensor fusion at interactive rates", Proceedings of the European conference on Computer vision(ECCV), pp.1~11 (2012)
- 이종서, "카메라와 라이다의 객체 검출 성능 향상을 위한 Sensor Fusion", 방송공학회 논문지, 24(4), pp.580~591 (2019), 한국방송∙미디어공학회[DOI]
- 정호기, "SENSOR FUSION-BASED LANE DETECTION FOR LKS+ACC SYSTEM", International Journal of Automotive Technology, 10(2), pp.219~228 (2009), 한국자동차공학회
- G. Agresti, "Deep learning for confidence information in stereo and TOF data fusion", 2017 IEEE International Conference on Computer Vision Workshops(ICCVW), pp.697~705 (2017)
- Jung Jae Jo, "Hand Tracking and Calibration Algorithm Using the EPIC Sensors", Smart Media Journal, 2(1), pp.27~30 (2013)
- 추용주, "3차원 공간 좌표 시스템과 드론 영상 검출을 활용한 산사태 안식각 예측에 관한 연구", 스마트미디어저널, 12(3), pp.77~84 (2023), (사)한국스마트미디어학회[DOI]
- S. Jung, "3D Reconstruction Using 3D Registration-Based ToF-Stereo Fusion", Sensors, 22, pp.8369~ (2022)
- Z. Ding, "Votenet +: An Improved Deep Learning Label Fusion Method for Multi-Atlas Segmentation", 2020 IEEE 17th International Symposium on Biomedical Imaging(ISBI), pp, pp.363~367 (2020)
- S. Woo, "Cbam: Convolutional block attention module", Proceedings of the European conference on computer vision (ECCV) (2018)