저조도 환경 대응 차량용 경량 뉴럴 ISP 구현
Implementation of a Lightweight Neural ISP for Low-Light Automotive Applications
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
본 연구는 차량 환경에서의 실시간 영상 처리 성능 향상을 위해 뉴럴 ISP(Neural Image Signal Processor)를 설계하고 최적화하는 방법을 제안한다. 다양한 조도와 기상 조건을 반영한Day, Evening, Snow, Night, Night Lights 다섯 가지 환경에서 차량용 카메라 센서를 이용해 HDR RAW 데이터셋을 구축하며, 채도 보정을 가미한 전통적 파이프라인 기반의 베이스라인 ISP를통해 sRGB 타깃을 생성한다. 네트워크 구조는 MW-ISPNet을 기반으로 경량화하여 실시간성을확보하고, 색조 힌트를 통해 저조도 환경에서의 색 안정성을 높인다. 또한 전처리 레이어를 구현해 센서 입력부터 뉴럴 ISP까지의 파이프라인을 단순화하고 지연 시간을 최소화한다. 실험결과, 제안된 모델은 저조도 환경에서 기존 하드웨어 ISP 대비 높은 시각적 품질을 달성했으며, 자율주행 및 지능형 교통 시스템에 실시간 적용 가능한 수준의 성능을 확인하였다.
Abstract
This paper proposes a design and optimization method for a neural image signal processor (Neural ISP) to enhance the real-time image processing performance in automotive environments. An HDR RAW dataset was constructed using an in-vehicle camera sensor under five lighting and weather conditions—day, evening, snow, night, and night lights—and sRGB targets were generated through a traditional pipeline-based baseline ISP with saturation correction. The network architecture was based on a lightweight MW-ISPNet to ensure real-time performance, while a hue hint was introduced to improve color stability under low-light conditions. In addition, a preprocessing layer was implemented to simplify the pipeline from sensor input to Neural ISP and minimize latency. The proposed model achieved superior visual quality compared to conventional hardware ISPs in low-light environments, highlighting its potential for real-time applications in autonomous driving and intelligent transportation systems.