의미적 속성을 활용한 자율주행용 멀티모달 교통 표지판 검출
Multi-Modal Traffic Sign Detection with Semantic Attributes for Autonomous Driving
한국어 초록
신뢰할 수 있는 교통 표지판 검출은 자율주행 시스템의 전 세계적 배포를 위한 전제 조건이며, 규제 준수와 도로 안전은 지역·거리·기상 조건 전반에 걸쳐 표지판을 올바르게 인지하는 데 달려 있다. 최근 진전에도 불구하고, 비전 기반 방법은 여전히 세 가지 근본적 한계에 직면한다. 국가 간 높은 다양성으로 인한 낮은 지역 간 일반화, 원거리에서의 소형 객체 검출 성능 저하(200m에서 교통 표지판이 $10{\times}10$ 픽셀에 불과할 수 있음), 차량이 표지판에 접근할 때 발생하는 강한 비선형 원근 왜곡 하에서의 취약한 시간적 추적이다. 본 논문에서는 카메라와 Light Detection and Ranging(LiDAR) 감지를 결합하여 견고하고 원거리이며 지역에 구애받지 않는 교통 표지판 인지 문제를 다룬다. Intensity-Aware Deformable Fusion 모듈을 갖춘 멀티모달 검출 프레임워크를 제안하며, 이 모듈은 후방반사 LiDAR 단서를 카메라 특징과 정렬하여 지역별 시각적 외관이 아닌 기하 불변량에 검출을 고정한다. 또한 차량 접근 시 비선형 원근 변환을 명시적으로 고려하는 이중 운동 모델 추적기를 도입하여, 선형 운동 가정 대비 시간적 일관성을 크게 향상시킨다. 더하여 가림(occlusion) 수준, 가독성(readability), 표지판 내장성(sign embeddedness), 도로 관련성(road relevance)을 추정하는 의미 속성 분류 파이프라인을 개발하여 하위 계획(planning)에 실행 가능한 맥락을 제공한다. 60개 이상 국가와 2,500시간 이상의 주행 데이터를 포괄하는 자체 데이터셋에 대한 광범위한 평가에서, 제안 파이프라인은 221,068개 평가 시퀀스 전반에 걸쳐 Object Miss Ratio(OMR) 0.49%를 달성하여, 상용급 자율주행 시스템에서 전 세계적으로 일반화 가능한 교통 표지판 인지를 입증한다.
원문 초록
Reliable traffic sign detection is a prerequisite for the global deployment of autonomous driving systems, where regulatory compliance and road safety depend on perceiving signs correctly across regions, ranges, and weather conditions. Despite recent progress, vision-based methods continue to face three fundamental limitations: poor cross-regional generalization due to high diversity across countries, degraded performance on small-object detection at long ranges (traffic signs occupy as little as $10{\times}10$ pixels at 200m), and fragile temporal tracking under the strongly non-linear perspective distortion that occurs as a vehicle approaches a sign. In this paper, we address the problem of robust, long-range, region-agnostic traffic sign perception by combining camera and Light Detection and Ranging (LiDAR) sensing. We present a multi-modal detection framework whose Intensity-Aware Deformable Fusion module aligns retro-reflective LiDAR cues with camera features, anchoring detection on geometric invariants rather than region-specific visual appearance. We further introduce a dual motion-model tracker that explicitly accounts for non-linear perspective transformations during vehicle approach, substantially improving temporal consistency over linear motion assumptions. Additionally, we develop a semantic attribute classification pipeline that estimates occlusion level, readability, sign embeddedness, and road relevance, providing actionable context to downstream planning. Extensive evaluation on our dataset, spanning 60+ countries and 2,500+ hours of driving data, shows that the proposed pipeline achieves an Object Miss Ratio (OMR) of 0.49% across 221,068 evaluation sequences, demonstrating globally generalizable traffic sign perception in commercial-grade autonomous driving systems.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.20874v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.