훼손된 표지판: 합성 열화 조건에서 지능형 속도 보조 시스템 평가
Signs of Wear: Evaluating Intelligent Speed Assistance Under Synthetic Adverse Conditions
한국어 초록
지능형 속도 보조(ISA) 시스템은 카메라로 제한속도 표지판을 인식한다. 그러나 기존 벤치마크는 교외 도로에서 흔히 볼 수 있는, 풍화나 오염의 흔적이 있거나 식물에 뒤덮인 표지판을 충분히 반영하지 못한다. 본 연구는 생성형 이미지 편집으로 실제 도로에서 촬영한 제한속도 표지판 이미지에 여러 유형의 열화를 구현한다. 이렇게 만든 ISA-Wear 데이터셋은 편집 전후의 이미지를 쌍으로 제공한다. 멀티모달 이미지 편집 모델은 텍스트 지시에 따라 도로 이미지 속 제한속도 표지판에 눈, 녹, 식물, 도색 퇴색, 진흙을 세 가지 강도로 적용한다. 필요한 경우 주변 장면도 함께 수정하며 촬영 시점은 유지한다. 편집된 모든 프레임에 대응하는 원본 프레임이 있으며, 원본에서 표지판을 올바르게 인식한 프레임만 평가해 인식 실패를 열화의 영향으로 볼 수 있게 했다. 모델이 편집의 21%에서 표지판의 기하 구조를 바꾸었으므로, 모든 편집 결과에 기하 구조 검사와 수동 검토를 적용해 선별한다. 열화의 강도는 편집 전후 표지판 이미지 사이의 LPIPS 거리로 측정한다. 표지판이 열화된 프레임 716개를 평가한 결과, 탐지한 뒤 판독하는 파이프라인에서는 열화가 판독 단계보다 먼저 탐지 단계의 성능을 저하시켰다. 탐지기는 원본 프레임에서 해당 표지판을 모두 찾았으나 열화된 프레임에서는 62%만 찾았다. 탐지 누락은 판독 실패의 78~87%를 차지했으며, 제로샷 탐지기에서도 같은 경향을 보였다. 표지판 영역을 잘라 쓰는 벤치마크처럼 주석으로 표시한 표지판 경계 상자를 제공하면 분류기는 열화된 표지판의 78%를 판독했으나, 탐지기의 결과에 의존할 때는 56%만 판독했다.
원문 초록
Intelligent Speed Assistance (ISA) systems rely on cameras to recognize speed-limit signs, yet existing benchmarks underrepresent the weathered, dirty, and overgrown signs commonly encountered on rural roads. We use generative image editing to introduce different forms of wear into real street-level images of speed-limit signs. The resulting ISA-Wear dataset contains paired original and edited images. Guided by text instructions, a multimodal image-editing model adds snow, rust, vegetation, faded paint, or mud to the speed-limit sign in a street-level frame at three severity levels. Where appropriate, the surrounding scene is adapted as well, and the viewpoint is kept. Every edited frame has an unedited counterpart, and we only evaluate frames whose original is recognized correctly, so any failure can be attributed to the wear. Since the model alters the sign's geometry in 21\% of the edits, all edits are filtered by a geometric check and a manual review. Severity is measured as the LPIPS distance between the original and the edited sign plate. On 716 worn frames, we find that in detect-then-read pipelines, wear breaks detection before it breaks reading. The detector finds only 62\% of the worn signs, even though it finds every one of them in the original frames. Missed detections account for 78--87\% of failed reads, a pattern that a zero-shot detector shares. Given the annotated sign box, as in the crop-based benchmarks, a classifier still reads 78\% of the worn signs, but only 56\% when it has to rely on the detector
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.20382v2제출 시각 미확인
- arXiv:2611.20382v1
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.