CODE: 오픈 월드 객체 검출을 위한 교차 모달 캘리브레이션 및 동적 억제
CODE: Cross-Modal Calibration and Dynamic Suppression for Open World Object Detection
한국어 초록
멀티모달 파운데이션 모델 기반의 오픈 월드 객체 검출(OWOD)은 단방향 텍스트-비전 매칭으로 인한 의미적 모호성(semantic ambiguity)을 겪는 경우가 많으며, 경직된 이상치 패널티는 알려진 클래스의 결정 경계 근처에 있는 미지의 객체를 과도하게 억제할 수 있습니다. 본 논문에서는 상호 보완적인 세 가지 구성 요소로 이루어진 통합 추론(inference) 시점 프레임워크인 CODE(Cross-Modal Calibration and Dynamic Suppression)를 제안합니다. 교차 모달 공동 신뢰도 캘리브레이션(Cross-Modal Joint Confidence Calibration)은 전역 비전 프로토타입을 주입하여 텍스트 기반의 알려진 클래스 예측을 보정합니다. 불확실성 기반 범용 객체성 강화(Uncertainty-Guided Universal Objectness Enhancement)는 국소 비전 응답에서 나타나는 분류(classification) 망설임을 측정하여 잠재적인 미지 객체를 강화합니다. 신뢰도 마진(margin) 기반 동적 이상치 억제(Dynamic Outlier Suppression via Confidence Margin)는 경직된 억제 방식을 마진 인식 조정으로 대체하여 모호한 분포 외(out-of-distribution) 인스턴스를 보존합니다. Real-World Detection 벤치마크 실험 결과에 따르면, OWL-ViT L/14 백본을 적용한 CODE는 Task 1에서 21.7 U-mAP 및 40.8 K-mAP를 달성하여 기존 최고 성능(SOTA)을 각각 2.6포인트, 2.3포인트 뛰어넘었습니다.
원문 초록
Open World Object Detection (OWOD) built on multimodal foundation models often suffers from semantic ambiguity caused by unidirectional text-to-vision matching, while rigid outlier penalties may over-suppress unknown objects near known-class decision boundaries. We propose CODE (Cross-Modal Calibration and Dynamic Suppression), a unified inference-time framework with three complementary components. Cross-Modal Joint Confidence Calibration injects global visual prototypes to calibrate text-driven known-class predictions. Uncertainty-Guided Universal Objectness Enhancement measures classification hesitation from local visual responses to strengthen potential unknown objects. Dynamic Outlier Suppression via Confidence Margin replaces rigid suppression with a margin-aware adjustment that preserves ambiguous out-of-distribution instances. Experiments on the Real-World Detection benchmark demonstrate that, with the OWL-ViT L/14 backbone, CODE achieves 21.7 U-mAP and 40.8 K-mAP in Task 1, surpassing the previous state of the art by 2.6 and 2.3 points, respectively.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.27214v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.