arXiv:2607.15974v1 cs.RO

제한된 주석 및 내비게이션 예산 하에서 객체 검출을 위한 체화형 능동 학습

Embodied Active Learning under Limited Annotation and Navigation Budget for Object Detection

Hadrien Crassous, Mohamed Yassine Kabouri, Minahil Raza, Joni Pajarinen, Riad Akrour

제출 2026-07-17

한국어 초록

이 논문은 로봇 내비게이션 시간과 주석 예산 제약을 동시에 만족하는 조건에서, 컴퓨터 비전 객체 검출기를 미지의 환경에 적응시키는 방법을 연구한다. 우리의 접근법은 검출기의 재학습을 위해 정보가 풍부한 로봇 궤적과 이미지 샘플을 선택하며, 명시적으로 검출기의 실패 사례를 겨냥한다. 형식적으로, 이 접근법은 배치 능동 학습의 체화형 변형으로, 각 라운드에서 에이전트는 후보 샘플을 수집하기 위한 제한된 내비게이션 예산과 가장 관련성 높은 이미지에 대한 제한된 주석 예산을 갖는다. 우리는 공간적 일관성을 활용하여 일관되지 않은 라벨을 가진 이미지를 식별하며, 이러한 이미지는 비전 모델에 가장 큰 개선을 제공할 가능성이 높다. 우리는 AI2-THOR 시뮬레이터의 대규모 장면과 Boston Dynamics Spot 로봇과 실시간 객체 검출기 YOLOv5를 사용한 실제 환경 설정에서 서로 다른 능동 학습 목표를 사용하여 이 접근법을 평가한다. 여러 베이스라인과의 비교를 통해, 우리의 실험 결과는 공간적 불일치가 외부 감독 없이 에이전트를 안내하고 관련 이미지를 선택하는 데 도움이 되며, 동일한 예산 하에서 적응 과정 종료 시점에 최고의 검출 정확도를 달성함을 보여준다. 오픈소스 프로젝트는 https://mkabouri.github.io/embodied-active-learning-od 에서 확인할 수 있다.

원문 초록

This paper studies how to adapt a computer vision object detector to an unknown environment under both a robot navigation time and annotation budget constraint. Our approach selects informative robot trajectories and image samples to retrain the detector, explicitly targeting its failure cases. Formally, the approach is an embodied variant of batch active learning, where at each round an agent has a limited navigation budget to collect candidate samples and a limited annotation budget for the most relevant images. We leverage spatial consistency to identify images with inconsistent labels, which are likely to provide the greatest improvement to the vision model. We evaluate the approach using different active learning objectives on large scenes from the AI2-THOR simulator and on a real-world setup using a Boston Dynamics Spot robot with the real-time object detector YOLOv5. Through comparison against several baselines, our experimental results show that spatial inconsistency helps guide the agent and select relevant images without external supervision, achieving the highest detection accuracy at the end of the adaptation process under the same budget. The open-source project can be found at https://mkabouri.github.io/embodied-active-learning-od

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2607.15974v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.