WildMatch: 야생동물 재식별을 위한 약지도 이미지 매처 적응
WildMatch: Weakly Supervised Image Matcher Adaptation for Wildlife Re-Identification
한국어 초록
카메라 트랩 영상에서 개별 동물을 재식별(re-identification)하는 것은 비침습적 야생동물 모니터링의 핵심인 인스턴스 검색 문제입니다. 즉, 쿼리 이미지를 통해 이미 알려진 동물들의 참조 세트에서 올바른 개체를 검색해야 합니다. 이를 위해서는 컴퓨터 비전(CV) 모델이 털, 피부 또는 기타 시각적 무늬의 고유한 국소 패턴을 인식할 수 있어야 합니다. 기존 접근 방식들은 이를 분류(classification) 문제로 보고 전역 임베딩(global embedding)을 학습하여 개체당 다수의 라벨링된 이미지를 요구하면서 국소적인 단서를 대체로 무시하거나, 사전 구축된 도메인 무관 이미지 매처를 그대로 적용합니다. 이러한 매처들은 대규모의 다양한 이미지 모음에서 사전학습(pre-training)되었지만, 사용 가능한 데이터셋(dataset)의 규모가 작고 대응점(correspondence) 수준의 주석이 부족하기 때문에 야생동물 영상에 적응시키는 것은 까다롭습니다. 본 연구에서는 키포인트 수준이나 기하학적 대응점에 대한 정답 레이블 없이 개체 식별(identity) 라벨만을 사용하여 사전학습된 키포인트 매처를 약지도(weakly supervised) 방식으로 적응시키는 방법을 다룹니다. 사전학습된 매처를 사용해 유의미한 이미지 쌍을 마이닝하고, 개체 일치 여부로부터 약한 양성 및 음성 지도 신호를 도출하며, 동일 개체 쌍에 대해서는 대응점을 강화하고 서로 다른 개체에 대해서는 이를 억제하도록 매칭 네트워크를 대조적으로 파인튜닝(fine-tuning)합니다. 오픈소스 야생동물 재식별 데이터셋 전반에서 본 접근 방식은 기존 기성 매처 및 최첨단 국소-전역 융합 기법보다 정확도를 향상시킵니다. 학습(training)에 사용되지 않은 별도 개체를 포함하는 오픈월드 프로토콜에서도, 학습 개체를 단순 암기하는 대신 전이 가능한 대응점 사전 분포(correspondence prior)를 학습합니다. 우리가 아는 한, 이는 동물 재식별을 위해 개체 지도 신호를 기반으로 매처 수준에서 적응을 수행한 최초의 연구입니다. 본 기법은 일반적인 모니터링 데이터셋에서 이미 확보 가능한 개체 주석만을 활용하여 이미지 매칭 모델을 야생동물 도메인에 데이터 효율적으로 특화할 수 있도록 지원합니다.
원문 초록
Individual animal re-identification from camera-trap imagery is an instance retrieval problem central to non-invasive wildlife monitoring: a query image must retrieve the correct individual from a reference set of known animals. This requires computer vision models to recognize distinctive local patterns in fur, skin, or other visual markings. Current approaches either learn global embeddings as a classification problem, requiring many labeled images per individual while largely ignoring local evidence, or apply off-the-shelf, domain-agnostic image matchers. Although such matchers are pretrained on large and diverse image collections, adapting them to wildlife imagery is challenging because available datasets are small and lack correspondence-level annotations. We study weakly supervised adaptation of a pretrained keypoint matcher using only identity labels, without keypoint-level or geometric correspondence ground truth. We mine informative image pairs with the pretrained matcher, derive weak positive and negative supervision from identity agreement, and contrastively fine-tune the matching network to strengthen correspondences for same-identity pairs and suppress them for different identities. Across open-source wildlife re-identification datasets, our approach improves accuracy over off-the-shelf matchers and a state-of-the-art local--global fusion method. Under an open-world protocol with held-out individuals, it learns a transferable correspondence prior rather than memorizing training identities. To our knowledge, this is the first study of matcher-level, identity-supervised adaptation for animal re-identification. Our method enables data-efficient specialization of image matching models to wildlife domains using identity annotations already available in typical monitoring datasets.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
15 pages, 7 figures, 3 tables. Project page: https://wildmatch.gmum.net