과 수준 레이블을 넘어: 조류의 3D 형상 복원을 위한 분류학적 오른슈타인–울렌베크 사전분포
Beyond Family Labels: A Taxonomic Ornstein-Uhlenbeck Prior for Avian 3D Shape Recovery
한국어 초록
이미지 한 장에서 조류의 3D 자세와 형상을 복원할 때는 다양한 조류 종 중 학습 데이터가 적은 종이 많은 것이 걸림돌이다. 약 1만 종 중 3D 레이블이 있는 학습 데이터를 확보한 종은 수십 종에 그치고, 자연 환경에서 수집한 평가 데이터셋에는 학습에서 보지 못한 종이 흔히 포함된다. 따라서 서로 다른 계통군에 걸친 일반화가 핵심 과제다. 기존 최고 성능 방법인 AniMer+는 과 수준 대조 손실로 이를 완화한다. 하지만 두 종이 같은 과인지 나타내는 이진 지표만 전달하므로, 종 계통수의 연속적 구조를 활용하지 못한다. 본 연구는 조류 매개변수 메시 모델 AVES의 형상 코드에 분류학적 오른슈타인–울렌베크 사전분포를 적용한다. 이 다변량 가우스 분포는 린네식 분류 계급 거리가 멀어질수록 공분산이 지수적으로 감소하며, 선택 강도와 잡음 스케일을 학습할 수 있다. 사전분포는 과 수준 대조 학습을 연속적인 생성 형태로 일반화해, 이진 지표로 나타낼 수 없던 서로 다른 과 사이 및 같은 과 내의 유사도 차이를 반영한다. 이를 통해 학습 데이터가 적은 종에 대해 연속형 비교계통학을 생물학적 근거가 있는 귀납적 바이어스로 활용한다. 제안한 방법은 미학습 종을 평가하는 CowBird 벤치마크의 두 지표와 CtrlAVES3D에서 AniMer+를 앞섰다. 학습에서 본 종을 평가하는 CUB에서는 비슷한 성능을 냈다. 순열을 적용한 구성 요소 비교 실험으로 분류학적 구조의 효과를 일반적인 가우스 평활화와 구분했다. 분류 계급의 세분성을 바꾼 실험에서는 같은 과 여부를 넘어 목 사이를 구별하는 구조가 미학습 종에서 성능 향상의 주된 원인임을 확인했다.
원문 초록
Recovering 3D pose and shape of birds from single images is bottlenecked by the long tail of avian diversity: out of ~10,000 species, only a few dozen have 3D-labeled training data, and in-the-wild test sets routinely contain species never seen at training. Generalizing across clades is therefore a central problem. The current state of the art, AniMer+, mitigates it with a family-level contrastive loss that conveys only a binary same-family indicator per pair and discards the continuous structure of the species tree. We propose a taxonomic Ornstein-Uhlenbeck prior on the shape code of the AVES parametric bird mesh model: a multivariate Gaussian whose covariance decays exponentially with Linnaean rank distance, with a learnable selection strength and noise scale. The prior generalizes family contrastive into a continuous, generative form, exposing the graded cross- and within-family similarity that a binary indicator cannot, and brings continuous comparative phylogenetics in as a biology-grounded inductive bias for the long tail. Our method improves over AniMer+ on both metrics of the unseen-species CowBird benchmark and on CtrlAVES3D, while remaining comparable on seen-species CUB. A permutation ablation isolates taxonomic structure from generic Gaussian smoothing, and a rank-granularity ablation identifies cross-order distinctions (the structure beyond a family-vs-not indicator) as the dominant source of the unseen-species gain.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.21102v2제출 시각 미확인
- arXiv:2611.21102v1
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.