arXiv:2608.29733v2 cs.CV

XDG: 가속화된 시각적 모호성 해소

XDG: Accelerated Visual Disambiguation

Gonglin Chen, Ben Southall, Hanyuan Xiao, Wenbin Teng, Haolin Xiong, Tianwen Fu, Junyi Ouyang, Kshitij Singh Minhas, Supun Samarasekera, Rakesh Kumar, Yajie Zhao

제출 2026-08-30

한국어 초록

시각적 aliasing, 즉 도플갱어(doppelganger) 문제는 structure-from-motion(SfM)에서 여전히 핵심 과제이다. 시각적으로 유사하지만 물리적으로는 다른 표면이 잘못된 이미지 매칭을 유발하고 재구성 품질을 떨어뜨릴 수 있다. 기존 연구는 기하학 인식(geometry-aware) 파운데이션 모델 특징으로 이 문제를 완화하지만, 백본 위에 무거운 트랜스포머 분류기를 올려 대규모 모호성 해소(disambiguation) 비용이 크다. 우리는 확장 가능한 SfM을 위해 설계된 효율적인 시각적 모호성 해소 모델 XDG를 제안한다. 핵심 관찰은 3D 파운데이션 모델이 이미 시각적 모호성 해소에 필요한 교차 시점 기하 추론을 수행하므로, 도플갱어 분류는 별도의 무거운 디코더에서 쌍(pair) 추론을 다시 학습하기보다 백본 표현을 직접 적응(adapt)해야 한다는 것이다. XDG는 경량 LoRA 어댑터로 Depth Anything 3를 파인튜닝하고, 카메라 토큰을 컴팩트한 쌍 수준 분류 토큰으로 재활용한다. 컴팩트 MLP 헤드가 후보 이미지 쌍이 동일한 3D 표면을 관측하는지 예측한다. 광범위한 실험에서 XDG는 유리한 정확도-효율 트레이드오프를 제공한다. 쌍wise 및 재구성 벤치마크 전반에서 최신(state-of-the-art) 모호성 해소 방법과 경쟁력을 유지하면서 추론 속도를 3배 이상 높인다. 수천 장의 이미지를 포함하는 개별 LaMAR 장면에서 XDG는 시각적 모호성 해소 처리 시간을 10시간 이상 절감한다. 코드는 https://github.com/xtcpete/xdg 에서 제공된다.

원문 초록

Visual aliasing, also known as the doppelganger problem, remains a key challenge for structure-from-motion (SfM): visually similar but physically distinct surfaces can produce incorrect image matches and degrade reconstruction quality. Previous work mitigates this issue with geometry-aware foundation-model features, but places a heavy transformer classifier on top of the backbone, making large-scale disambiguation expensive. We introduce XDG, an efficient visual disambiguation model designed for scalable SfM. Our key observation is that a 3D foundation model already performs the cross-view geometric reasoning necessary for visual disambiguation, so doppelganger classification should adapt the backbone representation directly rather than relearn pair reasoning in a separate heavy decoder. XDG fine-tunes Depth Anything 3 with lightweight LoRA adapters and repurposes its camera tokens as compact pair-level classification tokens. A compact MLP head predicts whether a candidate image pair observes the same 3D surface. Extensive experiments show that XDG provides a favorable accuracy-efficiency tradeoff: it remains competitive with the state-of-the-art disambiguation method across pairwise and reconstruction benchmarks and delivers more than a 3x inference speedup. On individual LaMAR scenes containing thousands of images, XDG saves more than 10 hours of visual disambiguation processing. Code is available at https://github.com/xtcpete/xdg.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.29733v2제출 시각 미확인
  2. arXiv:2608.29733v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.