arXiv:2605.11654v3 cs.CV

Skypart: 프로토타입 기반 의미 부분 발견을 통한 날씨에 강건한 교차 시점 지오로컬라이제이션

Skypart : Weather-Robust Cross-View Geo-Localization via Prototype-Based Semantic Part Discovery

Chi-Nguyen Tran, Dao Sy Duy Minh, Huynh Trung Kiet, Nguyen Lam Phu Quy, Phu-Hoa Pham, Long Tran-Thanh

제출 2026-11-18

한국어 초록

저고도 경제가 빠르게 성장하면서 신뢰할 수 있는 드론 항법에 대한 수요가 증가하고 있다. 배송, 점검, 수색 구조와 같은 일반적인 작업은 교란, 기만 또는 이용 불가 상태가 될 수 있는 위성항법시스템(GNSS)에 의존한다. 경사 드론 시점을 지리 참조된 위성 타일과 매칭하는 교차 시점 지오로컬라이제이션(CVGL)은 GNSS가 실패할 때 자율 위치 추정을 위한 대안을 제공한다. 그러나 현재의 CVGL 방법에는 세 가지 한계가 있다. (1) 전역 기술자는 패치 격자를 단일 벡터로 압축하여, 교차 시점에서 공유되는 레이아웃과 시점 특유의 텍스처를 분리하지 못한다. (2) 고도와 관련된 스케일 변동이 불필요한 교란 요인으로 주변화되지 않고 학습된 임베딩에 남는다. (3) 다목적 학습이 기울기 스케일이 서로 맞지 않음에도 수작업으로 조정한 손실 가중치를 사용한다. 우리는 패치를 명시적으로 부분으로 묶는, 패치 기반 비전 트랜스포머(ViT)를 위한 경량의 교체 가능한 헤드인 SKYPART를 제안한다. 이는 (i) 단일 패스 코사인 할당을 통해 패치 토큰을 두고 경쟁하는 학습 가능한 프로토타입, (ii) 학습 중에만 사용되어 추론 시 고도에 무관한 검색 임베딩을 산출하는 고도 조건부 선형 변조, (iii) 활성 프로토타입에 대한 그래프 어텐션 리드아웃, (iv) 손실 그룹 가중치를 종단 간으로 학습하는 Kendall 불확실성 가중 다목적 학습을 결합한다. SKYPART는 26.95M 파라미터와 22.14 GFLOPs로 비교 대상 중 가장 작으면서 최고 성능을 보이는 방법이며, 재순위화나 테스트 시점 증강(TTA) 없이 단일 패스 검색으로 SUES-200, University-1652, DenseUAV에서 최고 수준의 결과를 달성한다. 가장 강력한 베이스라인에 대한 정확도 우위는 10가지 WeatherPrompt 손상 조건에서 더욱 커진다. 코드: https://github.com/chisngyen/SkyPart.

원문 초록

The low-altitude economy is growing rapidly, increasing demand for reliable drone navigation. Common tasks such as delivery, inspection, and search-and-rescue rely on Global Navigation Satellite Systems (GNSS), which can be jammed, spoofed, or unavailable. Cross-view geo-localization (CVGL), which matches an oblique drone view to a geo-referenced satellite tile, offers an alternative for autonomous localization when GNSS fails. However, current CVGL methods have three limitations: (1) global descriptors compress patch grids into a single vector, without separating cross-view-shared layout from view-specific texture; (2) altitude-related scale variation remains in the learned embedding instead of being marginalized as a nuisance; and (3) multi-objective training uses hand-tuned loss weights despite incompatible gradient scales. We propose SKYPART, a lightweight, swappable head for patch-based vision transformers (ViTs) that explicitly groups patches into parts. It combines (i) learnable prototypes that compete for patch tokens through single-pass cosine assignment; (ii) altitude-conditioned linear modulation used only during training, yielding altitude-free retrieval embeddings at inference; (iii) graph-attention readout over active prototypes; and (iv) Kendall uncertainty-weighted multi-objective learning that learns loss-group weights end-to-end. With 26.95M parameters and 22.14 GFLOPs, SKYPART is the smallest top-performing method in our comparison and achieves state-of-the-art results on SUES-200, University-1652, and DenseUAV using single-pass retrieval without reranking or test-time augmentation (TTA). Its accuracy advantage over the strongest baseline further increases under ten WeatherPrompt corruption conditions. Code: https://github.com/chisngyen/SkyPart.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2605.11654v3제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.