교차 도메인 퓨샷 객체 검출을 위한 특징 섭동 기반 프롬프트 주도 시뮬레이션
Prompt-Driven Simulation with Feature Perturbation for Cross-Domain Few-Shot Object Detection
한국어 초록
다양한 시각적 변화를 시뮬레이션하여 소스 분포를 확장하고 합성 도메인 이동(domain shift)을 유도하는 데이터 증강은, 교차 도메인 퓨샷 객체 검출(CD-FSOD)에서 극심한 도메인 이동과 제한된 레이블의 타깃 데이터를 완화하기 위한 단순하면서도 효과적인 전략입니다. 기존 접근법들은 Color-Jitter, Mosaic 같은 전통적인 데이터 증강 및 배경 중심의 적응(예: Domain-RAG)에 의존하지만, 이는 복잡한 도메인 이동을 모델링하는 데 한계가 있어 차선의 성능으로 이어지는 경우가 많습니다. 본 논문에서는 CD-FSOD에서 일반화 성능을 향상시키기 위해 프롬프트 주도 도메인 시뮬레이션과 특징 섭동(feature perturbation) 정규화를 통합한 원칙적인 프레임워크인 PSP-FSOD를 제안합니다. 제어 가능한 도메인 합성을 가능하게 하기 위해, 대규모 VLM의 시각적 그라운딩(visual grounding) 능력을 활용하여 전경과 배경의 변화를 공동으로 모델링하고 의미론적으로 일관되면서도 도메인이 다양한 학습 샘플을 생성하는 프롬프트 주도 전략을 설계합니다. 또한 객체 배치를 유도하고 의미-공간적 불일치를 완화하는 그라운딩 인식 생성 기법을 채택하여 전경 적응을 개선합니다. 학습 안정성과 강건성을 보장하기 위해, 분포 보정을 거친 가우시안 노이즈를 다중 스케일 중간 특징에 주입하여 섭동 하에서도 일관된 예측을 유도하고 도메인 특화 단서에 대한 의존도를 낮추는 노이즈 유도 특징 섭동 메커니즘을 추가로 도입합니다. 광범위한 실험을 통해 PSP-FSOD가 고품질의 도메인 다양성을 갖춘 지도 신호를 생성하고 도메인 불변 표현을 학습하여 여러 CD-FSOD 벤치마크 전반에서 지속적으로 성능을 향상시킴을 입증합니다.
원문 초록
Data augmentation, which simulates diverse visual variations to expand the source distribution and induce synthetic domain shifts, is a simple yet effective strategy for mitigating severe domain shifts and limited labeled target data in cross-domain few-shot object detection (CD-FSOD). Existing approaches rely on conventional data augmentation, such as Color-Jitter, Mosaic, and background-centric adaptation (e.g., Domain-RAG), which are limited in modeling complex domain shifts and often lead to suboptimal performance. In this paper, we propose PSP-FSOD, a principled framework that integrates prompt-driven domain simulation with feature perturbation regularization to improve generalization in CD-FSOD. To enable controllable domain synthesis, we design a prompt-driven strategy that leverages the visual grounding capability of large VLMs to jointly model foreground and background variations, generating semantically consistent yet domain-diverse training samples. Moreover, we adopt a grounding-aware generation scheme that guides object placement and alleviates semantic-spatial misalignment, thereby improving foreground adaptation. To ensure training stability and robustness, we further introduce a noise-induced feature perturbation mechanism that injects Gaussian noise into multi-scale intermediate features with distribution correction, encouraging consistent predictions under perturbations and reducing reliance on domain-specific cues. Extensive experiments demonstrate that PSP-FSOD produces high-quality domain-diverse supervision and learns domain-invariant representations, consistently improving performance across CD-FSOD benchmarks.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.01348v2제출 시각 미확인
- arXiv:2608.01348v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.