arXiv:2610.07008v1 cs.CV

일반화 가능한 퓨샷 클래스 증분 학습을 위한 생성 데이터 큐레이션 학습

Learning to Curate What You Generate for Generalizable Few-Shot Class-Incremental Learning

Junhui Yin, Yuchen Yang, Yilin Yin, Shuai Na, Haoran Xi, Jianhua Yang, Muyi Sun, Man Zhang, Shengfeng He

제출 2026-10-04

저자 비고

arXiv Comments

Accepted by ACM MM 2026

한국어 초록

퓨샷 클래스 증분 학습(FSCIL)은 이전 지식을 보존하면서 제한된 주석으로부터 새로운 클래스를 학습하는 것을 목표로 합니다. 기존 방법들은 일반적으로 충분히 큰 베이스 세션을 가정하지만, 베이스 데이터와 증분 데이터가 모두 부족한 경우에는 이러한 가정이 성립하지 않아 취약한 초기 표현, 의미론적 표류(semantic drift), 불안정한 경계가 발생합니다. 본 연구에서는 베이스 세션 자체에 소수의 클래스만 포함되는, 아직 충분히 탐구되지 않았으나 현실적인 설정인 일반화 가능한 FSCIL(G-FSCIL)을 연구합니다. 합성 데이터가 지도 신호(supervision)의 부족을 완화할 수는 있지만, 생성된 샘플을 단순하게 혼합하면 종종 의미론적 노이즈가 유입되고 기존-신규 클래스 간의 경계 충돌이 악화됩니다. 이를 해결하기 위해, 우리는 안정적인 G-FSCIL을 위한 신뢰할 수 있는 합성 지식을 선별(curate)하는 프레임워크를 제안합니다. 구체적으로, 먼저 동결된 잠재 확산 모델(latent diffusion model)을 사용하여 클래스별 합성 후보 풀을 구성하며, 이때 첫 관측 시점에 클래스 역전(class inversion)이 수행되고 도출된 조건 임베딩은 주문형(on-demand) 생성을 위해 재사용됩니다. 이러한 후보들을 기반으로 의미론적 일관성과 시각적 다양성을 모두 갖춘 샘플을 선택하는 지식 큐레이션 전략을 학습하고, 베이스 세션 동안 이 과정을 전이 가능한 선택 정책으로 증류하여 이후 추가적인 최적화 없이 재사용합니다. 선별된 합성 데이터를 활용하여, 기존-신규 클래스 간 충돌을 완화하기 위한 합성 데이터 기반 프로토타입 초기화와 양방향 경계 보정을 포함하는 경계 안정적인 증분 적응 기법을 추가로 설계합니다. 광범위한 실험을 통해 제안 방법이 망각을 줄이고 기존 클래스와 신규 클래스 간의 균형을 개선하면서 기존 FSCIL 베이스라인 모델들을 일관되게 능가함을 입증합니다. 코드는 https://github.com/NiHaoWoJiaoYYC/G-FSCIL 에서 확인할 수 있습니다.

원문 초록

Few-shot class-incremental learning (FSCIL) aims to learn novel classes from limited annotations while preserving prior knowledge. Existing methods typically assume a sufficiently large base session, but this assumption fails when both base and incremental data are scarce, leading to weak initial representations, semantic drift, and unstable boundaries. We study this underexplored yet realistic setting, termed Generalizable FSCIL (G-FSCIL), where the base session itself contains only a few classes. Although synthetic data can alleviate supervision scarcity, naively mixing generated samples often introduces semantic noise and exacerbates old-new boundary conflicts. To address this, we propose a framework that curates trustworthy synthetic knowledge for stable G-FSCIL. Specifically, we first construct class-specific synthetic candidate pools using a frozen latent diffusion model, where class inversion is performed at the first observation and the resulting condition embeddings are reused for on-demand generation. Building on these candidates, we learn a knowledge curation strategy that selects samples with both semantic consistency and visual diversity, and distill this process into a transferable selection policy during the base session, which is then reused without further optimization. Leveraging the curated synthetic data, we further design a boundary-stable incremental adaptation scheme, including synthetic-informed prototype initialization and bidirectional boundary calibration to mitigate old-new conflicts. Extensive experiments demonstrate that our method consistently outperforms existing FSCIL baselines, with reduced forgetting and improved balance between old and new classes. Code is available at https://github.com/NiHaoWoJiaoYYC/G-FSCIL.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.07008v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.