arXiv:2608.25810v1 cs.CV

의사 레이블 불일치를 통한 분포 변화 하 의료 영상 분류를 위한 레이블 없는 파운데이션 모델 선택

Label-Free Foundational Model Selection for Medical Image Classification under Distribution Shift via Pseudo Label Discrepancy

Juan Iñaki Larrea, Lucas Mansilla, Enzo Ferrante

제출 2026-08-26

한국어 초록

파운데이션 모델은 의료 영상 분석에 점점 더 널리 배포되고 있다. 그러나 배포 환경에서 흔한 기관 간 분포 변화(distribution shift) 하에서는 성능 편차가 크며, 거의 제공되지 않는 타깃 도메인 레이블 없이는 성능을 알 수 없다. 이로 인해 실무적인 질문이 남는다. 여러 후보 파운데이션 모델과 소스 도메인의 레이블 데이터가 주어졌을 때, 레이블 없는 타깃 도메인에 배포할 모델은 어느 것인가? 우리는 정답 주석(ground-truth annotation) 없이 임상 AI 시스템을 평가하는 프레임워크인 SUDO에 기반한 레이블 없는 선택 기준을 제안한다. SUDO는 레이블 없는 타깃 데이터를 예측 확률로 구역을 나눈 뒤, 각 구역에서 클래스 오염(class contamination)을 반영하는 의사 레이블 불일치(pseudo-label discrepancy)를 측정한다. 구역 전체에 집계하면 타깃 주석이나 미세조정 없이도 점수(AURCC)를 얻을 수 있다. 우리는 AURCC로 세 가지 병원 간 이동 시나리오에서 흉부 X-ray 분류에 대해 다양한 비전-언어 모델(BioMedCLIP, CXR-CLIP, CheXzero, MedCLIP, MedImageInsight, CLIP)을 제로샷(zero-shot) 및 MLP 프로브(regime) 하에서 순위 매길 수 있음을 보인다. AURCC 순위는 Spearman rho 최대 0.943(p<0.05)까지 정답 순위를 복원한다. 홀드아웃 소스 정확도로 순위를 매기는 자연스러운 기준선(baseline)과 비교하면, 레이블된 소스가 클 때 AURCC는 경쟁력 있고, 소스가 작아지면 더 정확한 순위를 제공한다. 이는 자원이 제한된 환경에서 관심 대상인 영역이다.

원문 초록

Foundation models are increasingly deployed for medical image analysis. However, under the inter-institutional distribution shift typical of deployment, their performance varies widely and cannot be known without target-domain labels, which are rarely available. This leaves a practical question unresolved: given several candidate foundational models and labeled-data from a source domain, which one to deploy in an unlabeled target domain? We propose a label-free selection criterion built on SUDO, a framework for evaluating clinical AI systems without ground-truth annotations. SUDO partitions the unlabeled target data by predicted probability and, for each region, measures a pseudo-label discrepancy reflecting class contamination; aggregated across regions, this yields a score (AURCC) requiring neither target annotation nor fine-tuning. We show that AURCC can be used to rank a variety of vision-language models (BioMedCLIP, CXR-CLIP, CheXzero, MedCLIP, MedImageInsight, CLIP) on chest X-ray classification across three inter-hospital shift scenarios, under zero-shot and MLP-probe regimes. The AURCC ranking recovers the ground-truth ranking with Spearman rho up to 0.943 (p<0.05). Against the natural baseline of ranking by held-out source accuracy, AURCC is competitive when the labeled source is large and yields a more accurate ranking once it is small; the regime of interest in resource-constrained settings.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.25810v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.