CAST: 학습 없는 생의학 문맥 내 분할을 위한 대응 관계 보정
CAST: Calibrating Correspondences for Training-Free Biomedical In-Context Segmentation
한국어 초록
생의학 이미지 분할은 새로운 해부 구조, 대상자, 영상 모달리티, 촬영 절차에 대응해야 한다. 그러나 전문가의 조밀한 주석은 부족하고, 한 코호트에서 학습한 모델을 다른 코호트로 옮기기 어려운 경우가 많다. 문맥 내 분할(ICS)에서는 추론 시 주석이 있는 예시 몇 개로 새로운 구조를 지정한다. 그래도 생의학 이미지에서 정확한 대응점을 찾기는 어렵다. 인접 구조의 외관이 비슷하고 대상자나 촬영 조건에 따른 변화로 차이를 구별하기 더 어려워지기 때문이다. 동결한 DINOv3 백본으로 세밀한 대응 관계를 보정하며 추가 학습이 필요 없는 CAST를 소개한다. 안정성 검사는 전역 및 패치 수준 모두에서 특징의 신뢰도를 높인다. 일관성 검사는 후보 대응 관계가 일관된 국소 구조 문맥으로 뒷받침되는지 평가한다. 두 검사를 결합하면 다양한 해부 구조와 촬영 조건에서도 더 신뢰성 있게 대응점을 찾을 수 있다. 2D 및 3D 분할과 대상자 간, 모달리티 간 전이를 포함하는 생의학 벤치마크 여덟 개에서 CAST는 종합 성능이 가장 높은 기준선보다 다이스 점수가 12.34%포인트 높았고, 3차원 볼륨 설정 여섯 개 모두에서 1위를 기록했다. 2D에서 3D로의 분할, 해부학 아틀라스 레이블 전이 등 난도 높은 응용에도 활용할 수 있다.
원문 초록
Biomedical image segmentation must keep up with new anatomical structures, subjects, imaging modalities, and acquisition protocols, yet dense expert annotations are scarce and models trained on one cohort often struggle to transfer. In-context segmentation (ICS) offers a way out: a new structure is specified by a few annotated exemplars at inference time. However, reliable correspondence remains challenging in biomedical images, where adjacent structures often share similar appearances, and variations across subjects and imaging conditions further obscure their distinctions. We introduce CAST, a training-free framework built on a frozen DINOv3 backbone to calibrate fine-grained correspondences. Its stability test improves feature reliability at both global and patch-specific levels, while its coherence test assesses whether candidate correspondences are supported by consistent local structural context. Together, these tests enable more reliable correspondence across diverse anatomical structures and imaging conditions. Across eight biomedical benchmarks spanning 2D and 3D segmentation, cross-subject, and cross-modality transfer, CAST outperforms the strongest overall baseline by 12.34 percentage points in Dice and ranks first across all six volumetric settings. The versatility of CAST further opens up opportunities for challenging biomedical applications, including 2D-to-3D segmentation and atlas label transfer.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.22995v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.