CAPTOR: 흉부-복부-골반 종양 CT를 위한 비전-언어 파운데이션 모델
CAPTOR: a vision-language foundation model for Chest-Abdomen-Pelvis Oncologic CT
한국어 초록
목적: 종양 흉부-복부-골반(CAP) CT를 판독하는 영상의학과 의사는 비종양성 질환도 함께 검출해야 하지만, 기존 CT 파운데이션 모델은 단일 해부학적 영역이나 비종양 데이터로 학습되었다. 본 연구에서는 해부학적으로 구조화된 전처리 전략을 사용하여 검사 전체로부터 학습하는, 종양 CAP CT용 비전-언어 파운데이션 모델 CAPTOR를 개발하고 평가하였다. 대상 및 방법: CAPTOR는 후향적 다기관 데이터셋(북미, 유럽, 아시아)의 주로 종양 환자인 CAP CT-판독문 쌍 25,512건(단일 또는 다중 시리즈)으로 사전학습된 대조 비전-언어 모델이다. 보류된 내부 및 공개 테스트 세트에서의 분류와 검색, 그리고 TumorImagingBench를 이용한 생존 예측에서 5개의 CT 파운데이션 모델, 더 큰 규모의 변형 모델(CAPTOR-100K), 해부학적 전처리를 제거한 절제 모델(CAPTOR-NoPre)과 비교하였다. 신뢰구간과 쌍별 비교에는 환자 수준 부트스트랩과 순열 검정을 사용하였다. 결과: 10,794건의 테스트 검사에서 CAPTOR는 CAP(차선 모델 0.695 대비 0.767, p<0.001)와 종양 하위집합(0.734 대비 0.784, p<0.001) 모두에서 5개 모델보다 높은 AUC를 달성하였고 두 경우 모두 검색 성능도 우수했으며, 4개의 종양 생존 벤치마크 중 3개에서 1위를 차지하였다. 훈련 검사 수가 크게 적음에도 CAPTOR-100K와 비슷한 성능을 보였다. 해부학적으로 구조화된 전처리를 제거하면 기관 단위로 보류된 테스트 하위집합을 포함하여 분류 성능이 저하되었다(macro-AUC 0.737 대비 CAPTOR-NoPre 0.691, p<0.01). 결론: 해부학적으로 구조화된 전처리는 다중 시리즈 촬영을 포함한 검사 전체 단위의 CAP CT 해석을 가능하게 하였고 하위 작업 성능을 향상시켰다. CAPTOR는 CAP 및 종양 하위집합에서 최신 CT 파운데이션 모델을 능가하였으며, 훨씬 더 큰 규모의 변형 모델과 대등한 성능을 보였다.
원문 초록
Objectives: Radiologists interpreting oncologic chest-abdomen-pelvis (CAP) CT must also detect non-oncologic conditions, yet existing CT foundation models are trained on single anatomical regions or on non-oncologic data. We developed and evaluated CAPTOR, a vision-language foundation model for oncologic CAP CT that uses an anatomically structured preprocessing strategy to learn from whole examinations. Materials & Methods: CAPTOR is a contrastive vision-language model pretrained on 25,512 predominantly oncologic CAP CT-report pairs (single or multiple series) from a retrospective multicenter dataset (North America, Europe, Asia). It was compared with five CT foundation models, a larger-scale variant (CAPTOR-100K) and an ablation without anatomical preprocessing (CAPTOR-NoPre) on classification and retrieval using held-out internal and public test sets, and on survival prediction using TumorImagingBench. Confidence intervals and pairwise comparisons used patient-level bootstrap and permutation tests. Results: On 10,794 test studies, CAPTOR achieved higher AUC than all five models on CAP (0.767 vs. 0.695 for the next-best model; p<0.001) and oncologic subsets (0.784 vs. 0.734; p<0.001), with superior retrieval on both, and ranked first on three of four oncologic survival benchmarks. Despite substantially fewer training examinations, it performed comparably to CAPTOR-100K. Removing the anatomically structured preprocessing reduced classification performance, including on the institutionally held-out test subset (macro-AUC 0.737 vs. 0.691 for CAPTOR-NoPre, p<0.01). Conclusion: Anatomically structured preprocessing enabled whole-examination CAP CT interpretation, including multiple-series acquisitions, and improved downstream performance. CAPTOR outperformed state-of-the-art CT foundation models on CAP and oncologic subsets while matching a substantially larger-scale variant.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2610.14226v2제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.