CMRVision: 심장 자기공명(CMR) 영상 분석을 위한 파운데이션 모델
CMRVision: A Foundation Model for Cardiac MR Image Analysis
한국어 초록
심장 자기공명(CMR) 영상은 여러 시퀀스와 뷰(view)에 걸쳐 심장 해부학적 구조, 기능 및 조직 특성화에 대한 상호보완적인 정보를 제공합니다. 본 연구에서는 2D CMR을 위한 파운데이션 모델 사전학습(pre-training)을 탐구하고, 다기관·다중 시퀀스로 구성된 3,600만 장의 CMR 이미지 코호트에서 DINOv3 방식의 자기지도학습(self-supervised learning)으로 학습된 CMR 특화 파운데이션 모델인 CMRVision을 소개합니다. 본 연구는 도메인 특화 사전학습을 위한 아키텍처 및 학습 설계 선택을 체계적으로 평가합니다. CMRVision은 시네(cine), 지연 가돌리늄 강조(LGE), 맵핑 시퀀스 전반의 멀티태스크 분할(segmentation)과 시네 뷰 분류(classification)라는 두 가지 다운스트림 태스크에서 평가됩니다. 실험 결과, CMR 특화 사전학습, 더 작은 패치 크기, 패치 수준의 목적 함수가 다운스트림 성능을 일관되게 향상시키는 것으로 나타났습니다. 멀티태스크 분할 벤치마크 전반에서 CMRVision은 기존 자연 이미지(NI), 의료 영상, 지도학습 및 CMR 파운데이션 모델 베이스라인을 능가하며 가장 강력한 전반적 성능을 달성했습니다. 성능 향상은 구조 및 시퀀스 전반에서 완만하지만 일관되게 나타났으며, Dice 점수는 좌심실(LV)의 경우 0.940-0.967, 심근(myocardium)의 경우 0.855-0.905에 달했고, 우심실(RV)은 0.929, 좌심방(LA)은 0.920, 우심방(RA)은 0.931에 도달했습니다. 가장 큰 성능 향상은 LGE 및 맵핑 이미지의 심근 분할에서 관찰되었습니다. 학습 시 접하지 않은 LGE 장축 뷰에 대한 제로샷(zero-shot) 분할 태스크에서 본 모델은 평균 0.692의 Dice 점수를 기록하여 교차 뷰 일반화 능력을 입증했습니다. 시네 뷰 분류에서 CMRVision은 문헌에 보고된 기존 방법들과 비교해 가장 높은 평균 정확도(0.906)를 달성했습니다. 이러한 결과는 여러 시퀀스와 뷰에 걸쳐 견고하고 일반화 가능한 심장 MRI 분석을 지원하는 CMRVision의 잠재력을 강조합니다.
원문 초록
Cardiac magnetic resonance (CMR) imaging provides complementary information on cardiac anatomy, function, and tissue characterization across multiple sequences and views. In this work, we investigate foundation model pretraining for 2D CMR and introduce CMRVision, a CMR-specific foundation model trained using DINOv3-style self-supervised learning on a multi-center, multi-sequence cohort of 36 million CMR images. We systematically evaluate architectural and training design choices for domain-specific pretraining. CMRVision is evaluated on two downstream tasks: multi-task segmentation across cine, late gadolinium enhancement (LGE), and mapping sequences, and cine view classification. Our experiments show that CMR-specific pretraining, smaller patch sizes, and patch-level objectives consistently improve downstream performance. Across a multi-task segmentation benchmark, CMRVision achieved the strongest overall performance, outperforming prior natural-image (NI), medical-image, supervised, and CMR foundation model baselines. Improvements were modest but consistent across structures and sequences, with Dice scores ranging from 0.940-0.967 for LV and 0.855-0.905 for myocardium, and reaching 0.929 for RV, 0.920 for LA, and 0.931 for RA. The largest gains were observed for myocardium segmentation in LGE and mapping images. In a zero-shot segmentation task on unseen LGE long-axis views, the model achieved an average Dice score of 0.692, demonstrating cross-view generalization. For cine view classification, CMRVision achieved the highest average accuracy (0.906), compared to prior methods reported in the literature. These results highlight the potential of CMRVision to support robust and generalizable cardiac MRI analysis across multiple sequences and views.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2609.01308v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.