arXiv:2611.23189v1 cs.CV

범용 의료 이미지 분할을 위한 검색 증강 교정

Retrieval-Augmented Correction for Generalist Medical Image Segmentation

Vincenzo Marcian\`o, Xiaoming Zhang, Michela Antonelli, Sebastien Ourselin, Maria A Zuluaga

제출 2026-11-18

한국어 초록

자동 분할은 의료 영상을 이용한 정량적 임상 작업의 첫 단계로 널리 쓰이며, 작업자가 예측한 마스크를 이후에 검토하고 교정한다. 현재 남아 있는 구조 오류의 자동 교정은 해부 구조별로 수행하므로, 분할 대상 수만큼 교정 모델을 학습해야 한다. 검증된 과거 사례를 모은 공유 지식 베이스에서 가져온 정보를 바탕으로 입력 마스크를 수정하는 검색 증강 교정 모델 GRACE를 제안한다. 조밀한 장기, 체강, 가지가 있는 혈관, 종양 병변을 포함하는 다기관 말뭉치에서 교정 모델을 한 번 학습한다. 데이터셋 간 전이 평가에서는 학습에서 제외한 데이터셋 3개를 사용해, 학습 데이터만으로 구축한 고정 지식 베이스를 조회했다. 별도의 해부 구조 하나 제외 실험에서는 매개변수를 변경하지 않고 인덱스를 확장할 수 있는지 시험했다. 학습에 없던 실질 장기의 검증된 사례를 지식 베이스에 추가하고 교정 모델은 동결했다. 동결된 멀티모달 인코더에 연결된 경량 형상 인식 투영 헤드는 임베딩 유사도가 마스크 형상의 일치도를 반영하게 한다. 따라서 지식 베이스는 교정 모델이 형상 사전 정보로 활용할 수 있는 사례를 반환한다. CT, MRI, 초음파를 포함하는 공개 데이터셋 18개에서 교정 설정 9개와, 약한 성능부터 중간과 강한 성능까지 포괄하는 선행 분할 모델 7개로 GRACE를 평가했다. 성능 변화는 입력 마스크의 다이스 유사도 계수(DSC)와 함께 보고했다. 약한 분할 모델의 입력 DSC는 0.386이었고, GRACE를 적용하면 최대 0.35 높아졌다. 강한 분할 모델의 입력 DSC는 0.932였으며 평균 변화는 작았다. 학습과 인덱스에 모두 없는 영상 모달리티로의 전이는 제한적이고 해부 구조에 따라 달라져, 후속 연구 과제로 남아 있다. 이 결과는 검색 결과를 조건으로 사용하는 교정이 해부 구조별 교정 모델의 실용적인 대안이 될 수 있음을 시사한다. 코드는 https://github.com/robustml-eurecom/grace 에 공개되어 있다.

원문 초록

Automated segmentation is routinely used as the first step in quantitative image-based clinical workflows, where predicted masks are subsequently reviewed and corrected by human operators. Automated correction of the residual structural errors is currently addressed one anatomy at a time, so the number of trained correctors scales with the number of segmentation targets. We present GRACE, a retrieval-augmented refiner that edits an input mask under context drawn from a shared knowledge base of verified prior cases. The refiner is trained once on a multi-organ corpus spanning compact organs, cavities, branching vessels, and tumour lesions. In the held-out dataset-transfer evaluation, three held-out datasets query a fixed knowledge base built from training data only. A separate leave-one-anatomy-out experiment tests parameter-free index extension: verified cases of an unseen solid organ enter the knowledge base, and the refiner stays frozen. A light shape-aware projection head on a frozen multimodal encoder maps embedding similarity to the shape agreement of the masks, so the knowledge base returns cases that the refiner can use as a shape prior. We evaluate GRACE on 18 public datasets spanning CT, MRI and ultrasound, using nine refinement configurations and seven upstream segmentors that span weak, mid, and strong operating regimes. We report each change with the DSC of its input mask. On the weak tier, the input DSC is 0.386 and GRACE adds up to +0.35 DSC. On a strong segmentor, the input DSC is 0.932 and the mean change is small. Transfer to an imaging modality that is absent from training and from the index is partial and depends on the anatomy, and remains an open research direction. Our results suggest retrieval-conditioned refinement is a practical alternative to anatomy-specific correction models. Code: https://github.com/robustml-eurecom/grace

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.23189v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.