Costal Cartilage Segmentation with Topology Guided Deformable Mamba: Method and Benchmark
원문 초록
Costal cartilage segmentation is crucial to various medical applications, necessitating precise and reliable techniques due to its complex anatomy and the importance of accurate diagnosis and surgical planning. We propose a novel deep learning-based approach called topology-guided deformable Mamba (TGDM) for costal cartilage segmentation. The TGDM is tailored to capture the intricate long-range costal cartilage relationships. Our method leverages a deformable model that integrates topological priors to enhance the adaptability and accuracy of the segmentation process. Furthermore, we developed a comprehensive benchmark that contains 165 cases for costal cartilage segmentation. This benchmark sets a new standard for evaluating costal cartilage segmentation techniques and provides a valuable resource for future research. Extensive experiments conducted on both in-domain benchmarks and out-of domain test sets demonstrate the superiority of our approach over existing methods, showing significant improvements in segmentation precision and robustness.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
FleXray: 범용 임상 X선 분할
FleXray: Universal Clinical X-ray Segmentation
X선(X-ray)은 의학 분야에서 가장 널리 사용되는 영상 양식이지만, 여전히 정량적 활용도가 가장 낮은 편에 속합니다. CT나 MRI 같은 볼륨(volumetric) 영상 양식과 달리 X선은 3차원 해부학적 구조를 2차원 투영으로 압축하므로 구조 간 중첩이 발생하고 전문가에게도 해부학적 경계가 모호해집니다. 그 결과, 범용 분할(segmentation) 시스템을 학습(training)하기 위해 X선 데이터베이스를 라벨링하는 것은 비현실적이며, 형태 계측 및 기능적 X선 분석은 좁은 해부학적 부위와 제한된 응용 분야에 국한되어 왔습니다. 이를 해결하기 위해 본 논문에서는 임상 X선에서 전신에 걸친 해부학적 분할을 수행하는 제너럴리스트 모델(generalist model)인 FleXray를 제시합니다. 대규모의 수동 주석 X선 데이터셋(dataset)을 구축하는 대신, 확장 가능한 물리 기반 생성형 X선 데이터 엔진을 구축합니다. 기존의 3차원 전신 CT 분할 데이터셋과 생성형 이미지 편집 모델을 활용하여 다양한 외관, 생리학적 특성 및 촬영 기하학적 조건을 갖춘 완전히 주석 처리된 2차원 X선을 시뮬레이션합니다. 이러한 시뮬레이션을 통해 학습된 FleXray는 학습에 사용되지 않은 연구용 데이터셋 및 야생(in-the-wild) X선에서 60개의 해부학적 구조를 정확하게 분할합니다. 나아가 FleXray가 X선을 정량적 분석에 직접 활용할 수 있도록 만들어, 질환 중증도 분류를 위한 자동 측정, X선 유도 중재 시술 중의 강건한 내비게이션, 병리학적 대상에 대한 데이터 효율적 학습을 가능하게 함을 보여줍니다. 본 연구진은 모델, 코드, 전신 X선 분할 데이터셋, 그리고 사용하기 쉬운 로컬 브라우저 기반 도구를 https://flexray.csail.mit.edu 에 공개합니다.
CTSpinoPelvic1K: 단일 좌표계의 척추·골반·늑골·대퇴골, 요천추 전환부 해부학 주석
CTSpinoPelvic1K: spine, pelvis, ribs and femora in one coordinate frame, annotated for lumbosacral transitional anatomy
목적: 요천추 접합부 천추는 전체 척추 영상에서 C2부터 caudal 방향으로 세어 이름을 붙이지만, 요추 수술 계획은 C2 없이 요추만 영상(T12–S1)으로 세운다. 복부·골반 CT는 그 구간에 최하위 늑골과 골반까지 포함한다. 요천추 전환 천추(lumbosacral transitional vertebra, LSTV)가 개수를 바꾸면 국소 해부는 모호해진다. 늑골 없는 천추가 네 개이면 요추 늑골을 동반한 L1일 수도 있고 천골에 동화된 L5일 수도 있으며, 여섯 개이면 제6요추, 무형성 늑골을 동반한 T12, 또는 요추화된 S1일 수 있다. CTSpinoPelvic1K는 개수 없이 국소 형태만으로 이를 판별할 수 있는지 묻는다. CTSpine1K의 천추와 CTPelvic1K의 골반은 동일 환자를 각각 다뤘으나 결합되지 않았고, 본 공개판은 한 시리즈에서 이를 결합하고 어느 쪽에도 없던 골을 추가한다. 802건의 CT 기록을 제공하며, 레벨별 늑골·대퇴골, 최하위 늑골 부착 천추와 S1에 고정된 레벨, L6·T13·분리된 S1·요추 늑골 클래스를 두어 이상을 그대로 기록한다. 취득 및 검증 방법: 각 환자의 골량이 가장 많은 시리즈에서 VerSe-native 체계 하에 CTSpine1K와 CTPelvic1K 라벨을 짝지었다. 검증은 기하 불변량(802/802 통과), 5,749개 늑골에 대한 늑골–천추 대응(0.035% 오차), 문헌값과 일치하는 척골–골반 측정을 포함했다. 데이터 형식 및 사용 안내: 환자 단위 그룹·LSTV 계층화 5-fold 분할과 로더가 있는 NIfTI 영상/라벨 쌍; https://doi.org/10.5281/zenodo.22139642 에 보관. 잠재적 응용: 국소 특징으로부터 천추 분류, cadaveric 형태계량 갱신, 척골–골반 평가, 기회적 스크리닝, 공개 수술 전 요추 코호트가 없는 상황에서의 수술 계획 연구(377건 prone). 한계: 흉추 ground truth는 시야(field-of-view) 제한, 자세 각도는 supine, 별도 test set 없음, 늑골은 triaged-review 의사라벨, Castellvi 등급은 33건에 대한 두 판독자 합의.
집중 학습: 의료 이미지 분류를 위한 해부학 유도 어텐션 정규화
Learning To Focus: Anatomy-Guided Attention Regularization for Medical Image Classification
의료 이미지 분류 모델은 예측 시 진단적으로 관련된 영역을 식별하는 것이 이상적으로 기대되지만, 표준 분류 손실은 공간적 감독을 거의 제공하지 않는다. 과제 관련 해부학의 분할 마스크와 같은 해부학적 형태 정보를 통한 명시적 감독은 네트워크를 목표 예측에 관련된 영역으로 유도하는 것으로 나타났다. 그러나 이러한 마스크를 획득하는 데는 상당한 수동 어노테이션 노력과 계산 오버헤드가 수반된다. 다양한 영상 모달리티에서 해부학적 구조를 강력하게 위치 파악하는 분할 파운데이션 모델의 등장으로, 우리는 전용 분할 모델을 학습하는 부담 없이 해부학적 형태 사전 정보를 추출하기 위해 이 능력을 활용한다. 본 논문에서는 사전학습된 분할 파운데이션 모델을 활용하여 다양한 영상 모달리티에서 분류기의 어텐션을 진단적으로 의미 있는 해부학적 구조로 유도하는 해부학적 어텐션 정규화 프레임워크인 Locus를 제안한다. 파운데이션 모델에서 도출된 마스크와의 픽셀 단위 정렬을 강제하는 대신, 해부학적(전경) 영역과 배경 영역 사이의 어텐션을 적응적으로 균형 조정하는 정규화 항을 도입하여 배경 어텐션이 지배적일 때 분류기에 페널티를 부여한다. 우리는 피부경검사, X선, 조직병리학, 심장 MRI를 포괄하는 8개의 다양한 의료 영상 데이터셋에서 Locus를 검증하여, 향상된 해부학적 근거 어텐션과 함께 분류 성능의 일관된 향상을 보여준다.
포괄적 심장 CT 분할 및 표현형 분석을 위한 통합 프레임워크: 휴먼-인-더-루프 데이터 어노테이션, 비전 파운데이션 모델 개발, 다기관 평가 및 임상 검증
A Unified Framework for Comprehensive Cardiac CT Segmentation and Phenotyping: Human-in-the-Loop Data Annotation, Vision Foundation Model Development, Multicenter Evaluation and Clinical Validation
전산화 단층촬영(CT)으로부터 심장 구조물을 포괄적으로 정량화하는 작업은 데이터 가용성이 아닌 측정의 확장성에 의해 제한되어 있어, 임상 현장에서의 일상적 활용이 비현실적이다. 본 연구에서는 휴먼-인-더-루프 어노테이션 파이프라인, 심장 CT 증강 기법, 그리고 60,000개의 레이블 없는 심장 CT 스캔으로 사전학습된 자기지도(self-supervised) 파운데이션 모델을 결합한 포괄적 심장 CT 분할 및 표현형 분석을 위한 통합 프레임워크를 제시한다. 이 방법을 통해 현재까지 구축된 것 중 가장 크고 포괄적인 전문가 어노테이션 심장 CT 분할 데이터셋을 구성하였으며, 총 1,598개 케이스와 14가지 심장 구조물로 이루어져 있다(학습용 1,000개, 외부 테스트 세트 598개). 다섯 개의 외부 데이터셋에서 본 프레임워크는 기존 오픈소스 도구보다 더 정확하고 포괄적으로 모든 구조물을 분할하였다. 자기지도 사전학습은 레이블링 효율성을 향상시켰으며, 저데이터 환경에서의 외부 평가에서 가장 두드러진 성능 향상이 관찰되었다. 합성곱, 트랜스포머, 상태 공간 아키텍처에 걸친 벤치마킹에서 유사한 성능이 나타나, 정확도를 결정하는 요인이 아키텍처가 아닌 데이터 품질과 사전학습임을 시사하였다. 본 프레임워크는 집단 수준의 표현형 분석으로 확장되었으며, 분할된 해부 구조는 인구통계학적 변수 이상으로 심실 기능 및 질병 중증도에 관한 기능적으로 유의미한 정보를 담고 있음이 확인되었다. 사람 레이블이 포함된 최대 규모의 데이터셋, 코드, 모델 가중치, CT 증강 라이브러리, 소프트웨어를 공개함으로써, 본 연구는 일상적으로 획득된 CT 스캔으로부터의 기회적 심장 표현형 분석을 위한 재현 가능한 기반을 제공한다.
원시 분할에서 시뮬레이션 준비 심장 메시까지: 해부학적 재건 및 가상 코호트 생성을 위한 자동화 프레임워크
From Raw Segmentations to Simulation-Ready Cardiac Meshes: An Automated Framework for Anatomical Reconstruction and Virtual Cohort Generation
인간 심장의 계산 모델은 전기-기계적 및 유체역학적 심장 기능을 연구하고 인실리코(in silico) 임상시험과 같은 응용 분야를 지원하는 데 널리 활용된다. 그러나 대부분의 연구는 단일 또는 환자별 해부학적 구조에 국한되어, 불확실성 정량화에 필요한 집단 수준의 변동성을 포함하는 데 한계가 있다. 핵심 과제는 아티팩트, 메시 결함 또는 불연속 도메인을 포함할 수 있는 의료 영상 분할 결과를 다중물리 시뮬레이션에 적합한 위상적으로 일관된 기하학적 구조로 변환하는 것이다. 본 연구에서는 CT 기반 분할 결과를 해부학적 및 위상적 일관성을 유지하면서 수 분 내에 시뮬레이션 준비 심장 메시로 변환하는 반자동 파이프라인을 제시한다. 현대적인 심층 학습 분할 방법을 기반으로, 이 프레임워크는 아티팩트를 정규화하고 메시 품질 제약 조건을 적용하기 위한 템플릿 기반 등록 단계를 통합한다. Chamfer 거리 모핑 전략은 위상을 보존하면서 고품질 템플릿을 각 분할된 심장에 맞게 변형하여 개별 챔버에 정합시킨다. 결과 메시는 수밀(watertight)하고 등위상(isotopological)이며, 일관된 점 대 점 대응 관계를 갖는다. 이 파이프라인은 모든 심장 챔버와 근위 혈관 세그먼트를 포함한 58개의 정상 심장 CT 스캔에서 검증되었다. 결과 메시는 통합된 형상 공간으로 표현될 수 있어 심장 및 주요 혈관의 통계적 형상 모델 구축을 가능하게 한다. 주성분 분석(PCA)은 저차원 잠재 공간이 집단 변동성을 효율적으로 포착함을 보여 주며, 가우시안 혼합 모델링(Gaussian Mixture Modeling)은 합성 해부학적 구조 생성을 가능하게 한다. 전반적으로, 오픈소스로 공개된 제안 프레임워크는 원시 분할 결과에서 시뮬레이션 준비 심장 기하학적 구조까지의 경로를 제공하여 대규모 인실리코 연구를 위한 해부학적으로 일관된 가상 코호트 생성을 지원한다.
STAC: 비디오 추론 분할을 위한 선택적 시공간 집계 및 압축
STAC: Selective Spatiotemporal Aggregation and Compression for Video Reasoning Segmentation
비디오 추론 분할은 복잡한 자연어 쿼리 하에서 수백 프레임에 걸쳐 픽셀 수준의 정확한 객체 추적을 요구하며, 이차(quadratic) 셀프 어텐션 비용으로 인해 장시간 비디오 처리를 불가능하게 만드는 밀집된 시공간 토큰을 생성한다. 기존 방법들은 토큰 압축을 통해 이를 해결하지만, 일반적으로 시간적 문맥이 부족한 인코더 특징에서 작동하여 콘텐츠 중복성을 신뢰성 있게 평가하기 이전에 선택을 제한한다. 정보에 기반한 압축은 문맥 인식을 필요로 하지만, 전체 해상도에서 해당 인식을 획득하면 압축이 줄이고자 하는 바로 그 이차 비용이 발생한다. 상태 공간 모델(state-space model)은 선형 재귀가 $\mathcal{O}(T)$ 비용으로 각 토큰을 시간적 문맥에 선택적으로 조건화하여 콘텐츠 중복성을 평가할 수 있는 표현을 생성함으로써 이 제약을 해결한다. 이를 기반으로, 선택적 시공간 집계 및 압축(STAC)은 분리된 양방향 공간 스캐닝과 인과적 시간 스캐닝을 통해 특징을 강화하고, 재귀에서 파생된 중복성을 활용하여 분할 목표로 최적화된 적응형 임계값을 갖는 계층적 압축을 수행한다. STAC는 제로샷 스트리밍 호환 환경에서 추론 분할 벤치마크의 압축 없는 기준선을 능가하면서 85% 토큰 감소와 1.8배 속도 향상을 달성한다. 코드는 \href{https://github.com/MCG-NKU/nku-video}{여기}에서 이용 가능하다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.