Improving Instance Optimization in Deformable Image Registration with Gradient Projection
원문 초록
Deformable image registration is inherently a multi-objective optimization (MOO) problem, requiring a delicate balance between image similarity and deformation regularity. These conflicting objectives often lead to poor optimization outcomes, such as being trapped in unsatisfactory local minima or experiencing slow convergence. Deep learning methods have recently gained popularity in this domain due to their efficiency in processing large datasets and achieving high accuracy. However, they often underperform during test time compared to traditional optimization techniques, which further explore iterative, instance-specific gradient-based optimization. This performance gap is more pronounced when a distribution shift between training and test data exists. To address this issue, we focus on the instance optimization (IO) paradigm, which involves additional optimization for test-time instances based on a pre-trained model. IO effectively combines the generalization capabilities of deep learning with the fine-tuning advantages of instance-specific optimization. Within this framework, we emphasize the use of gradient projection to mitigate conflicting updates in MOO. This technique projects conflicting gradients into a common space, better aligning the dual objectives and enhancing optimization stability. We validate our method using a state-of-the-art foundation model on the 3D Brain inter-subject registration task (LUMIR) from the Learn2Reg 2024 Challenge. Our results show significant improvements over standard gradient descent, leading to more accurate and reliable registration results.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
OncoReg: 종양학적 챌린지를 위한 의료 영상 정합
OncoReg: Medical Image Registration for Oncological Challenges
현대 암 연구에서 생성되는 방대한 양의 의료 데이터는 환자 프라이버시와 관련된 문제로 인해 종종 활용되지 못합니다. OncoReg 챌린지는 환자 프라이버시를 보장하면서 더 일반화 가능한 AI 모델의 개발을 촉진하는 2단계 프레임워크를 통해 연구자들이 영상 정합 방법을 개발하고 검증할 수 있도록 하여 이 문제를 해결합니다. 1단계에서는 공개적으로 이용 가능한 데이터셋을 사용하고, 2단계에서는 보안된 병원 네트워크 내의 비공개 데이터셋에서 모델을 학습하는 데 중점을 둡니다. OncoReg는 Learn2Reg 챌린지가 확립한 기반을 바탕으로 구축되었으며, 방사선 치료에서 중재용 원뿔형 빔 컴퓨터 단층 촬영(CBCT)과 표준 계획용 팬빔 CT 영상의 정합을 통합합니다. 정확한 영상 정합은 종양학에서 매우 중요하며, 특히 영상 유도 방사선 치료(IGRT)에서의 동적 치료 조정에 있어서 건강한 조직에 대한 방사선 노출을 최소화하면서 종양을 효과적으로 표적화하기 위해 정밀한 정렬이 필요합니다. 이 연구는 OncoReg 챌린지의 배경이 되는 방법론과 데이터를 상세히 설명하고 대회 참가작과 결과에 대한 포괄적인 분석을 제공합니다. 연구 결과에 따르면 특징 추출이 이 정합 작업에서 핵심적인 역할을 한다는 것이 밝혀졌습니다. 이 챌린지에서 등장한 새로운 방법은 그 다재다능함을 입증했으며, 기존의 접근 방식은 최신 기술과 비슷한 성능을 계속해서 발휘하고 있습니다. 심층 학습과 고전적 접근 방식 모두 여전히 영상 정합에서 중요한 역할을 하며, 특히 특징 추출에서 방법들의 결합이 가장 효과적인 것으로 입증되었습니다.
Are Vision Foundation Models Ready for Out-of-the-Box Medical Image Registration?
Geometry Reduced Order Modeling (GROM) with application to modeling of glymphatic function
CINeMA: Conditional Implicit Neural Multi-Modal Atlas for a Spatio-Temporal Representation of the Perinatal Brain
Pretraining Deformable Image Registration Networks with Random Images
To Glue or Not to Glue? Classical vs Learned Image Matching for Mobile Mapping Cameras to Textured Semantic 3D Building Models
토론
이 논문과 연결된 포럼 글이 아직 없습니다.