arXiv:2011.09041

SoftSeg: Advantages of soft versus binary training for image segmentation

Charley Gros, Andreanne Lemay, Julien Cohen-Adad

제출 2020-11-18

원문 초록

Most image segmentation algorithms are trained on binary masks formulated as a classification task per pixel. However, in applications such as medical imaging, this "black-and-white" approach is too constraining because the contrast between two tissues is often ill-defined, i.e., the voxels located on objects' edges contain a mixture of tissues. Consequently, assigning a single "hard" label can result in a detrimental approximation. Instead, a soft prediction containing non-binary values would overcome that limitation. We introduce SoftSeg, a deep learning training approach that takes advantage of soft ground truth labels, and is not bound to binary predictions. SoftSeg aims at solving a regression instead of a classification problem. This is achieved by using (i) no binarization after preprocessing and data augmentation, (ii) a normalized ReLU final activation layer (instead of sigmoid), and (iii) a regression loss function (instead of the traditional Dice loss). We assess the impact of these three features on three open-source MRI segmentation datasets from the spinal cord gray matter, the multiple sclerosis brain lesion, and the multimodal brain tumor segmentation challenges. Across multiple cross-validation iterations, SoftSeg outperformed the conventional approach, leading to an increase in Dice score of 2.0% on the gray matter dataset (p=0.001), 3.3% for the MS lesions, and 6.5% for the brain tumors. SoftSeg produces consistent soft predictions at tissues' interfaces and shows an increased sensitivity for small objects. The richness of soft labels could represent the inter-expert variability, the partial volume effect, and complement the model uncertainty estimation. The developed training pipeline can easily be incorporated into most of the existing deep learning architectures. It is already implemented in the freely-available deep learning toolbox ivadomed (https://ivadomed.org).

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2607.10841v1cs.CV공통 태그 Image Segmentation, Data Augmentation

정렬 및 분할: 정렬되지 않은 레이블로부터의 건물 분할을 위한 비지도 학습

Align and Segment: Unsupervised Learning for Building Segmentation From Misaligned Labels

이미지 분할(image segmentation)을 위한 지도 학습은 일반적으로 공간적으로 정렬된 이미지와 레이블 세트를 필요로 합니다. 이미지와 레이블이 서로 다른 출처에서 비롯된 경우, 페어링이 정렬되지 않을 수 있으며, 이는 학습된 모델의 성능을 크게 저하시킬 수 있습니다. 이는 항공 또는 위성 이미지가 다른 출처(예: OpenStreetMap)의 레이블과 함께 공동 등록되는 원격 탐사 분야에서 특히 흔히 발생합니다. 본 연구에서는 레이블 정렬을 동시에 학습하는 정렬되지 않은 레이블 기반 학습을 위한 새로운 접근 방식을 제안합니다. 제안하는 정렬 및 분할(AnS) 방법은 공간 트랜스포머 모듈을 기반으로 어파인 변환을 사용하여 정렬되지 않은 레이블을 변환함으로써, 표준 시맨틱 분할 네트워크에 더 나은 학습 타겟을 제공합니다. 자기지도(self-supervised) 정규화 손실을 통해 이러한 시맨틱 분할 네트워크에서 정렬되지 않은 레이블의 지름길 학습을 방지하며, 특히 체계적으로 정렬되지 않은 학습 데이터에 대해 이 방법이 데이터 증강과 상호 보완적임을 보입니다. AnS 접근 방식의 결정적인 특성은 어떠한 골든 레이블도 요구하지 않고 학습한다는 점입니다. 서로 다른 도시의 합성 데이터와 실세계 데이터 모두에 대한 실험을 통해, 제안 방법이 고품질 건물 분할과 정밀한 레이블-이미지 정렬을 동시에 가능하게 함을 보입니다. 코드와 파생 데이터셋은 https://github.com/venkanna37/align-and-segment 에서 이용할 수 있습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.