DermDepth: 피부과를 위한 단안 단위 척도 3D 재구성 모델
DermDepth: Toward Monocular Metric Scale 3D Reconstruction Models for Dermatology
피부과 진료에서는 상처 또는 피부암의 선별, 모니터링 및 진단의 핵심 요소로서 병변의 크기, 형태 및 질감을 측정하고 추적하는 것이 일상적으로 수행된다. 이 작업을 수행하기 위해 의료진은 일반적으로 상용 카메라 센서로 피부 표면을 촬영한다. 이러한 목표는 본질적으로 3D 정보로부터 이익을 얻을 수 있음에도 불구하고, 이로 인해 연구의 압도적인 초점이 2D 방법에 맞춰져 왔다. 본 논문에서는 추가 하드웨어 또는 다중 촬영 없이도 피부경 검사 및 거시적 사례 모두에서 밀집 단안 3D 재구성, 단위 척도 측정, 풍부한 표면 법선 텍스처 추정이 달성 가능함을 보인다. DermDepth는 피부과 영역을 위한 최초의 단일 시점 단위 척도 3D 모델이며, D-Synth는 픽셀 단위 정밀 3D 정보를 갖춘 최초의 합성 피부경 검사 데이터셋이다. 실험 결과, D-Synth로 DermDepth를 학습하면 실제 피부경 검사 데이터에 대한 단위 척도 오차가 16배 이상에서 1.1배 미만으로 교정되며, 기하학적 품질을 유지하면서 텍스처 풍부함이 증가한다. 소량의 실제 임상 샘플에 대한 미세조정을 통해 수 mm에서 수십 cm 범위, 다양한 피부 톤, 만성 상처 사례를 포괄하는 세 가지 실세계 벤치마크 전반에 걸쳐 본 방법이 일반화되며, 의학 문헌에 보고된 질병 크기와 대체로 일치하는 측정값을 산출한다. 모든 코드, 데이터 및 모델은 https://github.com/hectorcarrion/dermdepth 에서 이용할 수 있다.