arXiv:2611.23348v1 cs.SD

SIGMA: 임상 인터뷰로부터 화자 분리 및 증상 구조화 기반 멀티모달 우울증 중증도 추정

SIGMA: speaker-isolated, symptom-structured multimodal estimation of depression severity from clinical interviews

Zhuoyuan Tang, Tao Wang, Kai Yang, Li Yuan, Yuezhou Zhang, Rongrong Zhong, Yi Cai, Saskia C. Sanderson, Jaime Delgadillo, Richard Dobson, Angus Roberts

제출 2026-11-19

한국어 초록

임상 인터뷰는 우울증 평가의 핵심이지만 시간이 많이 들고 평가자에 따라 달라진다. 자동 중증도 추정은 확장 가능한 선별을 제공하지만, 기존 방법은 면담자의 발화를 유지하여 참여자의 단서를 교란하거나, 모달리티를 늦게 융합하여 세밀한 교차 모달 동역학을 잃거나, 증상을 독립적으로 채점하여 증상 간 상관관계를 무시하는 경우가 많다. 본 논문은 준임상 인터뷰로부터 우울증 중증도를 추정하는, 화자 인식 및 증상 구조화 프레임워크인 SIGMA를 제시한다. SIGMA는 화자 분리를 사용하여 입력을 참여자 발화로 한정하고, 인코딩 중 텍스트, 오디오, 비디오가 서로를 조건으로 삼도록 교차 어텐션을 사용하며, 공유된 잠재 중증도 특성과 문항별 순서형 임계값을 통해 여덟 개 설문 문항을 함께 예측하는 단계 반응 헤드를 사용한다. Extended Distress Analysis Interview Corpus에서 SIGMA는 최고 수준의 성능(다섯 시드에 걸쳐 CCC 0.762, RMSE 4.13, MAE 3.30)을 달성한다. 제거 실험은 참여자 발화 분리와 결합적·구조적 증상 예측이 각각 일치도와 추정 정확도를 상당히 향상시킴을 확인한다.

원문 초록

Clinical interviews are central to depression assessment but time-consuming and rater-dependent. Automated severity estimation offers scalable screening, yet existing methods often retain interviewer speech (confounding participant cues), fuse modalities late (losing fine-grained cross-modal dynamics), or score symptoms independently (ignoring inter-symptom correlations). We present SIGMA, a speaker-aware, symptom-structured framework for depression-severity estimation from semi-clinical interviews. SIGMA uses speaker diarization to restrict input to participant speech, cross-attention so that text, audio and video condition one another during encoding, and a graded-response head that predicts the eight questionnaire items jointly through a shared latent severity trait with item-specific ordered thresholds. On the Extended Distress Analysis Interview Corpus, SIGMA achieves state-of-the-art performance (CCC 0.762, RMSE 4.13, MAE 3.30 over five seeds). Ablations confirm that isolating participant speech and joint, structured symptom prediction each substantially improve concordance and estimation accuracy.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.23348v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.