arXiv:2611.22248v1 cs.MA

OAK-Mind: 지식 기반 다중 에이전트 LLM으로 수동 센싱 데이터에서 별도 학습 없이 정신 건강 변화 추론하기

OAK-Mind: Zero-Training Mental Health Change Inference from Passive Sensing via Knowledge-Grounded Multi-Agent LLMs

Yishu Ji, Zhihan Jiang, Will Ke Wang, Yuang Fan, Anind K. Dey, Xuhai "Orson" Xu

제출 2026-11-18

한국어 초록

웨어러블과 스마트폰 센서는 정신 건강과 관련된 행동 신호를 수집한다. 이 신호에서 정신 건강 상태를 추론하는 전통적 방법은 레이블이 필요하고 예측 근거를 파악하기 어려운 지도 모델에 의존했다. 대규모 언어 모델(LLM)로 행동 근거를 추론할 수 있으나, 기존 LLM 기반 수동 센싱 접근법도 과제별 미세조정이나 센서별 사전학습에 주로 의존했다. 수동 센싱 데이터에서 정신 건강 변화를 추론하는 별도 학습 없는 지식 기반 다중 에이전트 LLM 파이프라인 OAK-Mind를 소개한다. 센싱 데이터를 수면, 신체 활동, 위치 이동, 스마트폰 사용 등의 행동 차원으로 정리한다. 정신 건강 문헌을 참고하는 전문 에이전트들을 조율해 시간에 따른 행동 변화를 해석한다. 각 평가를 종합하고 설문 기반 증상 평정을 적용해 개인의 기초 평가에 비해 무엇이 달라졌는지 추론한다. 관찰한 행동 양상과 분야 지식을 근거로 사람이 이해할 수 있는 설명도 제공한다. 여러 데이터셋과 예측 과제에서 과제별 추가 학습을 하지 않고도 추가 레이블로 학습한 가장 강한 지도학습 기준선과 비슷하거나 더 높은 성능을 보였다. 시험한 LLM 백본 네 개 모두에서 직접 프롬프팅보다 일관되게 개선됐다. 구성 요소 제거 실험에서는 행동 해석과 증상 평정을 결합하고, 영역별 에이전트에 분석을 분담시키고, 분야 지식을 반영하는 방식의 이점을 확인했다. 이 결과는 지식 기반 다중 에이전트 LLM으로 수동 센싱 데이터에서 별도 학습 없이 정신 건강 변화를 추론할 가능성을 보여 준다.

원문 초록

Wearable and smartphone sensors capture behavioral signals associated with mental health, yet inferring mental health outcomes from these signals has traditionally relied on supervised models requiring labeled data and offering limited insight into their predictions. Large language models (LLMs) offer new opportunities to reason over behavioral evidence, but existing LLM-based approaches to passive sensing have largely continued to rely on task-specific fine-tuning or sensor-specific pretraining. In this paper, we introduce \textbf{OAK-Mind}, a zer\textbf{O}-training, multi-\textbf{A}gent, \textbf{K}nowledge-grounded LLM pipeline for inferring mental health changes from passive sensing data. The pipeline organizes sensing data into behavioral dimensions including sleep, physical activity, location mobility, and smartphone use, and orchestrates specialized agents grounded in mental health literature to interpret longitudinal behavioral changes. It synthesizes their assessments and applies questionnaire-based symptom rating to infer changes relative to an individual's baseline assessment with human-readable rationale grounded in observed behavioral patterns and domain knowledge. Across datasets and prediction tasks, while without task-specific training, OAK-Mind achieves comparable or better performance than the most predictive supervised baselines trained on additional labeled samples. It also demonstrate consistent improvement upon direct prompting across four tested LLM backbones. Ablation analyses support the benefits of combining behavioral interpretation with symptom rating, distributing analysis across domain-specific agents, and incorporating domain knowledge. Our findings highlight the potential of knowledge-grounded, multi-agent LLMs for training-free inference of mental health changes from passive sensing data.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.22248v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.