MedExAgent: 잡음이 있는 임상 환경에서 질문하고, 검사하고, 진단하도록 LLM 에이전트 훈련하기
MedExAgent: Training LLM Agents to Ask, Examine, and Diagnose in Noisy Clinical Environments
한국어 초록
실제 임상 진단은 의사가 환자와의 상호작용과 의학적 검사 수행을 모두 통해 정보를 얻어야 하는 복잡한 과정이다. 또한 의사는 다양한 환자 성향에 적응해야 하며, 과정 중 언제든 발생할 수 있는 잡음이 있고 불완전한 정보에도 대응해야 한다. 그러나 의료용 LLM에 대한 기존 벤치마크와 자동 진단 방법은 이 과정을 단일 턴 질의응답, 잡음 없는 대화, 순차적 검사 수행 등으로 단순화하여, 임상 진단의 상호작용적이고 불확실한 특성을 간과한다. 본 논문은 이러한 간극을 해소하기 위해 임상 진단을 환자에게 질문하기, 도구 호출로서 의학적 검사 지시하기, 진단 내리기의 세 가지 행동 유형을 갖는 부분 관측 마르코프 결정 과정(POMDP)으로 형식화한다. 또한 7가지 환자 잡음 유형과 3가지 검사 잡음 유형으로 구성된 체계적인 잡음 모델을 도입한다. 제안한 환경을 사용하여, 우리는 두 단계 파이프라인을 통해 효과적인 진단 에이전트 \textbf{MedExAgent}를 훈련한다. 먼저 임상 면담을 위한 Calgary-Cambridge 모델에 따라 구조화한 합성 대화에 대해 지도 미세조정을 수행하고, 이어서 DAPO를 적용하여 진단 정확도, 도구 호출 품질, 그리고 금전적 비용과 환자의 불편을 포함한 검사 비용을 반영한 복합 보상을 최적화한다. 광범위한 실험과 제거 연구를 통해 MedExAgent가 비용 효율적인 검사 전략을 유지하면서도 더 큰 모델에 필적하는 진단 성능을 달성함을 보인다.
원문 초록
Real-world clinical diagnosis is a complex process in which the doctor is required to obtain information from both interaction with the patient and conducting medical exams. Additionally, the doctor needs to adapt to different patient personas, as well as noisy and incomplete information that can happen at any time during the process. However, existing benchmarks for medical LLMs and methods for automatic diagnosis largely simplify this process by reducing it to single-turn question answering, noise-free conversations, or sequential exam making, etc., ignoring the interactive and uncertain nature of clinical diagnosis. In this paper, we aim to address this gap by formalizing clinical diagnosis as a Partially Observable Markov Decision Process (POMDP) with three action types: questioning the patient, ordering medical exams as tool calls, and issuing a diagnosis. We also introduce a systematic noise model comprising seven patient noise types and three exam noise types. Using our proposed environment, we train an effective diagnosis agent, \textbf{MedExAgent}, through a two-stage pipeline that first performs supervised finetuning on synthetic conversations structured after the Calgary-Cambridge model for clinical interviews, and then applies DAPO to optimize a composite reward capturing diagnostic accuracy, tool call quality, and exam cost including financial cost and patient discomfort. Through extensive experiments and ablation studies, we demonstrate that MedExAgent achieves diagnostic performance comparable to larger models while maintaining cost-efficient examination strategies.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2605.07058v2제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.