신뢰할 수 있는 임상 트리아지를 위한 도메인 적응 소형 언어 모델
Domain-Adapted Small Language Models for Reliable Clinical Triage
한국어 초록
정확하고 일관된 응급중증도지수(Emergency Severity Index, ESI) 부여는 응급실에서 여전히 지속적인 과제로 남아 있으며, 매우 가변적인 자유 텍스트 트리아지 기록이 오분류(mistriage)와 업무 흐름 비효율성을 야기한다. 본 연구는 오픈소스 소형 언어 모델(Small Language Model, SLM)이 임상 트리아지를 위한 신뢰할 수 있고 프라이버시를 보존하는 의사결정 지원 도구로 활용될 수 있는지를 평가한다. 다양한 프롬프트 파이프라인에 걸쳐 여러 SLM을 체계적으로 비교한 결과, 트리아지 기록을 간결하게 요약한 임상 비네트(clinical vignette)가 가장 정확한 예측을 산출함을 확인했다. SLM 중 Qwen2.5-7B가 정확도, 안정성, 계산 효율성 간의 균형이 가장 우수한 것으로 나타났다. 전문가가 큐레이션한 데이터와 실버 표준(silver-standard) 소아 트리아지 데이터를 활용한 대규모 도메인 적응을 통해, 미세조정된 Qwen2.5-7B 모델은 불일치(discordance)와 임상적으로 중요한 오류를 크게 줄였으며, 모든 기준선 SLM과 GPT-4o와 같은 고급 독점 대규모 언어 모델(LLM)을 능가했다. 이러한 결과는 신뢰할 수 있고 프라이버시를 보존하는 ESI 의사결정 지원을 위한 기관별 SLM의 실현 가능성을 보여주며, 더 복잡한 추론 전략보다 표적화된 미세조정의 중요성을 강조한다.
원문 초록
Accurate and consistent Emergency Severity Index (ESI) assignment remains a persistent challenge in emergency departments, where highly variable free-text triage documentation contributes to mistriage and workflow inefficiencies. This study evaluates whether open-source small language models (SLMs) can serve as reliable, privacy-preserving decision-support tools for clinical triage. We systematically compared multiple SLMs across diverse prompting pipelines and found that clinical vignettes, concise summaries of triage narratives, yielded the most accurate predictions. The SLM, Qwen2.5-7B, demonstrated the strongest balance of accuracy, stability, and computational efficiency. Through large-scale domain adaptation using expert-curated and silver-standard pediatric triage data, fine-tuned Qwen2.5-7B models substantially reduced discordance and clinically significant errors, outperforming all baseline SLMs and advanced proprietary large language models (LLMs, e.g., GPT-4o). These findings highlight the feasibility of institution-specific SLMs for reliable, privacy-preserving ESI decision support and underscore the importance of targeted fine-tuning over more complex inference strategies.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.