최소 위험 학습을 통한 정전 보고서 생성용 소형 언어 모델 성능 향상
Enhancing Small Language Models for Power Outage Report Generation via Minimum Risk Training
최소 위험 학습(MRT)은 기계 번역 신경망 모델이 토큰 수준 최대 가능도 목적함수에만 의존하지 않고 서열 수준 평가 지표를 직접 최적화할 수 있게 한다 Shen et al. [2016]. 약 10년 전에 도입되었지만, 최근 연구는 현대 언어 모델에서 위험 기반 최적화의 새로운 잠재력을 보여 준다 Yang et al. [2024], Jinnai et al. [2025]. 우리는 Outage Data Initiative Nationwide(ODIN)의 정전 보고서 생성에 MRT를 적용하여, 이질적인 보고서를 CIM IEC 61968-3을 준수하는 표준화된 XML로 변환한다. 우리의 MRT 접근법은 Qwen2.5-7B-Instruct의 전체 정확도를 16.20%에서 68.95%로 향상시켜, 도메인 특화 구조화 생성에 대한 서열 수준 최적화의 효과를 보여 준다.