농업 분야에서 다국어 LLM을 활용한 질의응답을 위한 합성 데이터 활용
Leveraging Synthetic Data for Question Answering with Multilingual LLMs in the Agricultural Domain
농민들이 모국어로 정확한 농업 관련 정보에 적시에 접근할 수 있도록 지원하는 것은 농업 분야의 성공에 매우 중요합니다. 공개적으로 사용 가능한 범용 대규모 언어 모델(LLM)은 일반적으로 일반적인 농업 자문을 제공하여 지역적 및 다국어 맥락에서의 정밀도(precision)가 부족합니다. 본 연구는 인도의 농업 특화 문서로부터 다국어(영어, 힌디어, 펀자브어) 합성 데이터셋을 생성하고 질의응답(QA) 태스크를 위해 LLM을 미세조정(fine-tuning)함으로써 이러한 한계를 해결합니다. 사람이 작성한 데이터셋에 대한 평가(evaluation) 결과, 미세조정된 LLM은 기준선(baseline) 모델에 비해 사실성, 관련성 및 농업적 합의 측면에서 상당한 향상을 보이는 것으로 나타났습니다.