MEDIAREF: A Public Knowledge Store for Media Background Checks
자동 팩트체킹(AFC)에서 검색-증강 생성(RAG) 시스템이 출처의 신뢰성을 검증 없이 그대로 활용하는 문제를 해결하기 위해, 200개 미디어 출처에 대한 미디어 배경 정보(Media Background Check) 생성을 재현 가능하고 저비용으로 평가할 수 있는 공개 지식 저장소 MEDIAREF를 제안한다. MEDIAREF를 활용해 다양한 대규모 언어 모델(LLM)을 평가한 결과, 외부 정보 검색을 결합했을 때 자동 및 정성 평가 모두에서 더 정확한 미디어 배경 정보가 생성됨을 확인했다.