SPLIT: Cross-Lingual Empathy and Cultural Grounding in English and Ukrainian LLM Responses
위기 상황(스트레스, 공황, 고독, 내부 피난, 긴장)에서 대규모 언어 모델(LLM)의 영어-우크라이나어 간 공감 능력과 문화적 그라운딩을 평가하기 위해 500개 프롬프트로 구성된 SPLIT 벤치마크를 제안한다. 평가 결과 Gemini-2.5-Flash와 LLaMA-3.3-70B-Instruct는 우크라이나어 응답 시 성능이 저하된 반면 DeepSeek-V3는 비교적 안정적이었으며, 우크라이나어 텍스트 생성이 우크라이나어 정서 지원과 동일하지 않음을 실증적으로 보였다.