nhmrc.gov.au

이 이메일 도메인이 관측된 논문 1건

arXiv:2610.02873v1cs.CL

ConvoDrift: 문체 어조 변화 모델링을 위한 다중 턴 대화 데이터셋

ConvoDrift: A Multi-Turn Conversational Dataset for Modeling Stylistic Tone Evolution

대화에서 언어적 문체의 진화는 자연어 처리(NLP) 분야에서 충분히 연구되지 않은 문제입니다. 대부분의 문체 제어 데이터셋은 개별 문장에 초점을 맞추거나 대화 전반에 걸쳐 정적인 문체를 가정하므로, 상호작용 과정에서 사용자 선호도가 변화함에 따라 발생하는 동적인 변화를 포착하지 못합니다. 본 연구에서는 고정된 의미적 의도 하에서 점진적인 대화 문체 어조 변화(conversational tone drift)를 모델링하도록 설계된 데이터셋인 ConvoDrift를 소개합니다. 이 데이터셋은 적응 및 페르소나 조건부 정렬(alignment) 기법을 위한 15,727개의 공유 다중 턴 대화 구조를 기반으로 구축되었습니다. 대화당 6개의 프롬프트-응답 쌍으로 구성되며, 각 쌍에는 문체 변화 및 문체 방향 레이블이 주석되어 있습니다. 이러한 쌍들은 다양한 의사소통 장르를 포괄합니다. 나아가, 의미적으로는 동일하지만 문체적으로 구별되는 응답들을 짝지어 5가지 서로 다른 문체 의사소통 페르소나를 활용해 페르소나 조건부 선호도를 주석한 상호 보완적인 쌍별(pairwise) 데이터셋을 도출함으로써, 언어 어조에서의 개인화 및 다원적 정렬에 대한 통제된 연구를 가능하게 합니다. 데이터셋 구축 외에도 인간 검증, LLM 판별자(LLM-as-judge) 평가, 자동 어휘 및 의미론적 평가를 포함한 종합적인 평가를 수행합니다. 3명의 인간 평가자가 주석한 7가지 리커트(Likert) 척도 기준 전반에서 평균 크리펜도르프 알파(Krippendorff's alpha)는 0.88을 기록했으며, 어휘 및 의미 분석 결과 변화 이벤트가 의미적 유사성을 유지하면서도 어휘적 변화를 유도함을 보여줍니다.