arXiv:2611.16051v1 cs.CL

고객 서비스 통화에서 합성된 에이전트 음성의 인간다움과 대화 선호도는 서로 다르다

Human-Likeness and Conversational Preference Diverge for Synthesized Agent Speech in Customer-Service Calls

Jeffrey M. Girard, Antony D'Avirro, Jason Z. Zheng, Jacqueline R. Vertino, Benjamin Peloquin

제출 2026-11-11

저자 비고

arXiv Comments

5 pages, 3 figures

한국어 초록

청취자는 에이전트의 음성을 얼마나 사람처럼 들리는지(인간다움)와 얼마나 대화하고 싶은지(대화 선호도)라는 두 기준으로 판단할 수 있다. 청취 테스트에서는 대화 선호도를 묻는 경우가 드물어 두 판단 사이의 관계가 분명하지 않다. 본 연구는 배우들이 고객 서비스 상담원으로서 즉흥 연기한 120개 발화 턴에 대해 짝비교 선택 테스트로 두 판단을 비교하였다. 각 시행에서 두 에이전트가 동일한 턴을 발화하였다. 연구 1에서는 두 에이전트 모두 각각 여덟 개의 음성을 가진 여섯 개의 상용 음성 합성(TTS) 시스템에서 나왔다. 연구 2에서는 한쪽이 배우의 원본 녹음이고 다른 쪽이 시스템이었다. 일부 시스템은 인간다움에서 더 높은 순위를 보였고, 다른 시스템은 대화 선호도에서 더 높은 순위를 보였다. 청취자가 배우보다 시스템을 선택한 비율은 인간다움 시행에서 19%였으나 대화 선호도 시행에서는 36%였다(가장 선호된 시스템의 경우 49%). 두 판단 모두에서 한 시스템 내 음성 간 변동은 시스템 간 변동의 약 4분의 3 수준이었다. 세 가지 자동 자연스러움 점수 중 두 가지는 더 낮은 인간다움을 예측하였고, 어느 것도 대화 선호도를 예측하지 못하였다. 이 환경에서 청취자는 두 판단 모두에서 더 빠른 발화와 절 사이의 더 적은 휴지를 선호하는 경향이 있었고, 대화 선호도에서는 더 큰 음높이 변화를 선호하였다. 따라서 인간다움만 측정하거나 시스템당 하나의 음성만 테스트하면, 청취자가 어떤 에이전트와 대화하기를 더 원하는지를 잘못 판단할 수 있다.

원문 초록

Listeners can judge an agent's speech on how human it sounds (human-likeness) and on how much they would want to talk to it (conversational preference). Listening tests rarely ask about conversational preference, so the relation between the two judgments is unclear. We compared them in paired-choice tests on 120 turns that actors improvised as customer-service representatives. On each trial, two agents spoke the same turn. In Study 1, both agents came from six commercial text-to-speech systems, each with eight voices. In Study 2, one was the actor's original recording and the other a system. Some systems ranked higher on human-likeness, and others on conversational preference. Listeners chose systems over actors in 19% of human-likeness trials but 36% of conversational preference trials (and 49% for the most preferred system). On both judgments, variation among a system's voices was about three-quarters of that between systems. Of three automatic naturalness scores, two predicted lower human-likeness, and none predicted conversational preference. In this setting, listeners tended to favor faster speech and fewer pauses between clauses on both judgments, and more pitch variation for conversational preference. Thus, measuring only human-likeness or testing one voice per system can misjudge which agents listeners would rather talk to.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.16051v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.