arXiv:2506.22343v2 stat.ML

AI-인간 혼합 텍스트에서의 최적 워터마크 비율 추정

Optimal Estimation of Watermark Proportions in Hybrid AI-Human Texts

Xiang Li, Garrett Wen, Weiqing He, Jiayuan Wu, Qi Long, Weijie J. Su

제출 2025-06-27

한국어 초록

대규모 언어 모델(LLM)의 텍스트 워터마크는 합성 텍스트를 탐지하고 인간이 작성한 콘텐츠와 LLM이 생성한 텍스트를 구별하는 데 점점 더 중요한 도구가 되고 있습니다. 기존 연구의 대부분은 텍스트 전체의 워터마크 적용 여부를 판별하는 데 초점을 맞추고 있지만, 많은 실제 시나리오에서는 인간이 작성한 콘텐츠와 워터마크가 적용된 콘텐츠가 뒤섞인 혼합 소스 텍스트를 다루게 됩니다. 본 논문에서는 혼합 소스 텍스트에서 워터마크 비율을 최적으로 추정하는 문제를 다룹니다. 우리는 이 문제를 피벗 통계량(pivotal statistics)에 기반한 혼합 모델(mixture model)의 비율 매개변수를 추정하는 문제로 공식화합니다. 먼저, 특정 워터마킹 기법에서는 이 매개변수가 일치 추정(consistently estimable)은 고사하고 식별 가능(identifiable)조차 하지 않음을 보여줍니다. 이와 극명하게 대조적으로, 탐지를 위해 연속 피벗 통계량을 사용하는 워터마킹 방법의 경우 온건한 조건 하에서 비율 매개변수가 식별 가능함을 증명합니다. 우리는 널리 사용되는 여러 비편향 워터마크를 예시로 포함하는 이 계열의 방법들을 위한 효율적인 추정량(estimator)을 제안하고, 피벗 통계량에 기반한 임의의 가측 추정량(measurable estimator)에 대한 미니맥스 하한(minimax lower bound)을 도출하여 제안하는 추정량이 이러한 하한을 달성함을 보입니다. 합성 데이터와 오픈소스 모델로 생성된 혼합 소스 텍스트 모두에 대한 평가를 통해, 제안된 추정량이 일관되게 높은 추정 정확도를 달성함을 입증합니다.

원문 초록

Text watermarks in large language models (LLMs) are an increasingly important tool for detecting synthetic text and distinguishing human-written content from LLM-generated text. While most existing studies focus on determining whether entire texts are watermarked, many real-world scenarios involve mixed-source texts, which blend human-written and watermarked content. In this paper, we address the problem of optimally estimating the watermark proportion in mixed-source texts. We cast this problem as estimating the proportion parameter in a mixture model based on \emph{pivotal statistics}. First, we show that this parameter is not even identifiable in certain watermarking schemes, let alone consistently estimable. In stark contrast, for watermarking methods that employ continuous pivotal statistics for detection, we demonstrate that the proportion parameter is identifiable under mild conditions. We propose efficient estimators for this class of methods, which include several popular unbiased watermarks as examples, and derive minimax lower bounds for any measurable estimator based on pivotal statistics, showing that our estimators achieve these lower bounds. Through evaluations on both synthetic data and mixed-source text generated by open-source models, we demonstrate that our proposed estimators consistently achieve high estimation accuracy.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2506.22343v2제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.