arXiv:2610.10167v1 stat.ME

약한 신호 환경에서의 정책 학습

Policy Learning with Weak Signals

Benedikt Koch, Winston Chou, Aurélien Bibaut, Nathan Kallus

제출 2026-10-07

한국어 초록

디지털 실험에서의 정책 학습(policy learning)은 낮은 신호 대 잡음비(SNR), 풍부한 공변량 공간, 대규모 데이터라는 세 가지 문제에 직면합니다. 본 연구에서는 점점 더 세분화되는 공변량 분할로부터 얻은 처치 효과(treatment-effect) 추정치를 유계된 신호 대 잡음비를 갖는 가우시안 관측치로 모델링하여 이러한 영역을 정형화합니다. 연구진은 이러한 설정에서 일반적으로 최적 처치 정책을 학습할 수 없음을 밝힙니다. 최적 정책 가치를 학습하는 것조차 비실용적으로 느린 수렴 속도를 겪습니다. 그러나 처치 효과가 매끄럽게(smoothly) 변할 때, 점근적으로 소멸하는 후생 후회(welfare regret)를 달성하는 선형 평활기(linear smoother) 기반의 미니맥스 적응형 정책을 도출합니다. 연구진은 이 프레임워크를 넷플릭스의 대규모 실제 실험에 적용하여 실용적 가치를 입증하며, 이러한 까다로운 실증적 환경에서도 개인화된 선형 평활 정책이 비개인화 정책보다 우수할 수 있음을 보여줍니다.

원문 초록

Policy learning in digital experimentation faces three challenges: weak signal-to-noise ratios, rich covariate spaces, and massive data volumes. We formalize this regime by modeling treatment-effect estimates from increasingly fine covariate partitions as Gaussian observations with bounded signal-to-noise ratios. We establish that, in general, the optimal treatment policy is not learnable in this setting. Even learning the optimal policy value suffers from impractically slow rates. However, when treatment effects vary smoothly, we derive minimax-adaptive policies based on linear smoothers that achieve vanishing welfare regret. We demonstrate the practical value of our framework by applying it to large-scale real-world experiments at Netflix, showing that personalized linear-smoothing policies can dominate unpersonalized policies even in this challenging empirical setting.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.10167v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.