국소적 공개를 통한 전략적 에이전트의 오프-정책 평가
Off-Policy Evaluation with Strategic Agents via Local Disclosure
우리는 의사결정 대상(또는 에이전트)이 의사결정자의 정책에 대응하여 공변량(covariate)을 전략적으로 수정하는 전략적 행동 하에서 오프-정책 평가(OPE)를 연구한다. 이러한 행동은 정책 의존적 공변량 이동(covariate shift)을 유발하여, 공변량이 정책에 대해 외생적(exogenous)이라는 기존 방법들의 표준 가정을 깨뜨린다. 관련 연구는 반복적 상호작용이나 에이전트의 반응 행동에 대한 완전한 지식과 같은 강한 가정을 부과함으로써 이 과제를 다루며, 이는 OPE에 대한 적용 가능성을 실질적으로 제한한다. 대조적으로, 우리는 의사결정자가 에이전트의 반응 행동에 대해 부분적인 지식만을 갖는 일회성(one-shot) OPE 설정을 고려한다. 우리의 핵심 통찰은, 사후 설명(post-hoc explanation)을 통해 국소적 정보를 공개하면 적응(adaptation) 이전의 에이전트의 전략 전(pre-strategic) 공변량이 드러나 전략적 행동으로 인한 정보 손실을 완화할 수 있다는 것이다. 이 구조를 활용하여, 우리는 에이전트의 반응에 대한 통계 모델을 추정하고 정책 가치(policy value)에 대한 이중 강건(doubly robust) 추정량을 구성한다. 에이전트의 비용 민감도(cost sensitivity)가 조건부 로그-정규 분포(conditional log-normal distribution)를 따른다고 가정함으로써, 제안한 추정량의 일관성(consistency)을 확립하고 실증적으로 접근법을 검증한다. 더 넓게 보면, 우리의 결과는 상호작용 설계(interaction design)가 에이전트의 전략적 반응에 내재된 숨겨진 구조를 드러냄으로써 정보 비대칭(information asymmetry)을 완화할 수 있음을 보여준다.