PyTorchKR Papers

최신 논문

총 1편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2606.26498v1math.OC

평균장 PhiBE: 이산시간 데이터로부터의 연속시간 평균장 강화학습

Mean-Field PhiBE: Continuous-Time Mean-Field Reinforcement Learning from Discrete-Time Data

이산시간 전이 데이터만으로 알 수 없는 McKean-Vlasov 동역학 하에서 연속시간 평균장 제어를 다루기 위해, 와서스타인 공간 위 연속시간 편미분방정식에 단일 스텝 추정기를 넣은 MF-PhiBE를 제안하고 엔트로피 정규화 정책의 정책 그래디언트 정리와 결합해 모델 프리(model-free) 액터-크리틱(actor-critic) 방법을 만든다. 최적 MF-PhiBE 정책의 가치가 연속시간 최적 가치를 Δt 차수 오차로 근사함을 증명했고, 선형-이차(LQR) 경우에는 단일 스텝 데이터로 2차 정확도를 달성하며 LQR 벤치마크와 군중 기피 문제에서 수치적으로 검증했다.