PyTorchKR Papers

최신 논문

총 2편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2506.08121v3math.OC

완화된 확률 제어 문제를 위한 연속 정책 및 가치 반복과 그 수렴성

Continuous Policy and Value Iteration for Relaxed Stochastic Control Problems and Its Convergence

본 논문에서는 랑주뱅(Langevin) 유형의 동역학을 통해 확률 제어 문제의 가치 함수 근사와 최적 제어를 동시에 업데이트하는 연속 정책-가치 반복(continuous policy-value iteration) 알고리즘을 소개합니다. 본 연구는 무한 구간(infinite horizon)을 갖는 엔트로피 정규화된 완화 제어 문제에 초점을 맞춥니다. 해밀토니안(Hamiltonian)의 단조성 조건 하에서 정책 개선을 확립하고 최적 제어로의 수렴(convergence)을 입증합니다. 정책 반복 방향을 따라 연속적인 업데이트를 수행하기 위해 랑주뱅 유형의 확률 미분 방정식을 활용함으로써, 제안하는 접근법은 머신러닝의 분포 샘플링 기법을 사용하여 가치 함수를 최적화하고 최적 제어를 동시에 식별할 수 있도록 합니다. 비오목(non-concave) 보상(reward)을 갖는 LQ 모델(model)과 비대칭 라플라스(skewed-Laplace) 최적 제어를 갖는 비-LQ 예제에 대한 수치 실험 결과를 제시합니다.

arXiv:2512.23566v2math.DS

기하학에서 역학으로: 기하학적 제약을 통한 희소 관측 데이터에서의 과감쇠 란주빈 역학 학습

From geometry to dynamics: Learning overdamped Langevin dynamics from sparse observations with geometric constraints

드문 관측(sparse observations)에서 확률적 시스템의 역학을 학습하기 위해 추론을 확률적 제어 문제로 재정의하고, 불변 밀도(invariant density)의 기하학적 특성을 활용한 경로 증강을 통해 궤적을 재구성하는 프레임워크를 제안한다. 제안된 방법은 과감쇠 란주빈 시스템(overdamped Langevin systems)에서 매개변수 모델 없이도 기저 역학을 정확하게 복원하여 기존 방법을 능가한다.