DECODE: 통제된 순차적 의사결정 평가를 위한 분해 가능한 환경
DECODE: Decomposable Environments for COntrolled Sequential-Decision Evaluation
한국어 초록
순차적 의사결정 시스템이 최적에 미치지 못할 때, 그 점수는 어떤 수정이 의사결정을 개선할지 알려 주지 않는다. DECODE는 계획과 이용 가능한 정보에 대한 통제된 실험을 통해 이러한 수정을 검증하는 벤치마크이다. 소비자 신용 추심 생성기는 알려진 동역학 행렬을 공유하고 기억 매개변수와 과정 잡음을 달리하는 다섯 가지 부분 관측 환경을 제공한다. 실험은 풀이기의 나머지 부분을 고정한 채 선택된 입력이나 계획 규칙을 변경한다. 각 비교는 풀이기의 상태 입력, 반응 입력, 계획 기간을 명시한다. 은닉 상태를 이용한 6개월 계획과 1개월 계획 간의 큰 격차를 기준으로 선택된 결정론적 기본 환경에서, 계획을 1개월에서 6개월로 늘리면 두 그래디언트 부스팅 풀이기의 점수가 은닉 상태와 차입자 특성으로 계산한 정확한 최적값의 15 내지 17 퍼센트포인트만큼 증가한다. 이 기간에서도 상환 반응을 로그로 적합한 최고 등급 풀이기는 그 최적값보다 15.6포인트 낮은 상태로 남는다. 명시된 개입 순서에서 상태 입력에 대한 세 가지 변경과 탐색 중 그 평가는 점수를 6.3포인트 낮추고, 이후 적합된 상환 모델을 은닉 차입자 특성으로 평가한 참 반응으로 교체하면 15.6포인트 상승하여 그중 9포인트가 순회복된다. 중간 효과는 상환 모델과 변경 순서에 조건부이므로 격차를 개별 원인에 유일하게 배분하지는 않는다. 이러한 한계 내에서 DECODE는 알려진 동역학과 명시적 정보 조건 아래 지정된 개입을 통해 풀이기 성능에 관한 가설을 검증 가능하게 한다.
원문 초록
When a sequential decision system falls short of an optimum, its score does not reveal which modifications would improve its decisions. DECODE is a benchmark for testing such modifications through controlled experiments on planning and available information. Its consumer-credit collections generator provides five partially observed environments that share known dynamics matrices and vary a memory parameter and process noise. The experiments change selected inputs or planning rules while keeping the rest of the solver fixed. Each comparison specifies the solver's state inputs, response inputs and planning horizon. On the deterministic base environment, which was selected for a large gap between six-month and one-month planning with the hidden state, extending planning from one to six months increases the scores of two gradient-boosted solvers by 15 to 17 percentage points of the exact optimum, computed with the hidden state and borrower traits. Even at this horizon, the best graded solver, whose repayment response is fitted on logs, remains 15.6 points below that optimum. In a specified intervention sequence, three changes to its state inputs and their evaluation during search lower its score by 6.3 points, and replacing its fitted repayment model with the true response, evaluated with hidden borrower traits, then raises it by 15.6, a net recovery of nine of those points. Because the intermediate effects are conditional on the repayment model and the order of the changes, they do not uniquely assign the gap to separate causes. Within these limits, DECODE makes hypotheses about solver performance testable through specified interventions under known dynamics and explicit information conditions.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
22 pages, 5 figures, 11 tables. Code: https://github.com/alpha-synthesis/decode-arxiv. Archived release: https://doi.org/10.5281/zenodo.24200270