확장되는 커리큘럼을 통한 시각적 세계 모델 계획용 잠재 목표 비용 학습
Learning Latent Goal Costs for Visual World-Model Planning with an Expanding Curriculum
한국어 초록
고정된 시각적 세계 모델을 이용한 이미지 목표 계획은 예측된 관측을 목표와 비교해 점수화하는 방식에 좌우된다. 사전 학습된 시각 인코더의 임베딩 간 평균제곱오차(MSE)는 목표 근처에서는 유용한 신호를 제공할 수 있으나, 장애물 반대편에 있으면서 목표와 시각적으로 비슷하고 도달하기 어려운 상태를 선호할 수 있다. 본 연구에서는 이 잠재 목표 비용을 개선하기 위해 고정된 I-JEPA 임베딩 위에 작은 잔차 어댑터를 학습한다. 각 목표 근처에서 시작하여, 플래너가 점차 넓어지는 초기 상태 영역에서 궤적을 수집한다. 어댑터는 성공한 궤적을 따른 관측의 순서로부터 학습하며, 실패한 롤아웃에서 추론된 추가 비교도 함께 사용한다. 학습에 과제별 진행도 레이블은 사용되지 않으므로, 이 절차는 다른 목표 도달 과제에도 적용할 수 있다. 본 연구에서는 DotWall과 PointMaze를 사용한다. 시작점, 목표, 세계 모델, 플래너 설정이 동일한 50개 사례의 쌍체 평가에서 성공률은 DotWall에서 54%에서 98%로, PointMaze에서 82%에서 96%로 증가한다. 보지 못한 16개의 DotWall 배치-목표 사례에서, 하나의 고정된 배치로 학습한 어댑터는 잠재 비용 순서와 최단 합법 경로 순서 간의 일치도를 71.9%에서 85.8%로 향상시킨다. 이 결과는 인코더나 세계 모델을 재학습하지 않고도 계획 경험이 고정된 시각 표현의 목표 비용을 개선할 수 있음을 시사한다.
원문 초록
Image-goal planning with a frozen visual world model depends on how predicted observations are scored against the goal. Mean-squared error (MSE) between embeddings from a pretrained visual encoder can provide a useful signal near a goal, yet favor states across an obstacle that are visually similar to the goal and difficult to reach. We fit a small residual adapter on top of frozen I-JEPA embeddings to improve this latent goal cost. Starting near each goal, a planner collects trajectories from progressively wider regions of initial states. The adapter learns from the order of observations along successful trajectories, with additional comparisons inferred from failed rollouts. No task-specific progress labels are used for fitting, so the procedure can be applied to other goal-reaching tasks. DotWall and PointMaze are used in this work. In paired 50-case evaluations with identical starts, goals, world models, and planner settings, success increases from 54% to 98% in DotWall and from 82% to 96% in PointMaze. On 16 unseen DotWall layout-goal cases, the adapter fitted on one fixed layout improves agreement between latent-cost ordering and shortest legal-path ordering from 71.9% to 85.8%. The results indicate that planning experience can improve a frozen visual representation's goal cost without retraining the encoder or the world model.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.