arXiv:2611.17529v1 cs.RO

확장되는 커리큘럼을 통한 시각적 세계 모델 계획용 잠재 목표 비용 학습

Learning Latent Goal Costs for Visual World-Model Planning with an Expanding Curriculum

Konstantinos Mylonas, Thrasyvoulos Spyropoulos

제출 2026-11-12

한국어 초록

고정된 시각적 세계 모델을 이용한 이미지 목표 계획은 예측된 관측을 목표와 비교해 점수화하는 방식에 좌우된다. 사전 학습된 시각 인코더의 임베딩 간 평균제곱오차(MSE)는 목표 근처에서는 유용한 신호를 제공할 수 있으나, 장애물 반대편에 있으면서 목표와 시각적으로 비슷하고 도달하기 어려운 상태를 선호할 수 있다. 본 연구에서는 이 잠재 목표 비용을 개선하기 위해 고정된 I-JEPA 임베딩 위에 작은 잔차 어댑터를 학습한다. 각 목표 근처에서 시작하여, 플래너가 점차 넓어지는 초기 상태 영역에서 궤적을 수집한다. 어댑터는 성공한 궤적을 따른 관측의 순서로부터 학습하며, 실패한 롤아웃에서 추론된 추가 비교도 함께 사용한다. 학습에 과제별 진행도 레이블은 사용되지 않으므로, 이 절차는 다른 목표 도달 과제에도 적용할 수 있다. 본 연구에서는 DotWall과 PointMaze를 사용한다. 시작점, 목표, 세계 모델, 플래너 설정이 동일한 50개 사례의 쌍체 평가에서 성공률은 DotWall에서 54%에서 98%로, PointMaze에서 82%에서 96%로 증가한다. 보지 못한 16개의 DotWall 배치-목표 사례에서, 하나의 고정된 배치로 학습한 어댑터는 잠재 비용 순서와 최단 합법 경로 순서 간의 일치도를 71.9%에서 85.8%로 향상시킨다. 이 결과는 인코더나 세계 모델을 재학습하지 않고도 계획 경험이 고정된 시각 표현의 목표 비용을 개선할 수 있음을 시사한다.

원문 초록

Image-goal planning with a frozen visual world model depends on how predicted observations are scored against the goal. Mean-squared error (MSE) between embeddings from a pretrained visual encoder can provide a useful signal near a goal, yet favor states across an obstacle that are visually similar to the goal and difficult to reach. We fit a small residual adapter on top of frozen I-JEPA embeddings to improve this latent goal cost. Starting near each goal, a planner collects trajectories from progressively wider regions of initial states. The adapter learns from the order of observations along successful trajectories, with additional comparisons inferred from failed rollouts. No task-specific progress labels are used for fitting, so the procedure can be applied to other goal-reaching tasks. DotWall and PointMaze are used in this work. In paired 50-case evaluations with identical starts, goals, world models, and planner settings, success increases from 54% to 98% in DotWall and from 82% to 96% in PointMaze. On 16 unseen DotWall layout-goal cases, the adapter fitted on one fixed layout improves agreement between latent-cost ordering and shortest legal-path ordering from 71.9% to 85.8%. The results indicate that planning experience can improve a frozen visual representation's goal cost without retraining the encoder or the world model.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.17529v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.