arXiv:2608.24855v1 cs.CV

LeFlow: 월드 모델을 위한 생성적 잠재 플로우 계획

LeFlow: Generative Latent Flow Planning for World Models

Hsiang-Wei Huang, Jianxu Shangguan, Junbin Lu, Jenq-Neng Hwang

제출 2026-08-25

한국어 초록

잠재 월드 모델(latent world model)은 이미지 픽셀을 잠재 임베딩으로 변환하는 본질적으로 강력한 인코더이지만, 기존 월드 모델은 행동 계획(action planning)에 여전히 온라인 궤적 최적화(trajectory optimization)에 의존한다. 모든 상태-목표(state-goal) 쌍마다 반복 옵티마이저를 처음부터 실행해 최적 행동 시퀀스를 탐색하며, 월드 모델을 블랙박스 시뮬레이터로 취급한다. 이 방식은 재계획(replanning) 단계마다 반복 최적화 비용을 전부 새로 지불하고, 쿼리 간 계획 경험을 재사용하지 않는다. 본 연구에서는 잠재 월드 모델이 학습된 뒤 계획(planning) 자체를 상각(amortize)할 수 있는지 묻는다. LeFlow를 제시하는데, 이는 월드 모델로부터 잠재 역학(latent dynamics) 공간에서 직접 작동하는 재사용 가능한 잠재 궤적 사전(latent trajectory prior)을 학습한다. LeFlow는 계획을 조건부 잠재 궤적 생성으로 재구성한다. rectified-flow 모델이 현재와 목표 임베딩 사이의 미래 잠재 경로를 상상하고, 역역학(inverse dynamics) 디코더가 잠재 전이를 행동 청크(action chunk)로 바꾸며, 고정(frozen) 월드 모델이 각 후보를 자회귀(autoregressive) 롤아웃으로 검증한다. 네 가지 주요 목표 조건(goal-conditioned) 픽셀 제어 벤치마크에서 LeFlow는 반복적 행동 공간 최적화를 상각된(amortized) 잠재 계획과 고정 예산 롤아웃 선택으로 대체하여, 계획 시간을 한 자릿수(order-of-magnitude) 줄이면서도 일관된 성공률 향상을 달성한다. 결과는 잠재 월드 모델이 예측뿐 아니라 재사용 가능한 계획 사전(planning prior)도 지원해야 함을 시사한다. 코드는 https://github.com/hsiangwei0903/LeFlow 에서 제공한다.

원문 초록

Latent world models are inherently strong encoders that transform image pixel to latent embedding, yet existing world models still rely on online trajectory optimization for action planning: for every state-goal pair, an iterative optimizer is run from scratch to search for optimal action sequences, treating the world model as a black-box simulator. This approach pays the full iterative optimization cost anew at every replanning step and reuses no planning experience across queries. In this work, we ask whether planning itself can be amortized once a latent world model has been learned. We present LeFlow, which learns a reusable latent trajectory prior operating directly in the latent dynamics space from the world model. LeFlow recasts planning as conditional latent trajectory generation: a rectified-flow model imagines a future latent path between the current and goal embeddings, an inverse dynamics decoder turns latent transitions into action chunks, and the frozen world model verifies each candidate by autoregressive rollout. Across four major goal-conditioned pixel-control benchmarks, LeFlow replaces iterative action-space optimization with amortized latent planning and fixed-budget rollout selection, achieving consistent success-rate gains with an order-of-magnitude reduction in planning time. Our results argue that latent world models should support not only prediction but reusable planning priors. Our code is available at https://github.com/hsiangwei0903/LeFlow.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.24855v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.