RePlan-VLA: 장기 과제용 비전-언어-행동 모델을 위한 진행 인식 재계획
RePlan-VLA: Progress-Aware Replanning for Long-Horizon Vision-Language-Action Models
한국어 초록
비전-언어-행동(VLA) 모델은 범용 로봇 조작을 위한 유망한 패러다임으로 부상했으나, 서로 의존적인 여러 조작이 필요한 장기 과제에서는 성능이 저하되는 경우가 많다. 본 논문은 VLA 정책에 장기 추론, 기억, 행동 생성, 진행 추적, 오류 복구의 부담을 지우는 대신, 실행 인식 프레임워크 안에서 VLA의 단기 조작 능력을 활용해야 한다고 주장한다. 이를 위해 VLA의 단기 능력을 신뢰할 수 있는 장기 실행으로 변환하는 VLA 비종속 프레임워크인 \textnormal{\textbf{RePlan-VLA}}를 제안한다. RePlan-VLA는 로봇의 움직임을 명시적으로 모니터링하여 진행 상황을 평가하고, 관찰된 결과에 따라 향후 계획을 적응적으로 수정한다. 기반 VLA 정책을 완전히 그대로 유지하며 추가적인 미세 조정이 필요하지 않다. RoboCasa365와 CALVIN 벤치마크에서의 실험 결과, 차선 기준선 대비 성공률이 각각 21.9%와 10.4% 향상되었다. 또한 Franka Research 3 로봇을 이용한 실제 환경 배치에서도 본 접근법을 검증하였다.
원문 초록
Vision-Language-Action (VLA) models have emerged as a promising paradigm for general-purpose robotic manipulation, yet their performance often degrades on long-horizon tasks that require multiple interdependent manipulations. Instead of burdening the VLA policies with long-horizon reasoning, memory, action generation, progress tracking, and error recovery, we argue for leveraging their short-horizon manipulation capabilities within an execution-aware framework. To this end, we introduce \textnormal{\textbf{RePlan-VLA}}, a VLA-agnostic framework that translates a VLA's short-horizon capabilities into reliable long-horizon execution. RePlan-VLA explicitly monitors the robot's motion for progress evaluation, and adaptively revises the future plan based on observed outcomes. We preserve the underlying VLA policy entirely, requiring no additional fine-tuning. Experiments on RoboCasa365 and CALVIN benchmarks show an improvement of 21.9% and 10.4% in success rate over the next strongest baseline. We also validate our approach for real-world deployment on a Franka Research 3 robot.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.23843v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.