BWM: 로봇 학습을 위한 저비용 고충실도 월드 시뮬레이터
BWM: A Low-Cost High-Fidelity World Simulator for Robot Learning
한국어 초록
신뢰할 수 있는 로봇 학습을 위해서는 물리적 하드웨어에서 실행하기 전, 위험하고 실패하기 쉬운 결과를 포함하여 행동의 영향을 예측할 수 있는 월드 시뮬레이터(world simulator)가 필요합니다. 기존의 물리 시뮬레이터는 상당한 에셋 구축 및 보정이 필요하고 여전히 심투리얼(sim-to-real) 격차에 직면해 있는 반면, 비디오 생성기는 세분화된 로봇 행동에 대한 반응을 정밀하게 제어하기 어려운 경우가 많습니다. 본 논문에서는 로봇 조작을 위한 오픈소스 저비용 고충실도(high-fidelity) 월드 시뮬레이터인 BWM(Boundless World Model)을 제시합니다. BWM은 미래 관측치를 상태 기반(stateful) 자기회귀(autoregressive) 방식으로 예측하기 위해 초기 환경 안내(initial-environment guidance), 동적 시각적 이력, 시간적으로 정렬된 로봇 행동 조건화를 결합한 행동 조건부 월드 모델입니다. 궤적 재생(trajectory replay), 중첩 클립 샘플링, 초기 관측치 강화를 통해 행동과 정렬된 학습 클립을 구축합니다. BWM은 행동 정렬 롤아웃(rollout)으로 모방 학습(imitation learning) 데이터를 증강하는 데이터 엔진의 역할과, 폐루프(closed-loop) 평가, 위험 예측, 정책 순위 매김을 수행하는 정책 평가기(policy evaluator) 역할을 합니다. WorldArena 벤치마크 및 실제 로봇을 통한 실험은 데이터 엔진과 정책 평가기 설정 전반에서 향상된 시뮬레이터 충실도와 기능적 유용성을 입증합니다. BWM은 WorldArena 챌린지의 트랙 1과 두 개의 트랙 2 응용 분야 전반에서 종합 1위를 차지했습니다. 모델 체크포인트, 학습 및 추론 코드, 데이터 생성 및 정책 평가용 인터페이스를 포함한 BWM 오픈소스 생태계를 공개합니다.
원문 초록
Reliable robot learning requires a world simulator that can predict action consequences before execution on physical hardware, including risky and failure-prone outcomes. Existing physics simulators require substantial asset construction and calibration and still face a sim-to-real gap, while video generators often lack precise control over their responses to fine-grained robot actions. In this paper, we present the Boundless World Model (BWM), an open-source, low-cost, high-fidelity world simulator for robot manipulation. BWM is an action-conditioned world model that combines initial-environment guidance, dynamic visual history, and temporally aligned robot-action conditioning for stateful autoregressive prediction of future observations. We construct action-aligned training clips through trajectory replay, overlapping clip sampling, and initial-observation enhancement. BWM serves as a data engine that augments imitation-learning data with action-aligned rollouts, and as a policy evaluator for closed-loop assessment, risk anticipation, and policy ranking. Experiments on the WorldArena benchmark and physical robots demonstrate improved simulator fidelity and functional utility across the data-engine and policy-evaluator settings. BWM ranks first overall in the WorldArena Challenge across Track 1 and its two Track 2 applications. We release the BWM open-source ecosystem, including model checkpoints, training and inference code, and interfaces for data generation and policy evaluation.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2607.29302v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.