arXiv:2604.15805v2 cs.RO

WorldComposer: 일반화 가능한 로봇 학습 및 평가를 위한 디지털 사촌 기반 생성형 고충실도 시뮬레이션

WorldComposer: Generative High-Fidelity Simulation with Digital Cousins for Generalizable Robot Learning and Evaluation

Jasper Lu, Zhenhao Shen, Yuanfei Wang, Shugao Liu, Shengqiang Xu, Shawn Xie, Jingkai Xu, Feng Jiang, Jade Yang, Chen Xie, Ruihai Wu

제출 2026-11-19

한국어 초록

실제 환경에서 강건한 로봇 정책을 학습하려면 다양한 데이터 증강이 필요하지만, 물리적 자산을 확보하고 환경을 재구성해야 하므로 실제 데이터 수집을 확장하는 데에는 비용이 많이 든다. 따라서 실제 장면을 시뮬레이션으로 증강하는 것이 효율적인 학습과 평가를 위한 실용적인 증강 방식이 되었다. 우리는 실제 파노라마를 고충실도의 과제 수행 가능한 시뮬레이션 환경으로 매핑하고, 장면 및 객체 변형을 통해 다양한 디지털 사촌(Digital Cousins)을 추가로 합성하는 자동화된 생성형 Real2Sim2Real 프레임워크인 WorldComposer를 제시한다. 고품질 물리 엔진 및 사실적인 자산과 결합하여, WorldComposer는 강체, 관절체, 변형 가능 객체 전반에 걸친 상호작용형 조작을 지원한다. 또한 장기 과제를 위한 일관된 대규모 환경을 구성하기 위해 다중 방 스티칭을 도입한다. 실험은 플랫폼의 충실도를 검증하는 강한 시뮬레이션-실제 상관관계를 보여 주며, 데이터 생성을 크게 확장하면 보지 못한 장면 및 객체 변형에 대한 일반화가 유의미하게 향상됨을 보여 줌으로써, 일반화 가능한 로봇 학습과 평가에서 디지털 사촌의 효과를 입증한다.

원문 초록

Learning robust robot policies in real-world environments requires diverse data augmentation, yet scaling real-world data collection is costly due to the need for acquiring physical assets and reconfiguring environments. Therefore, augmenting real-world scenes into simulation has become a practical augmentation for efficient learning and evaluation. We present WorldComposer, an automated generative Real2Sim2Real framework that maps real-world panoramas into high-fidelity, task-ready simulation environments and further synthesizes diverse Digital Cousins through scene and object variations. Combined with high-quality physics engines and realistic assets, WorldComposer supports interactive manipulation across rigid, articulated, and deformable objects. Additionally, we incorporate multi-room stitching to construct consistent large-scale environments for long-horizon tasks. Experiments demonstrate a strong sim-to-real correlation validating our platform's fidelity, and show that extensively scaling up data generation leads to significantly better generalization to unseen scene and object variations, demonstrating the effectiveness of Digital Cousins for generalizable robot learning and evaluation.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2604.15805v2제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.