arXiv:2610.09305v1 cs.LG

Kuration SDK: 데이터 큐레이션을 통한 Virtual2Real 격차 해소

Kuration SDK: Addressing the Virtual2Real Gap via Data Curation

Nirmit Desai, Eric Song, Mayank Sengupta, Tejal Bedmutha, Siri Reddy, Sahiti Dharmavaram, Kunal Sawarkar

제출 2026-10-07

한국어 초록

행동 조건부 월드 모델(action-conditioned world model)의 품질을 측정하기 위한 벤치마크는 시각적 유사도 기반 지표에서 행동 의미론적 및 물리 기반 지표로 계속 진화하고 전환되는 중이다. 그러나 도메인 및 작업에 구애받지 않는 행동 조건부 월드 모델 학습의 경우 기존 벤치마크는 제한된 신호만을 제공한다. 카운터스트라이크(CounterStrike) 게임플레이 데이터에서 확산 월드 모델을 학습하고 평가함으로써, 정성적인 플레이 가능성이 FVD, LPIPS, JEDi와 같은 지표와 일치하지 않음을 확인하였다. 저자들은 이를 Virtual2Real 격차(Virtual2Real gap)라고 부른다. 신뢰할 수 있는 벤치마크 대신 원시 게임플레이 데이터를 큐레이션하고 다양한 진단 속성을 측정하는 것이 학습이 시작되기도 전에 이러한 격차를 해소할 수 있는 더 강력한 신호를 제공한다고 가정한다. 본 논문에서는 여러 큐레이션 전략과 함께 본 논문과 함께 오픈소스로 공개되는 물리 AI 데이터 큐레이션을 위한 범용 키트인 Kuration SDK를 제시한다. 이 SDK는 동일한 게임플레이 맵, 행동 및 상태 분포에서 학습된 두 월드 모델이 매우 유사한 LPIPS 및 FVD 점수에도 불구하고 실제로 플레이했을 때 매우 다르게 동작한 특정 사례에서 Virtual2Real 격차의 근본 원인을 밝혀내는 데 중요한 역할을 했다. 따라서 Kuration SDK는 특정 데이터셋에서 Virtual2Real 격차의 근본 원인을 규명하고 샘플 효율적인 학습 데이터셋의 개발을 가속화할 잠재력을 지니고 있다.

원문 초록

Benchmarks for measuring the quality of action-conditioned world models are still evolving and shifting away from visual similarity-based metrics to action-semantic and physically-grounded metrics. However, for domain and task-agnostic action-conditioned world model training, existing benchmarks provide a limited signal. By training and evaluating diffusion world models on CounterStrike gameplay data, we confirm that qualitative playability does not correspond with metrics such as FVD, LPIPS, and JEDi. We term this the Virtual2Real gap. We posit that, in lieu of reliable benchmarks, curating raw gameplay data and measuring a variety of diagnostic properties provides a more robust signal to bridge the gap, before the training even begins. We present several curation strategies and a general-purpose kit for physical AI data curation called Kuration SDK, which is being open-sourced with this paper. The SDK was instrumental in uncovering the root cause of the virtual2real gap in a specific case: why two world models trained on identical gameplay map, action and state distribution, behaved very differently when played in spite of having very similar LPIPS and FVD scores. Thus, Kuration SDK has the potential to uncover the root causes of Virtual2Real gap in specific datasets and accelerate development of sample-efficient training datasets.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.09305v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.