WM-Cov: 상호작용형 월드 모델 기반 자율주행 시뮬레이션을 위한 테스트 적절성
WM-Cov: Test Adequacy for Interactive World-Model-Style Autonomous Driving Simulation
한국어 초록
월드 모델(World Model)과 생성형 시뮬레이터는 자차 플래너(ego planner)에 반응하고 반사실적이며 희귀하고 안전에 치명적인 롤아웃(rollout)을 생성할 수 있어 자율주행을 위한 상호작용형 테스트 인프라로 부상하고 있습니다. 이는 테스트 시나리오를 고정된 재생 궤적에서, 테스트 대상 플래너에 따라 실제 전개가 달라지는 상호작용형 시나리오 군(scenario family)으로 변화시킵니다. 따라서 아직 해결되지 않은 문제는 위험한 롤아웃을 생성할 수 있는지 여부뿐만 아니라, 특정 테스트 의도와 중단 결정을 뒷받침하기 위해 어떤 유효한 폐루프(closed-loop) 증거가 충분한지입니다. 본 논문에서는 상호작용형 월드 모델 방식의 테스트 적절성(testing adequacy)을 정립하고, 원시 공급자 출력을 요청된 증거, 실현된 증거 및 유효한 증거로 변환하는 공급자 독립적 평가 층(layer)인 WM-Cov를 소개합니다. WM-Cov는 커버리지 증가, 유효 실패 발견, 실패 모드 다양성, 사실성, 아티팩트 억제, 중복 처리, 유효 증거 정밀도(precision)를 통해 적절성을 보고합니다. 실행된 TeraSim/SUMO 이벤트, WM 유사 혼합 트레이스 풀, 실제 DriveArena TrafficManager--WorldDreamer 매트릭스에 대한 연구는 위험해 보이는 이벤트에 유효한 ADS 실패뿐만 아니라 중복, 부분적 실현, 아티팩트가 포함될 수 있음을 보여줍니다. DriveArena 매트릭스는 두 개의 플래너, 두 개의 예측 기간(horizon), 여섯 가지 프롬프트(prompt) 조건, 360개의 자차 경로 요청을 평가하며, 이 중 304개의 시도는 완전히 실현된 증거가 되고 56개는 부분적인 상태로 남습니다. 서로 분리된 80개 요청 경로 슬라이스 검증에서는 74개의 완전 실현 시도와 6개의 부분 실현 시도가 도출됩니다. 이러한 결과는 단순히 원시 생성된 실패나 프롬프트 커버리지만으로 평가하기보다, 예산 내에서 유효한 상호작용 증거의 수렴(convergence)을 통해 월드 모델 방식의 테스트를 평가해야 함을 뒷받침합니다.
원문 초록
World models and generative simulators are emerging as interactive testing infrastructure for autonomous driving because they can react to the ego planner and produce counterfactual, rare, and safety-critical rollouts. This changes a test scenario from a fixed replayed trajectory into an interactive scenario family whose realized evolution depends on the planner under test. The unresolved question is therefore not only whether dangerous rollouts can be generated, but what valid closed-loop evidence is enough to support a specified testing intent and stopping decision. This paper formulates interactive world-model-style testing adequacy and introduces WM-Cov, a provider-agnostic evaluation layer that converts raw provider outputs into requested, realized, and valid evidence. WM-Cov reports adequacy through coverage growth, valid-failure discovery, failure-mode diversity, realism, artifact suppression, duplicate accounting, and valid-evidence precision. Studies on executed TeraSim/SUMO events, WM-like mixed trace pools, and a real DriveArena TrafficManager--WorldDreamer matrix show that dangerous-looking events can include valid ADS failures, duplicates, partial realizations, and artifacts. The DriveArena matrix evaluates two planners, two horizons, six prompt conditions, and 360 ego-route requests; 304 attempts become fully realized evidence and 56 remain partial. A disjoint 80-request route-slice check yields 74 fully realized and 6 partial attempts. The results support evaluating world-model-style testing by convergence of valid interactive evidence under budget, rather than by raw generated failures or prompt coverage alone.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2608.00298v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.