arXiv:2608.03379v2 cs.CV

3D 다인 모션 예측을 위한 동적 상호작용 기반 잔여 플로우 매칭

Residual Flow Matching with Dynamic Cross-Interaction for 3D Multi-Person Motion Prediction

Wei Wei, Yinyuan Zhao, Ruixuan Yu

제출 2026-08-04

한국어 초록

3D 다인 모션 예측(3D multi-person motion prediction)은 개별 운동학(kinematics)과 인물 간 상호작용을 모두 모델링해야 합니다. 플로우 매칭(Flow Matching)은 예측 정확도를 향상시키기 위한 다중 가설 생성에 효과적이지만, 순수 노이즈로부터 골격 시퀀스를 직접 예측하는 것은 구조적 일관성을 저해하고 초기 노이즈 지배적 적분 단계에서 신뢰할 수 없는 에이전트 간 상호작용을 유발하는 경우가 많습니다. 이를 해결하기 위해 본 논문에서는 사전 정보 유도 잔여 플로우 매칭(Prior-Guided Residual Flow Matching) 프레임워크를 제안합니다. 첫째, 결정론적 조대 사전 정보(Deterministic Coarse Prior, DCP)가 운동학적 앵커를 설정하여 생성 과정을 모션 잔여(motion residuals)에 대한 조건부 흐름으로 정식화함으로써, 생성 목표를 단순화하고 구조적 안정성을 보존합니다. 둘째, 동적 교차 상호작용(Dynamic Cross-Interaction, DCI) 메커니즘이 적분 진행 상황에 맞춰 에이전트 간 메시지 전달을 시간적으로 동기화하여, 신뢰할 수 있는 소셜 컨텍스트 추출을 보장하고 다인 모션 충실도를 향상시킵니다. 마지막으로, 양방향 융합을 갖춘 분리된 관절-모션 아키텍처가 미세한 운동학적 일관성을 효과적으로 보존합니다. 광범위한 실험을 통해 본 제안 방식이 여러 데이터셋에서 최고 수준(state-of-the-art)의 예측 정확도를 달성함을 입증합니다. 코드는 https://github.com/Wei-Wei-a/Residual-Flow-Matching-with-Dynamic-Cross-Interaction-for-3D-Multi-Person-Motion-Prediction 에서 확인할 수 있습니다.

원문 초록

3D multi-person motion prediction requires modeling both individual kinematics and inter-person interactions. While Flow Matching is effective for multi-hypothesis generation to improve prediction accuracy, directly predicting skeletal sequences from pure noise often compromises structural consistency and introduces unreliable cross-agent interactions during early noise-dominated integration steps. To address this, we propose a Prior-Guided Residual Flow Matching framework. First, a Deterministic Coarse Prior (DCP) establishes a kinematic anchor, formulating the generative process as a conditional flow over motion residuals to simplify the generative objective and preserve structural stability. Second, a Dynamic Cross-Interaction (DCI) mechanism temporally synchronizes inter-agent message-passing with the integration progress, ensuring the extraction of reliable social contexts and improving multi-person motion fidelity. Finally, a decoupled joint-motion architecture with bidirectional fusion effectively preserves fine-grained kinematic coherence. Extensive experiments demonstrate that our approach achieves state-of-the-art prediction accuracy across multiple datasets. Code is available at https://github.com/Wei-Wei-a/Residual-Flow-Matching-with-Dynamic-Cross-Interaction-for-3D-Multi-Person-Motion-Prediction.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.03379v2제출 시각 미확인
  2. arXiv:2608.03379v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.