arXiv:2410.17785

TranSPORTmer: A Holistic Approach to Trajectory Understanding in Multi-Agent Sports

Guillem Capellera, Luis Ferraz, Antonio Rubio, Antonio Agudo, Francesc Moreno-Noguer

제출 2024-10-23

원문 초록

Understanding trajectories in multi-agent scenarios requires addressing various tasks, including predicting future movements, imputing missing observations, inferring the status of unseen agents, and classifying different global states. Traditional data-driven approaches often handle these tasks separately with specialized models. We introduce TranSPORTmer, a unified transformer-based framework capable of addressing all these tasks, showcasing its application to the intricate dynamics of multi-agent sports scenarios like soccer and basketball. Using Set Attention Blocks, TranSPORTmer effectively captures temporal dynamics and social interactions in an equivariant manner. The model's tasks are guided by an input mask that conceals missing or yet-to-be-predicted observations. Additionally, we introduce a CLS extra agent to classify states along soccer trajectories, including passes, possessions, uncontrolled states, and out-of-play intervals, contributing to an enhancement in modeling trajectories. Evaluations on soccer and basketball datasets show that TranSPORTmer outperforms state-of-the-art task-specific models in player forecasting, player forecasting-imputation, ball inference, and ball imputation. https://youtu.be/8VtSRm8oGoE

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2412.07041v4stat.ML공통 태그 Imputation공식 코드 · Papers with Code

일반화 최소제곱법 기반 커널화 텐서 분해

Generalized Least Squares Kernelized Tensor Factorization

불완전한 다차원 텐서 구조 데이터를 복원하는 것은 많은 실제 응용에서 근본적인 과제이다. 평활성 제약 저순위 텐서 분해는 전역 및 장거리 상관관계를 효과적으로 포착하지만, 짧은 스케일, 고주파, 또는 국소적으로 변하는 구조를 특성화하는 데 종종 어려움을 겪는다. 본 연구는 다차원 시공간 데이터 완성을 위해 보완적인 일반화 최소제곱법 기반 커널화 텐서 분해(Generalized Least Squares Kernelized Tensor Factorization, GLSKF) 프레임워크를 제안한다. GLSKF는 GLS(Generalized Least Squares) 목적 함수 하에서 공분산 정규화된 저순위 전역 성분과 명시적으로 모델링된 국소 상관 잔차 성분을 가산적으로 통합하여, 전역 의존성과 국소적 변화를 모두 효과적으로 모델링할 수 있게 한다. 공분산 노름 정규화기는 두 성분 모두에서 시공간 의존성을 인코딩한다. 전역 분해에서 평활성을 강제하기 위해 잠재 인자 열에 구조화된 공분산이 부과되며, 반면 잔차의 국소 상관관계를 모델링하기 위해 컴팩트 지지(compactly supported) 희소 커널이 사용된다. 결측 데이터 하에서 공분산 행렬의 크로네커(Kronecker) 구조를 활용하고 빠른 공액 그래디언트(conjugate gradient) 해법을 용이하게 하는 블록 단위 선형계 업데이트를 갖춘 교대 최소제곱법(alternating least squares) 알고리즘을 개발한다. 효율적인 행렬-벡터 곱을 위해 국소 잔차 공분산 행렬의 희소성과 토플리츠(Toeplitz) 구조를 활용함으로써 추가적인 계산 이득을 얻는다. GLSKF를 네 가지 실제 다차원 데이터 완성 과제—교통 속도 대치, 컬러 이미지 완성, 디지털 영상 복원, MRI 데이터 재구성—에서 평가한다. 실험 결과는 GLSKF가 다양한 텐서 완성 과제에서 우수한 재구성 성능과 유리한 확장성을 달성함을 보여주며, 다차원 데이터 완성에 대한 광범위한 적용 가능성을 뒷받침한다.

arXiv:2501.09731v2stat.ML공통 태그 Imputation공식 코드 · Papers with Code

예측을 대리 결과로: AI 시대의 대리 결과 재검토

Predictions as Surrogates: Revisiting Surrogate Outcomes in the Age of AI

우리는 생물통계학과 경제학에서 수십 년간 발전해 온 대리 결과(surrogate outcome) 모델과 새로 부상하는 예측 기반 추론(prediction-powered inference, PPI) 분야 사이의 형식적 연결을 확립한다. 이 연결은 AI 시대에 널리 쓰이는 사전학습(pre-trained) 모델의 예측을 값비싼 결과에 대한 비용 효율적인 대리물(surrogate)로 간주한다. 대리 결과 문헌을 바탕으로, 우리는 재보정(recalibrated) 예측 기반 추론을 개발하며, 이는 기존 PPI 제안들보다 더 효율적인 통계적 추론 접근법이다. 우리 방법은 재보정(recalibration)이라 부르는 단계를 통해 최적의 ``대체된 손실(imputed loss)''을 학습하기 위해 유연한 기계학습 기법을 사용함으로써 기존 제안들과 차별화된다. 중요하게도, 이 방법은 최적의 대체된 손실이 불완전하게 추정되더라도, 관측 가능한 실제 결과만을 가진 데이터에 전적으로 의존하는 추정량(estimator)보다 항상 개선하며, 추정이 일치(consistent)하면 PPI 추정량들 중 가장 작은 절근 분산(asymptotic variance)을 달성한다. 계산 측면에서, 목표 매개변수를 정의하는 손실 함수가 볼록(convex)할 때마다 우리의 최적화 목적함수는 볼록하다. 우리는 관심 결과와 기계학습 예측이 체계적으로 어긋나는 여러 일반적인 시나리오에서 재보정의 이점을 이론적으로와 수치적으로 추가로 분석한다. 우리는 최신 기계학습/AI 모델을 활용한 세 가지 응용을 통해 기존 PPI 제안들 대비 유효 표본 크기(effective sample size)에서의 유의미한 이득을 보여준다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.