arXiv:2611.24352v1 cs.CV

OCTR2A: 도시 교차로에서의 실시간 RGB-to-BEV 궤적 투영 및 예측

OCTR2A: Real-Time RGB-to-BEV Trajectory Projection and Forecasting at Urban Intersections

Emanuele Iacobelli, Simone Teglia, Francesco Pro, Claudia Melis Tonti, Irene Amerini

제출 2026-11-19

한국어 초록

도시 교차로에서의 궤적 예측은 신뢰할 수 있는 조감도(BEV) 이동 이력이 있다고 가정하고 연구되는 경우가 많지만, 실제로는 LiDAR, 항공 영상, HD 맵, 보정된 인프라와 같은 값비싼 자원이 필요하다. 본 연구는 추론 시 가변 높이로 기존 도시 인프라에 설치된 한 쌍의 대각 모서리 RGB 카메라만으로 객체의 BEV 궤적을 복원하고 예측함으로써 이러한 상류의 인지-예측 문제를 다룬다. 시점별 검출과 클래스 정제, 기하학적 교차 카메라 매칭, 트랜스포머 기반 BEV 투영, 자기 중심 GRU 예측을 통합하고, 캐스케이드 방식으로 학습하며 주로 소프트 다중 스케일 공간 중첩 손실로 지도하는 모듈형 파이프라인인 Opposite-Corner Trajectory Reconstruction and Anticipation Architecture(OCTR2A)를 소개한다. 이러한 센싱 구성을 제공하는 공개 벤치마크가 없으므로, SIND 궤적으로 구축한 Blender 기반 합성 벤치마크 R3ST++를 소개한다. 이는 동기화된 대각 모서리 시점, 시점 간 대응, BEV 정답을 제공하며, 현장별 미세조정을 위한 배포 지원 시뮬레이터로도 쓰인다. 이들 데이터셋에 대한 실험에서, 10\,Hz로 12개 관측 프레임과 12개 예측 프레임을 사용할 때 OCTR2A는 단일 소비자용 GPU에서 실시간으로 투영~-~예측 ADE/FDE 0.144/0.140~-~0.154/0.241~미터를 달성한다. 정답 BEV 이력으로 평가했을 때 예측 모듈은 SIND에서 최강의 최신 방법 대비 ADE/FDE를 66.7\%/41.7\% 개선한다. TUMTraf-V2X에서의 전이 실험은 R3ST++ 사전학습이 센싱 구성이 다른 실제 노변 도메인으로의 적응을 지원함을 보여준다.

원문 초록

Trajectory forecasting at urban intersections is often studied assuming that reliable bird's-eye-view (BEV) motion histories are available, which in practice requires costly resources such as LiDAR, aerial views, HD maps, or calibrated infrastructure. We address this upstream perception-to-forecasting problem by reconstructing and predicting agents' BEV trajectories only from paired opposite-corner RGB cameras mounted on existing urban infrastructure at variable heights at inference time. We introduce the Opposite-Corner Trajectory Reconstruction and Anticipation Architecture (OCTR2A), a modular pipeline integrating per-view detection with class refinement, geometric cross-camera matching, transformer-based BEV projection, and egocentric GRU forecasting, trained in cascade and mainly supervised with a soft multi-scale spatial-overlap loss. Since no public benchmark provides this sensing configuration, we introduce R3ST++, a Blender-based synthetic benchmark built from SIND trajectories that provides synchronized opposite-corner views, cross-view correspondences, and BEV ground truth, while also serving as a deployment-support simulator for site-specific fine-tuning. Experiments on these datasets show that, with 12 observed and 12 predicted frames at 10\,Hz, OCTR2A achieves projection~-~forecasting ADE/FDE of 0.144/0.140~-~0.154/0.241~meters in real time on a single consumer GPU. Evaluated on ground-truth BEV histories, the forecasting module improves over the strongest state-of-the-art methods on SIND by 66.7\%/41.7\% ADE/FDE. Transfer experiments on TUMTraf-V2X show that R3ST++ pretraining supports adaptation to real-world roadside domains with different sensing configurations.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.24352v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.