Open-loop performance evaluation of 3D multi-object tracking in autonomous driving requires matching criteria that effectively penalize translational, shape, and orientation errors from the ego vehicle perspective. The prevailing criteria for determining true positives are Intersection over Union (IoU) and Centre-Point Distances (CPD). When IoU is extended from the 2D image plane to 3D volumetric overlap, it often falls below its acceptance threshold even with minor yaw misalignments, whereas CPD disregards orientation entirely. To address this limitation, we propose Contour Errors (CE) as an ego-centric criterion that employs Hausdorff-type reasoning to sparse bounding-box corner geometry by selecting the k-nearest ego-centric corners. This method provides a graded orientation sensitivity between the extremes of IoU, which overpenalizes, and CPD, which is orientation-blind. We evaluate Contour Errors against six baselines using the HOTA evaluation protocol on the nuScenes dataset, conditioned on proximity, yaw error, and a confidence threshold. At the standard IoU vehicle threshold, 47% of car and 75% of pedestrian CE-valid matches are rejected by IoU despite close contour proximity, while fewer than 0.1% of IoU-valid matches fail CE. These results establish the ego-centric matching criterion as a primary factor for improving open-loop perception evaluation in safety-critical autonomous driving.
이벤트 기반 3D 추적은 저지연 고속 인식을 가능하게 하지만, 기존 CNN 및 트랜스포머 기반 추적기는 희소하고 잡음이 많은 이벤트 스트림에서 장거리 시공간 의존성을 포착하는 데 어려움을 겪으며, 특히 실시간 및 효율성 제약 하에서 그러하다. 이러한 과제를 해결하기 위해, 우리는 이벤트 데이터에 대한 3D 특징 추적을 위한 최초의 Mamba 기반 프레임워크인 E-TraMamba를 제안한다. 이 새로운 프레임워크는 효율적인 장거리 모델링을 위해 선형 상태 공간 모델(linear state-space model)을 채택하고, 모션 블러와 가림(occlusion) 상황에서 안정적인 추적을 유지하기 위해 경량 어파인 변환 예측기(affine-transform predictor)를 통합한다. 또한 지역 시공간 패치, 상관 맵(correlation map), 위치 임베딩 등 다중 스케일 단서를 통합된 표현으로 융합하여 안정적이고 부드러운 3D 추적을 가능하게 하는 효과적인 방식을 설계한다. 우리는 단안 렌더링으로 생성된 대규모 합성 데이터셋인 EvD-PointOdyssey를 구축하며, 이는 이벤트 기반 3D 추적 모델의 학습 및 평가를 위해 동기화된 이벤트 스트림, 깊이 맵, 정확한 3D 궤적을 제공한다. 이벤트 기반 벤치마크에서의 광범위한 실험을 통해 E-TraMamba가 최첨단(state-of-the-art) 성능을 달성함을 입증하며, 엄격한 정확도 임계값(예: 0.1 m) 하에서 모든 기준선 대비 2배 이상 긴 특징 수명, 높은 추적 특징 비율, 낮은 RMSE를 제공한다. 이러한 결과는 E-TraMamba를 저지연 시각적 오도메트리(visual odometry), 실시간 SLAM, 인터랙티브 로보틱스의 유력한 후보로 만든다.
시야가 겹치는 다중 카메라 추적(multi-camera tracking)은 일반적으로 중앙 집중식 융합(centralized fusion)에 의존하는데, 이는 대규모 배포를 방해하는 계산 병목 현상을 야기합니다. 본 논문에서는 MV3DT를 소개합니다. 이는 실시간 다중 뷰 3D 추적(multi-view 3D tracking)을 위한 완전 분산형 프레임워크로, 피어 투 피어(P2P) 조율을 통해 정확한 ID 전파(identity propagation) 및 가려짐 복구(occlusion recovery)를 달성하여 중앙 집계의 필요성을 제거합니다. 각 카메라 노드는 단안 3D 인지(monocular 3D perception), 분산 다중 뷰 연관(distributed multi-view association), 경량 메시징을 통한 협업 융합(collaborative fusion)으로 구성된 경량 모듈식 파이프라인을 실행합니다. MV3DT는 WILDTRACK 데이터셋에서 94.3%의 IDF1과 93.3%의 MOTA를 달성하여 최첨단 중앙 집중식 방법과 경쟁적인 성능을 보이며, 100대의 카메라에서 30 FPS를 유지하고 카메라 간 지연 시간은 10ms 미만, 통신 오버헤드는 2.2%에 불과하여 우수한 확장성을 입증했습니다. MV3DT는 카메라 캘리브레이션(camera calibration)이 주어지면 제로샷(zero-shot) 방식으로 작동하므로 장면 특화 학습이 필요 없어 새로운 환경에 즉시 배포 가능합니다. 이러한 결과들은 MV3DT가 대규모 중첩 카메라 네트워크에서의 실시간 다중 뷰 추적을 위한 실용적인 솔루션임을 확립합니다.