arXiv:2608.29759v1 cs.CV

SynCrash: 교통 관제 영상에서의 제로샷 사고 탐지 및 위치 추정을 위한 다단계 파이프라인

SynCrash: A Multi-Stage Pipeline for Zero-Shot Accident Detection and Localization in Traffic Surveillance Video

Arkya Jyoti Bagchi, Ritul Jangir, Varun Raskar

제출 2026-08-30

한국어 초록

본 논문에서는 고정 시점 CCTV 관제 영상에서 제로샷(zero-shot) 사고 탐지, 공간적 위치 추정 및 충돌 유형 분류를 수행하는 다단계 파이프라인인 SynCrash를 제시한다. 본 접근법은 레이블이 지정된 실제 환경의 학습(training) 데이터에 접근하지 않고도 사고 발생 시점, 프레임 내 충돌 발생 위치, 충돌 유형을 예측해야 하는 CVPR 2026 ACCIDENT 챌린지를 다룬다. 이 파이프라인은 세 가지로 분리된 단계로 동작한다: (1) 메타데이터 인식 임베딩(embedding)과 조밀한 슬라이딩 윈도우 추론(inference)을 적용하여 CARLA 기반 합성 클립에서 미세조정(fine-tuning)된 VideoMAEv2-giant 백본을 통한 시간적 위치 추정; (2) 객체 검출(object detection)을 위한 YOLO와 충돌 지점을 예측하기 위해 바운딩 박스 오버랩 및 궤적 기반 추론을 활용하는 물리 정보 기반 하이브리드 휴리스틱을 결합한 공간적 위치 추정; (3) 검출된 차량의 수와 배치로부터 유도된 경량 규칙 기반 전략을 사용한 충돌 유형 분류. 핵심적인 통찰은 시간적 이해는 합성 데이터에 대한 지도 미세조정(supervised fine-tuning)을 통해 이점을 얻는 반면, 공간적 이해는 도메인 간에 자연스럽게 전이되는 사전학습된 객체 검출기와 물리적 사전 지식을 활용하는 것이 더 효과적이라는 점이다.

원문 초록

We present SynCrash, a multi-stage pipeline for zero-shot accident detection, spatial localization, and collision-type classification in fixed-view CCTV surveillance video. Our approach addresses the ACCIDENT at CVPR 2026 Challenge, which requires predicting when an accident occurs, where in the frame the impact happens, and what type of collision it is, all without access to labeled real-world training data. The pipeline operates in three decoupled stages: (1) Temporal localization via a VideoMAEv2-giant backbone fine-tuned on CARLA-based synthetic clips with metadata-aware embeddings and dense sliding-window inference; (2) Spatial localization using YOLO for object detection combined with a physics-informed hybrid heuristic that leverages bounding-box overlap and trajectory-based reasoning to predict the impact point; and (3) Collision-type classification using a lightweight rule-based strategy derived from the number and configuration of detected vehicles. The key insight is that temporal understanding benefits from supervised fine-tuning on synthetic data, whereas spatial understanding is better served by pretrained object detectors and physics priors that transfer naturally across domains.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.29759v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.