arXiv:2611.20431v1 cs.CV

UrbanTwin Sim2Real LiDAR Challenge 2026: 도로변 3D 검출을 위한 현장 보정 합성 데이터와 다중 검출기 융합

UrbanTwin Sim2Real LiDAR Challenge 2026: Site-Calibrated Synthetic Data and Multi-Detector Fusion for Roadside 3D Detection

Arnav Kumar, Brijesh Soni

제출 2026-11-16

한국어 초록

이 보고서는 IEEE BigData Cup 2026의 UrbanTwin Sim2Real LiDAR Challenge V2X-Real 트랙에 arnav007 팀이 제출한 작업을 요약한다(제출 ID 1054222). 주요 목표는 도로변 라이다 합성 데이터만으로 차량, 보행자, 트럭을 찾는 3D 검출기를 학습시키고, 실제 스캔과 구분하기 어려운 합성 스캔을 생성하는 것이다. CARLA 기반 파이프라인을 개발해 센서가 고정된 위치에 맞게 보정했다. 레이블 없는 실제 개발용 스캔을 바탕으로 반사 신호가 돌아오지 않은 빔까지 포함해 거리 영상을 모델링했다. 합성 데이터로만 학습한 VoxelNeXt, PV-RCNN, SECOND를 함께 사용하는 추론 방식도 제안한다. 각 스캔을 합성 지면 평면에 정렬한 뒤 여러 지면 높이에서 검출기를 적용한다. 생성된 경계 상자는 조감도(BEV) 군집화로 합친다. 클래스별 후처리로 방향과 상자 크기를 다듬고 확신도가 낮은 검출을 제외한다. 최종 제출의 종합 점수는 0.8947이었다. 구성 요소 비교 실험에서 스캔마다 지면을 수평으로 맞추면 실제 스캔의 mAP가 두 배 넘게 높아졌다. 여러 높이와 모델에서 얻은 상자를 융합하면 성능이 더 높아졌다.

원문 초록

This report summarizes the work submitted by team arnav007 (submission ID 1054222) for the UrbanTwin Sim2Real LiDAR Challenge (V2X-Real track) at the IEEE BigData Cup 2026. The primary objective is to train 3D detectors for vehicles, pedestrians, and trucks using only synthetic roadside LiDAR data, and to generate synthetic scans that are realistic enough to be indistinguishable from real ones. A CARLA based pipeline is developed and calibrated to the fixed sensor site, accurately modeling the range image, including no-return beams, based on unlabelled real development scans. A combined inference detector, using multiple 3D detectors (VoxelNeXt, PV-RCNN, and SECOND) trained exclusively on synthetic data, is also proposed. Each scan is aligned to the synthetic ground plane and processed through the detectors at multiple ground heights. The resulting bounding boxes are fused using bird's-eye view (BEV) clustering, followed by class-specific post-processing to refine heading, box size, and filter low-confidence detections. The final submission achieved a combined score of 0.8947. The ablation study shows that per-scan ground leveling more than doubled the real-scan mAP, while fusing boxes across different heights and models further improved performance.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.20431v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.