arXiv:2608.06236v1 cs.CV

혼잡한 장면에서 깊이 정보를 활용한 비디오 객체 카운팅

Depth-Guided Video Object Counting in Crowded Scenes

Yuanjing Xu, Xinyan Liu, Weidong Chen, Zixuan Zou, Linhao Zhang, Zhuangzhe Meng, Antoni B. Chan, Weigang Zhang

제출 2026-08-06

한국어 초록

본 연구의 주된 목표는 혼잡한 장면에서의 비디오 객체 카운팅(video object counting)을 발전시키는 것으로, 주어진 텍스트 또는 시각적 프롬프트(prompt)를 바탕으로 대상 범주의 모든 인스턴스를 강건하게 계수하는 것을 지향한다. 기존 방법들은 RGB 정보에만 의존하여 혼잡하고 가려짐(occlusion)이 존재하는 환경에서 판별 능력이 제한적이다. 이를 해결하기 위해, 본 논문에서는 깊이 유도 검출기(Depth-Guided Detector, DG-Det)와 범용 후처리 파이프라인을 제안한다. 멀티스케일 RGB-D 크로스 어텐션(cross-attention) 및 명시적 가려짐 예측과 깊이 단서를 통합함으로써, 제안하는 방법은 공간적 이해를 향상시키고 혼잡 및 가려진 장면에서 강건한 검출을 달성한다. 나아가, 프레임 간 중복 계수를 제거하기 위한 통합 중복 제거(de-duplication) 프레임워크를 도입한다. 향후 연구를 촉진하기 위해 깊이 정보와 시퀀스당 다중 객체 범주를 포함하는 새로운 RGB-D 비디오 객체 카운팅 데이터셋도 함께 공개한다. 광범위한 실험을 통해 제안 방법이 기존 베이스라인 대비 MAE를 62.01% 감소시키고 RMSE에서도 일관된 성능 향상을 달성함을 입증한다. 소스 코드는 https://github.com/streamer-AP/DG-Net 에서, 데이터셋은 https://huggingface.co/datasets/aerospace123/RGBD-VideoCount 에서 제공된다.

원문 초록

Our primary objective is to advance video object counting in crowded scenes, aiming to robustly count all instances of a target category based on given text or visual prompts. Existing methods rely on RGB information, limiting their discriminative ability in crowded and occluded conditions. To address this, we propose a Depth-Guided Detector (DG-Det) along with a general post-processing pipeline. By integrating depth cues with multi-scale RGB-D cross-attention and explicit occlusion prediction, our method enhances spatial understanding and achieves robust detection in crowded and occluded scenes. Furthermore, we introduce a unified de-duplication framework to eliminate cross-frame redundant counting. To facilitate future research, we also release a new RGB-D Video Object Counting dataset featuring depth information and multiple object categories persequence. Extensive experiments demonstrate that our method achieves a 62.01\% reduction in MAE compared to existing baselines, and also produces consistent improvements in RMSE. We provide the source code at https://github.com/streamer-AP/DG-Net and the dataset at https://huggingface.co/datasets/aerospace123/RGBD-VideoCount.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.06236v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.