arXiv:2611.20507v1 cs.CV

VoxSAOR: 데이터 고유 불확실성을 모델링해 의미 기반 점유 예측의 강건성 높이기

VoxSAOR: Semantic-Aware Occupancy Robustification via Aleatoric Uncertainty Modeling

Mengfei Duan, Yuheng Zhang, Guoqiang Zhao, Yuanfan Zheng, Kailun Yang, Zhiyong Li

제출 2026-11-16

저자 비고

arXiv Comments

The source code will be made publicly available at https://github.com/MengfeiD/VoxSAOR

한국어 초록

비전 기반 3D 점유 예측은 자율주행과 체화 인식에 필요한 장면의 조밀한 의미 표현을 제공한다. 다만 가려짐, 깊이의 모호성, 투영 오차로 인해 복셀 특징의 신뢰성이 위치마다 달라지는 문제에 취약하다. 기존 방법은 대개 이런 관측으로 생긴 특징 변이를 명시적으로 모델링하지 않고 복셀 표현에서 의미를 예측한다. 본 연구는 특징 공간의 대리 분포로 데이터 고유의 불확실성을 모델링해 의미 점유 예측을 더 강건하게 만드는 VoxSAOR를 제안한다. 먼저 국소 의미 일관성(LSC)을 정량화해 복셀별 구조 안정성 사전 정보를 얻는다. 시점 간 의미 합의로 신뢰하기 어려운 의미 대응을 걸러 낸다. 의미 범주별로 위치를 맞춘 안정 복셀과 모호한 복셀을 짝지어, 안정적인 특징에서 모호한 특징으로 바뀌는 양상을 얻는다. 이를 클래스 조건부 대각 가우스 분포로 모델링해 특징 변위와 산포를 모두 포착한다. 데이터 고유 불확실성 구간 앙상블 학습(AREL)은 이 대리 분포에 따라 점차 커지는 스케일의 특징 교란을 사용해, 서로 독립적인 매개변수를 갖는 예측 헤드를 학습한다. 교란 강도는 구조적 신뢰성에 따라 조정한다. 추론에서는 대리 분포 모델링과 샘플링을 끄고 모든 헤드가 같은 관측 특징을 처리한다. 출력 확률을 평균해 샘플링 없이 결정적인 합의 예측을 얻는다. 여러 데이터셋과 점유 백본에서 실험한 결과, VoxSAOR는 의미 점유 예측, 희귀 클래스 인식, 예측 보정을 개선했다. 소스 코드는 https://github.com/MengfeiD/VoxSAOR 에 공개할 예정이다.

원문 초록

Vision-based 3D occupancy prediction provides a dense semantic representation of scenes for autonomous driving and embodied perception, yet remains vulnerable to occlusion, depth ambiguity, and projection errors that induce spatially varying reliability in voxel features. Existing methods typically map voxel representations to semantic predictions without explicitly modeling such observation-induced feature variations. To address this limitation, we propose VoxSAOR, a semantic-aware occupancy robustification framework that models aleatoric uncertainty through feature-space proxies. It first quantifies Local Semantic Consistency (LSC) to derive a voxel-wise structural stability prior and uses cross-view semantic consensus to filter unreliable semantic correspondences. Within each semantic category, spatially matched stable and ambiguous voxels form stable-to-ambiguous feature transitions, which are modeled by a class-conditional diagonal Gaussian distribution, capturing both feature displacement and dispersion. Guided by these proxy distributions, Aleatoric Regime Ensemble Learning (AREL) trains independently parameterized prediction heads using feature perturbations at progressively increasing scales, with perturbation strength modulated by structural reliability. At inference, proxy modeling and sampling are disabled, and all heads process the same observed features; their output probabilities are then averaged to produce a deterministic consensus prediction without requiring sampling. Experiments across multiple datasets and occupancy backbones demonstrate the effectiveness of VoxSAOR in improving semantic occupancy prediction, long-tail recognition, and predictive calibration. The source code will be made publicly available at https://github.com/MengfeiD/VoxSAOR.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.20507v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.