arXiv:2012.07038

Uncertainty Estimation in Deep Neural Networks for Point Cloud Segmentation in Factory Planning

Christina Petschnigg, Juergen Pilz

제출 2020-12-13

원문 초록

The digital factory provides undoubtedly a great potential for future production systems in terms of efficiency and effectivity. A key aspect on the way to realize the digital copy of a real factory is the understanding of complex indoor environments on the basis of 3D data. In order to generate an accurate factory model including the major components, i.e. building parts, product assets and process details, the 3D data collected during digitalization can be processed with advanced methods of deep learning. In this work, we propose a fully Bayesian and an approximate Bayesian neural network for point cloud segmentation. This allows us to analyze how different ways of estimating uncertainty in these networks improve segmentation results on raw 3D point clouds. We achieve superior model performance for both, the Bayesian and the approximate Bayesian model compared to the frequentist one. This performance difference becomes even more striking when incorporating the networks' uncertainty in their predictions. For evaluation we use the scientific data set S3DIS as well as a data set, which was collected by the authors at a German automotive production plant. The methods proposed in this work lead to more accurate segmentation results and the incorporation of uncertainty information makes this approach especially applicable to safety critical applications.

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2607.05955v1cs.CV공통 태그 Segmentation, Point Cloud Segmentation

NegROI: 강건한 인터랙티브 3D 분할을 위한 장면 조건부 네거티브 프롬프트와 클릭 중심 불확실성 기반 정제

NegROI: Click-Centric Uncertainty-Guided Refinement with Scene-Conditioned Negative Prompts for Robust Interactive 3D Segmentation

인터랙티브 3D 분할은 최소한의 사용자 클릭으로 포인트 클라우드에서 객체 마스크를 추출하는 것을 목표로 한다. 최근의 발전에도 불구하고, 대부분의 기존 접근법은 (i) 제한된 클릭 상황에서 세밀한 경계를 흐리게 만드는 거친 복셀 해상도와 (ii) 혼동하기 쉬운 배경 구조로 인해 발생하는 강성 거짓 양성(false positive) 문제에 여전히 어려움을 겪고 있다. 이러한 문제는 데이터셋 간 밀도 및 스케일 변화(예: 조밀한 RGB-D 재구성 대 희소한 LiDAR 스캔)로 인해 더욱 심화되며, 고정된 정제 휴리스틱과 순수 클릭 기반 디코딩은 일반화 성능이 낮다. 이를 해결하기 위해, 우리는 클릭 중심 다중 해상도 정제와 장면 조건부 네거티브 프롬프트를 결합한 새로운 트랜스포머 기반 인터랙티브 프레임워크인 NegROI를 제안한다. 거친 복셀 예측이 주어지면, 현재 클릭 주변의 로컬 관심 영역(ROI)만을 더 세밀한 그리드 위에서 정제하고, 정제된 로짓을 거친 마스크에 다시 융합한다. 강건성과 효율성을 향상시키기 위해, 모호한 영역을 우선시하는 불확실성 기반 선택적 정제를 도입한다. 또한, 장면 토큰에 대한 크로스-어텐션을 통해 얻은 장면 조건부 네거티브 프롬프트 집합으로 어려운 배경 패턴을 모델링한다. 나아가 다양성 정규화기(diversity regularizer)를 통해 이 프롬프트들을 안정화한다. 마지막으로, 경계 근접 고신뢰 거짓 양성에 대한 네거티브 프롬프트 어텐션을 지도하기 위해 경계 인식 하드 네거티브 마이닝(boundary-aware hard negative mining)을 제안한다. ScanNet, S3DIS, KITTI 등 주요 벤치마크 데이터셋에서의 실험을 통해, 최신 기법 대비 향상된 클릭 효율성, 감소된 거짓 양성, 그리고 더 강건한 크로스 데이터셋 일반화 성능을 입증한다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.