Dual Adaptive Transformations for Weakly Supervised Point Cloud Segmentation
원문 초록
Weakly supervised point cloud segmentation, i.e. semantically segmenting a point cloud with only a few labeled points in the whole 3D scene, is highly desirable due to the heavy burden of collecting abundant dense annotations for the model training. However, existing methods remain challenging to accurately segment 3D point clouds since limited annotated data may lead to insufficient guidance for label propagation to unlabeled data. Considering the smoothness-based methods have achieved promising progress, in this paper, we advocate applying the consistency constraint under various perturbations to effectively regularize unlabeled 3D points. Specifically, we propose a novel DAT (\textbf{D}ual \textbf{A}daptive \textbf{T}ransformations) model for weakly supervised point cloud segmentation, where the dual adaptive transformations are performed via an adversarial strategy at both point-level and region-level, aiming at enforcing the local and structural smoothness constraints on 3D point clouds. We evaluate our proposed DAT model with two popular backbones on the large-scale S3DIS and ScanNet-V2 datasets. Extensive experiments demonstrate that our model can effectively leverage the unlabeled 3D points and achieve significant performance gains on both datasets, setting new state-of-the-art performance for weakly supervised point cloud segmentation.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
NegROI: 강건한 인터랙티브 3D 분할을 위한 장면 조건부 네거티브 프롬프트와 클릭 중심 불확실성 기반 정제
NegROI: Click-Centric Uncertainty-Guided Refinement with Scene-Conditioned Negative Prompts for Robust Interactive 3D Segmentation
인터랙티브 3D 분할은 최소한의 사용자 클릭으로 포인트 클라우드에서 객체 마스크를 추출하는 것을 목표로 한다. 최근의 발전에도 불구하고, 대부분의 기존 접근법은 (i) 제한된 클릭 상황에서 세밀한 경계를 흐리게 만드는 거친 복셀 해상도와 (ii) 혼동하기 쉬운 배경 구조로 인해 발생하는 강성 거짓 양성(false positive) 문제에 여전히 어려움을 겪고 있다. 이러한 문제는 데이터셋 간 밀도 및 스케일 변화(예: 조밀한 RGB-D 재구성 대 희소한 LiDAR 스캔)로 인해 더욱 심화되며, 고정된 정제 휴리스틱과 순수 클릭 기반 디코딩은 일반화 성능이 낮다. 이를 해결하기 위해, 우리는 클릭 중심 다중 해상도 정제와 장면 조건부 네거티브 프롬프트를 결합한 새로운 트랜스포머 기반 인터랙티브 프레임워크인 NegROI를 제안한다. 거친 복셀 예측이 주어지면, 현재 클릭 주변의 로컬 관심 영역(ROI)만을 더 세밀한 그리드 위에서 정제하고, 정제된 로짓을 거친 마스크에 다시 융합한다. 강건성과 효율성을 향상시키기 위해, 모호한 영역을 우선시하는 불확실성 기반 선택적 정제를 도입한다. 또한, 장면 토큰에 대한 크로스-어텐션을 통해 얻은 장면 조건부 네거티브 프롬프트 집합으로 어려운 배경 패턴을 모델링한다. 나아가 다양성 정규화기(diversity regularizer)를 통해 이 프롬프트들을 안정화한다. 마지막으로, 경계 근접 고신뢰 거짓 양성에 대한 네거티브 프롬프트 어텐션을 지도하기 위해 경계 인식 하드 네거티브 마이닝(boundary-aware hard negative mining)을 제안한다. ScanNet, S3DIS, KITTI 등 주요 벤치마크 데이터셋에서의 실험을 통해, 최신 기법 대비 향상된 클릭 효율성, 감소된 거짓 양성, 그리고 더 강건한 크로스 데이터셋 일반화 성능을 입증한다.
Semantic Context Encoding for Accurate 3D Point Cloud Segmentation
Indoor Point Cloud Segmentation Using Iterative Gaussian Mapping and Improved Model Fitting
Alleviating Textual Reliance in Medical Language-guided Segmentation via Prototype-driven Semantic Approximation
A New Dataset and Performance Benchmark for Real-time Spacecraft Segmentation in Onboard Flight Computers
Seg-Wild: Interactive Segmentation based on 3D Gaussian Splatting for Unconstrained Image Collections
토론
이 논문과 연결된 포럼 글이 아직 없습니다.