VolCo: 고충실도 인간 파지 생성을 위한 체적 접촉 표현
VolCo: Volumetric Contact for High-Fidelity Human Grasp Generation
한국어 초록
정확한 접촉 모델링은 손-물체 상호작용을 이해하는 데 핵심적이지만, 기존의 접촉 표현은 대개 물체 표면에 국한되며 접촉 세부 정보를 복원하기 위해 수작업 규칙에 의존하므로 심각한 관통과 비현실적인 결과를 초래합니다. 모션 캡처 데이터의 풍부한 세부 정보를 더 잘 활용하기 위해, 표면 점을 일련의 3D 체적 격자(volumetric grid)로 확장하는 표현인 Volumetric Contact(VolCo)를 도입합니다. VolCo는 정밀한 손 부위 복원을 가능하게 하는 3D 접촉을 인코딩하며, 고유한 계층 구조로 구성됩니다. 즉, 각 볼륨 내의 국소적 접촉 세부 정보와 모든 볼륨에 걸친 전역적 손 기하학 구조입니다. 우리의 프레임워크인 VolCoDiff는 이러한 계층 구조에 따라 국소 및 전역 특징을 포착하는 두 가지 모듈을 사용합니다. 국소적 접촉 세부 정보를 위해, 국소 물체 부호화 거리 필드(SDF)를 조건으로 가능한 손 구성을 모델링하는 3D 변분 오토인코더(VAE)를 사용합니다. 전역적 손 기하학 구조를 위해, 체적 격자에서 집계된 압축 잠재 특징의 분포를 학습하는 사전 정보 유도 확산 모델(prior-guided diffusion model)을 설계합니다. 두 가지 벤치마크 데이터셋에서 제안하는 방법을 평가하고 관통 및 안정성 측면에서 최고 수준(SOTA)의 성능을 입증하여, 훨씬 덜 심각한 관통으로 밀착된 파지를 생성할 수 있는 역량을 보여줍니다. 코드는 https://github.com/chzh9311/volco 에서 확인할 수 있습니다.
원문 초록
Accurate contact modeling is fundamental to understanding hand-object interaction, yet existing contact representations are typically restricted to object surfaces and rely on hand-crafted rules to recover contact details, leading to severe penetrations and implausible results. To better exploit the rich detail in motion-capture data, we introduce Volumetric Contact (VolCo), a representation that expands surface points to a set of 3D volumetric grids. VolCo encodes 3D contact that allows precise hand part recovery, and is organized in an inherent hierarchy: local contact details within each volume and global hand geometry across all volumes. Our framework, VolCoDiff, employs two modules to capture local and global features following this hierarchy. For local contact details, we use a 3D variational autoencoder to model the possible hand configurations conditioned on the local object signed distance field (SDF). For global hand geometry, we design a prior-guided diffusion model that learns the distribution of compressed latent features aggregated from the volumetric grids. We evaluate our method on two benchmark datasets and demonstrate state-of-the-art performance in penetration and stability, indicating the capability to generate tight grasps with much less severe penetrations. Our code is available at https://github.com/chzh9311/volco.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
Accepted to NeurIPS 2026