arXiv:2610.02201v1 cs.CV

SILSA: 위상 보존 고해상도 3D 생성을 위한 슬라이딩 윈도우 슬라이스 잠재 표현

SILSA: Sliding-Window Slice Latents for Topology-Preserving High-Resolution 3D Generation

Tianjiao Yu, Xinzhuo Li, Yifan Shen, Ying Shen, Kiet A. Nguyen, Adheesh Sunil Juvekar, Ismini Lourentzou

제출 2026-10-01

저자 비고

arXiv Comments

Accepted at NeurIPS 2026. Project link: https://plan-lab.github.io/silsa

한국어 초록

고해상도 3D 생성은 먼저 활성 구조를 예측한 다음 국소 기하 구조를 합성하는 복셀(voxel) 잠재 표현 및 다단계 파이프라인에 점점 더 의존하고 있습니다. 이러한 설계는 효과적이지만, 연속적인 표면을 수많은 국소 토큰(token)으로 파편화하고 생성 비용을 증가시키며, 얇거나 연결성이 높은 형상에 대해 위상학적 일관성을 약화시키는 경우가 많습니다. 본 논문에서는 조밀한 슬라이딩 윈도우 슬라이스 잠재 표현으로 형상을 표현하는 위상 인식 3D 생성 프레임워크인 SILSA를 소개합니다. 비용이 많이 드는 복셀 토큰을 생성하는 대신, SILSA는 세 개의 표준 축을 따라 고정된 중첩 슬라이스 세트를 사용하며, 각 토큰은 국소 깊이 윈도우를 요약하여 단면 연속성을 보존하고 단일 단계 정류 흐름(rectified-flow) 생성을 지원합니다. Slice VAE는 지향성 표면 샘플을 다축 슬라이스 잠재 표현으로 인코딩하고 이를 희소 체적 디코더로 재구성하는 한편, Volumetric Anchor Lattice는 공유된 3D 작업 공간을 통해 방향성 슬라이스 스트림을 조율합니다. 구조적 정확성을 보존하기 위해, 지속성 다이어그램(persistence diagram)을 매칭하고 이웃 슬라이스 간의 베티(Betti) 전이를 정렬하는 슬라이스 수준의 위상 감독 기법을 도입합니다. 실험 결과, SILSA는 생성 비용을 대폭 줄이면서 구조적 충실도를 향상시키는 것으로 나타났습니다. SILSA는 가장 강력한 기준선(baseline) 대비 PSNR을 8.7%, 커버리지를 5.96%p(절대 포인트), 베티 오류를 9.2% 개선하는 동시에, 그다음으로 조밀한 기준선보다 70.0% 적은 토큰을 사용하고 희소 또는 계층적 토크나이저보다 98% 이상 적은 토큰을 사용하여 학습(training) 메모리를 40.4%, 추론(inference) 시간을 58.5% 효과적으로 줄였습니다. 정성적 결과는 얇은 구조, 반복되는 구성 요소 및 장거리 연결성의 보존이 더욱 향상되었음을 보여줍니다.

원문 초록

High-resolution 3D generation increasingly relies on voxel latents and multi-stage pipelines that first predict active structure and then synthesize local geometry. While effective, this design fragments continuous surfaces into many local tokens, inflates generation cost, and often weakens topological consistency for thin or highly connected shapes. We introduce SILSA, a topology-aware 3D generation framework that represents shapes with compact sliding-window slice latents. Instead of generating expensive voxel tokens, SILSA uses a fixed set of overlapping slices along the three canonical axes, where each token summarizes a local depth window to preserve cross-sectional continuity and support single-stage rectified-flow generation. A Slice VAE encodes oriented surface samples into multi-axis slice latents and reconstructs them with a sparse volumetric decoder, while a Volumetric Anchor Lattice coordinates directional slice streams through a shared 3D workspace. To preserve structural correctness, we introduce slice-level topology supervision that matches persistence diagrams and aligns Betti transitions across neighboring slices. Experiments show that SILSA improves structural fidelity while substantially reducing generation cost. SILSA improves PSNR by $8.7\%$, coverage by $5.96$ absolute points, and Betti error by $9.2\%$ over the strongest baseline, while using $70.0\%$ fewer tokens than the next-most compact baseline and over $98\%$ fewer tokens than sparse or hierarchical tokenizers, effectively reducing training memory by $40.4\%$ and inference time by $58.5\%$. Qualitative results further show improved preservation of thin structures, repeated components, and long-range connectivity.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.02201v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.