arXiv:2610.12127v1 cs.CV

LVS: 이전 뷰를 재사용하여 상대적 카메라 포즈로부터 국소 뷰를 합성하는 방법

LVS: Local View Synthesis from Relative Camera Pose by Reusing Previous Views

Qizhou Huo, Xuan Sun, Yongfei Guo, Zhipeng Wang, Yuanhao Gong

제출 2026-10-08

한국어 초록

상호작용형 장면 탐험(exploration)은 빈번한 뷰 업데이트를 요구하지만, 카메라의 작은 움직임에서는 가시적인 콘텐츠의 대부분이 보존됩니다. 그럼에도 불구하고 기존 3D Gaussian Splatting은 각 타깃 뷰를 매번 새로 렌더링하므로 이러한 이미지 중첩을 활용하지 못합니다. 이미 렌더링된 이미지를 재사용하는 것은 대안이 될 수 있습니다. 그러나 기하학적 워핑(geometric warping)만으로는 새롭게 노출된 콘텐츠를 복원할 수 없으며 깊이(depth) 오차에 민감하게 반응합니다. 본 논문에서는 인접한 뷰에 대한 반복적인 장면 렌더링을 상대적 포즈 기반의 RGB-D 이미지 재사용으로 대체하는 장면별(per-scene) 프레임워크를 제안합니다. 기하학적 워핑은 깊이와 상대적 포즈를 활용하여 소스 콘텐츠를 이동시키며, 경량 멀티스케일 네트워크는 RGB 잔차(residual)를 예측하여 아티팩트를 보정하고 누락된 외관을 추론합니다. 또한 캐시된 소스 피처를 통해 반복 계산을 더욱 줄입니다. GS-render에서 잔차 정제는 순수 워핑 대비 PSNR을 0.72 dB 향상시켰으며, 실제 캡처된 장면과 렌더링된 장면에 대한 평가를 통해 낮은 쿼리 지연 시간(latency)을 입증했습니다. 이러한 장면 렌더링과 국소 뷰 업데이트의 분리는 반응성이 뛰어난 장면 탐험을 지원하며, 증강 현실(AR) 및 가상 현실(VR) 분야로의 응용 가능성을 제시합니다.

원문 초록

Interactive scene exploration requires frequent view updates, although small camera motions preserve much of the visible content. Conventional 3D Gaussian Splatting nevertheless renders each target view, leaving this image overlap unexploited. Reusing rendered images offers an alternative. Geometric warping alone cannot recover newly exposed content and remains sensitive to depth errors. We propose a per-scene framework that replaces repeated scene rendering for nearby views with relative-pose-guided RGB-D image reuse. Geometric warping uses depth and relative pose to transport source content, while a lightweight multiscale network predicts RGB residuals to correct artifacts and infer missing appearance. Cached source features further reduce repeated computation. On GS-render, residual refinement improves PSNR by 0.72~dB over pure warping; evaluations on captured and rendered scenes demonstrate low query latency. This separation of scene rendering from local view updates supports responsive scene exploration, with potential applications in augmented and virtual reality.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.12127v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.