ReTouchGS: 3D 가우시안 스플래팅을 위한 렌더링 없는 초경량 색감 개선과 전이
ReTouchGS: Ultralight Render-free Aesthetic Color Enhancement and Transfer for 3D Gaussian Splatting
한국어 초록
3D 가우시안 스플래팅(3DGS)을 사용하면 사진처럼 사실적인 장면을 재구성할 수 있다. 기존 3DGS 색상 전이 및 대화형 편집 방법은 참조 이미지와 사용자가 지정한 색상 조정에 의존한다. 하지만 많은 응용에서 사용자가 원하는 것은 시점 간 색과 색조의 일관성을 유지하면서 장면의 색감을 보기 좋게 자동으로 개선하는 것이다. 사전학습한 3DGS 모델의 색감을 참조 이미지 없이 개선하는 프레임워크 ReTouchGS를 제안한다. 우리가 아는 한 이 유형의 첫 프레임워크다. 모델과 그에 대응하는 카메라 매개변수에서 장면 단위 색상 조회 테이블(LUT)을 예측한다. 같은 장면의 편집된 시점 하나와 그에 대응하는 원본 렌더링 결과로 장면 단위 LUT를 적합해 참조 기반 색상 전이도 지원한다. 블렌딩을 고려하는 공유 색상 정제 신경망은 매개변수가 4만 4,700개에 불과하다. 해석적으로 계산한 색상 갱신값을 정제해 두 종류의 색상 매핑을 모두 렌더링 없이 구현한다. 장면의 기하 구조를 보존하고 표준 3DGS 에셋을 수 초 내에 생성한다. 시점에 걸친 색감 개선과 참조 기반 색상 전이를 평가할 수 있도록 ReTouch3D 벤치마크도 설계했다. 실험에서 두 과제 모두 색상 정확도가 높았으며, 학습에 없던 장면에도 잘 일반화됐다.
원문 초록
3D Gaussian Splatting (3DGS) enables photorealistic scene reconstruction. Existing 3DGS color transfer and interactive editing methods are guided by reference images and user-specified color adjustments. However, in many applications, users simply want aesthetically guided color enhancement that automatically makes the scene more visually appealing while maintaining consistent colors and tones across viewpoints. We present ReTouchGS, to our knowledge the first framework for reference-free aesthetic color enhancement of pretrained 3DGS models. It predicts a scene-level color lookup table (LUT) from the model and its associated camera parameters. ReTouchGS also supports reference-guided color transfer by fitting a scene-level LUT using one edited view of the same scene and its corresponding original render. A shared blend-aware color refinement network with only 44.7K parameters refines an analytic color update to realize either color mapping without rendering. It preserves geometry and delivers standard 3DGS assets in seconds. We also design the ReTouch3D benchmark to support the evaluation of aesthetic color enhancement and reference-guided color transfer across viewpoints. Experiments demonstrate high color accuracy and strong generalization to unseen scenes in both aesthetic color enhancement and reference-guided color transfer.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.23054v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.