arXiv:2610.07072v1 cs.CV

VAE 잠재 공간에서의 색상 정렬과 그 응용에 대하여

On Color Alignment in VAE Latent Spaces and Its Applications

Julian D. Santamaria, Kai Wang, Jesús Malo, Javier Vazquez-Corral, Alexandra Gómez-Villa

제출 2026-10-05

한국어 초록

변분 오토인코더(VAE)는 잠재 공간 내에서 이미지를 생성하는 최신 텍스트-투-이미지(text-to-image) 모델의 핵심 구성 요소입니다. VAE는 데이터 내 변동의 주요 요인들을 분리(disentangle)하는 것으로 알려져 있으며, 색상은 자연 이미지에서 이러한 요인 중 가장 구조화된 요인 중 하나로 알려져 있습니다. 즉, 색상의 상관관계를 해소하면 하나의 밝기(luminance) 축과 두 개의 대립색(opponent-color) 축이 도출됩니다. 따라서 색상은 VAE 잠재 공간에서 뚜렷한 요인으로 창발할 것으로 기대되어야 합니다. 그러나 이러한 잠재 공간이 색상을 어떻게 표현하는지는 아직 거의 탐구되지 않은 상태입니다. 본 연구에서는 텍스트-투-이미지 모델의 VAE들이 밝기 및 대립색과 정렬(alignment)된 색상 부분공간(color subspace)을 공유함을 보여줍니다. 인코더의 선형 근사와 목표 잠재 제어(latent steering)를 통해, 저자들은 SD1.5부터 FLUX.2 및 Z-Image에 이르는 광범위한 VAE 전반에서 이러한 부분공간이 일관되게 존재함을 확인했습니다. 이러한 특성 규명을 기반으로 세 가지 응용 방안을 제안합니다. GenColorBench의 세분화된 CSS3/X11 체계에서 정밀한 수치적 색상 생성을 통해 최고 성능(SOTA)을 달성하는 ColorTuning, 전역적 채도 강도를 조절하는 채도 제어, 그리고 참조 이미지에 맞춰 팔레트를 변경하는 색상 전이(color transfer)입니다. 코드와 모델은 https://julian075.github.io/Color_Subspace/ 에서 공개되어 있습니다.

원문 초록

Variational autoencoders (VAEs) are a key part of modern text-to-image models, which generate images within their latent space. VAEs are known to disentangle the main factors of variation in the data, and color is known to be one of the most structured of these in natural images: decorrelating it yields one luminance axis and two opponent-color axes. Color should therefore be expected to emerge as a distinct factor in the VAE latent space. Yet how these latent spaces represent color remains largely unexplored. In this work, we show that the VAEs of text-to-image models share a color subspace aligned with brightness and opponent-colors. Through a linear approximation of the encoder and targeted latent steering, we find this subspace consistently across a broad range of VAEs, from SD1.5 to FLUX.2 and Z-Image. Building on this characterization, we propose three applications: ColorTuning, which achieves state-of-the-art in precise numerical color generation on the fine-grained CSS3/X11 system of GenColorBench, saturation control, to adjust the global chromatic intensity, and color transfer, to change the palette to match a reference. The code and models are publicly available at https://julian075.github.io/Color_Subspace/

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.07072v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.