스펙트럼 조향: 가중치를 고정한 확산 생성 모델의 국소 역기하
Spectral Steering: Local Inverse Geometry for Frozen Diffusion Generators
한국어 초록
가중치를 고정한 확산 생성 모델에서 출력의 일부 속성을 보존하면서 다른 여러 속성을 변경해야 할 때가 있다. 본 연구는 언제 유도 방식이 이런 구조화된 요청을 충실하게 실현하는지, 국소 역 보정이 변경 방향을 개선하는지 조사한다. 이점은 요청과 목표별로 남은 샘플링 과정의 야코비안 사이의 상호작용에 달려 있다. 요청을 조건으로 주는 것만으로는 충분하지 않다. 스펙트럼 조향은 요청별 코사인 개선량 예측기와 감쇠 역 보정, 유한한 크기의 편집을 위한 고정 시점 재선형화를 결합한다. 스칼라 대조군과 변화량을 같게 맞춘 대조군으로 예측한 메커니즘을 시험한다. 사후에 식별한 국소 영역의 사례 8,923건에서 예측한 개선과 실제 개선의 스피어먼 상관계수는 0.79였다. 조건수를 사용하면 -0.11이었다. 실험은 이미지, 오디오, 로봇 공학, 제어 및 계획을 아우르며 복잡한 캐릭터 동작 생성도 포함한다. 짝지은 인페인팅 사례 50건에서 도함수 계산을 위한 전체 순회 횟수를 동일하게 맞췄을 때, 네 차례 보정하면 관측하지 않은 픽셀의 PSNR이 Adam보다 3.25dB 높아졌다. 이 분석과 대조 실험은 요청에 따른 기하 구조가 방향 개선과 어떻게 연결되는지 보여 주며, 그 개선이 후속 과제 성능으로 이어지는 조건을 확인한다.
원문 초록
A frozen diffusion generator may need to change several output properties while preserving others. We study when guidance faithfully realizes such a structured request and whether local inverse correction improves its direction. Our account links this benefit to the interaction between the request and the objective-specific remaining-sampler Jacobian: conditioning alone is insufficient. Spectral steering combines a request-specific cosine-gain predictor with damped inverse correction and fixed-time relinearization for finite edits. Scalar nulls and matched-movement controls test the predicted mechanism. Across 8,923 instances in a retrospectively identified local regime, predicted and realized gains correlate at Spearman 0.79, versus -0.11 for condition number. Experiments span images, audio, robotics, and control and planning, including complex character motion generation. On 50 paired inpainting cases, four corrections improve unobserved-pixel PSNR over Adam by 3.25 dB at equal total derivative traversals. Together, the analysis and controls connect request-dependent geometry to directional gains and establish where these gains translate into downstream performance.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.19572v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.