OracleZoom: 정답을 넘어서는 참조 제약 재귀적 이미지 초해상도
OracleZoom: Reference-Constrained Recursive Image Super-Resolution Beyond Ground Truth
한국어 초록
재귀적 이미지 초해상도(SR)는 각 예측을 동일한 모델에 다시 입력하여 이미지를 거듭 확대하듯 극단적인 배율에 도달한다. 깊은 확대에 대한 실제 정답은 확보하기 어려우며(256배 목표는 52 GB 이미지가 된다), 따라서 더 깊은 확대의 예측에는 감독 신호가 없다. 그러나 마지막 정답 이미지에는 모든 더 깊은 확대가 키우는 영역이 여전히 포함되어 있다. OracleZoom은 이 영역을 학습 신호로 전환한다. 온폴리시 자기 증류에서 착안하여, 모델이 한 번의 재귀 단계($4\times \rightarrow 16\times$)에 대한 자신의 예측으로 학습하고, 교차 스케일 손실이 각 $16\times$ 예측을 $4\times$의 마지막 정답으로 다시 투영한다. 이 투영은 거친 내용만 검증할 수 있으므로, 무참조 품질 목적함수가 나머지 세부 묘사를 유도하고 잠재 사전분포가 이 목적함수가 환각 아티팩트를 추가하는 것을 막는다. 7개 데이터셋에서 OracleZoom은 모든 확대 깊이에서 가장 높은 CLIPIQA를 달성하며(평균 0.713 대 Chain-of-Zoom 0.621), 학습이 $16\times$에서 멈추고 다른 품질 지표를 최적화함에도 가장 깊은 확대에서 이득이 가장 크다. 정답에 고정된 두 판정기를 합산한 결과, 이렇게 추가된 세부 묘사는 $16\times$에서 Chain-of-Zoom과 동일한 환각률이며 $4\times$에서는 더 낮은 환각률을 보이고, 교차 스케일 손실을 제거하면 $16\times$에서 환각이 증가한다.
원문 초록
Recursive image Super-Resolution (SR) reaches extreme magnification by feeding each prediction back into the same model, like zooming into an image again and again. Real ground truth for deep zooms is impractical to capture (a full $256\times$ target would be a 52 GB image), so predictions at deeper zooms have no supervision. Yet the last ground-truth image still contains the region that every deeper zoom magnifies. OracleZoom turns this region into a training signal. Inspired by on-policy self-distillation, the model trains on its own prediction for one recursive step ($4\times \rightarrow 16\times$), and a cross-scale loss projects each $16\times$ prediction back to the last ground truth at $4\times$. This projection can verify only coarse content, so a no-reference quality objective guides the remaining fine detail, and a latent prior stops this objective from adding hallucinated artifacts. On seven datasets, OracleZoom achieves the highest CLIPIQA at every zoom depth (mean 0.713 vs. 0.621 for Chain-of-Zoom), with the largest gains at the deepest zooms, even though training stops at $16\times$ and optimizes a different quality metric. Pooled over two ground-truth-anchored judges, this added detail comes at the same hallucination rate as Chain-of-Zoom at $16\times$ and a lower rate at $4\times$, and removing the cross-scale loss raises hallucination at $16\times$.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2609.06490v2제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.