EVA-RSI: 시간적 품질 판단을 위한 비디오 평가기의 재귀적 자기 개선
EVA-RSI: Recursive Self-Improvement of Video Evaluators for Judging Temporal Quality
한국어 초록
비디오 평가기는 비디오 생성에서 중요한 역할을 하지만 움직임 결함을 놓치므로 생성된 비디오의 품질을 제한한다. 재귀적 자기 개선(RSI)은 명시적 검증기가 단일 목표에 대해 신뢰할 수 있는 피드백을 제공하는 수학과 코딩 분야에서 큰 진전을 이루었다. 비디오 평가는 RSI에 두 가지 어려움을 제기한다. 검증기가 없다는 점과, 물리성, 부드러움, 역동성 등 여러 차원을 동시에 판단해야 하며 한 차원의 향상이 다른 차원의 손실로 이어질 수 있다는 점이다. 본 논문은 이 두 제약 아래에서 RSI를 탐구하기 위한 멀티 에이전트 프레임워크인 EVA-RSI를 제안한다. 시간 역전과 프레임 삭제 같은 통제된 변형을 비디오에 적용하여, 구성 방식에 의해 정답이 정의되는 고정 대리 시험을 구축한다. 이러한 편집은 사람의 주석 없이 지도 신호를 제공한다. 소량의 사람이 라벨링한 실제 비디오가 이 시험을 사람의 판단에 고정시킨다. 각 차원마다 개선안을 제안하는 LLM 에이전트가 있다. 리더 에이전트가 제안들을 조율하고, 내시 협상 규칙이 차원 간 진전의 균형을 맞추는 업데이트를 선택한다. 사람은 시험을 설계하고, 후보 변경을 검토하며, 단계 사이에 커리큘럼을 수정한다. Qwen3-VL-8B에서 출발한 EVA-RSI는 움직임 평가를 향상시키며 부드러움에서 가장 큰 향상을 보이고, 그 향상은 실행 중 접하지 않은 결함 유형으로도 이어진다. 공개 벤치마크의 역동성 부분집합에서 본 평가기는 테스트한 21개 모델 중 가장 높은 점수를 기록한다. 강화학습 보상으로 사용하면 생성되는 움직임이 증가하고 사람의 선호를 얻는다. 이를 포함한 데이터 선택 파이프라인 또한 움직임을 증가시킨다.
원문 초록
Video evaluators play an important role in video generation, yet they miss motion defects, limiting the quality of generated videos. Recursive self-improvement (RSI) has made strong progress in mathematics and coding, where explicit verifiers provide reliable feedback on a single goal. Video evaluation poses two difficulties for RSI: it has no verifier, and it must judge many dimensions at once, such as physics, smoothness and dynamics, where a gain on one can cost another. We introduce EVA-RSI, a multi-agent framework for exploring RSI under these two constraints. We build a fixed proxy exam with construction-defined targets by applying controlled changes to videos, such as temporal reversal and frame dropping. These edits supply supervision without human annotation. A small set of human-labeled real videos anchors the exam to human judgment. Each dimension has an LLM agent that proposes improvements. A leader agent coordinates the proposals, and a Nash bargaining rule selects updates that balance progress across dimensions. Humans design the exam, review candidate changes and revise the curriculum between stages. Starting from Qwen3-VL-8B, EVA-RSI improves motion evaluation, with the largest gain on smoothness, and the gains carry over to defect types never seen during the run. On the dynamics subsets of public benchmarks, our evaluator achieves the highest observed scores among 21 tested models. As an RL reward, it increases generated motion and earns human preference. A data-selection pipeline incorporating it also increases motion.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.23890v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.