FVScore: 명세 기반 신경기호 비디오 평가
FVScore: Specification-Driven Neuro-Symbolic Video Evaluation
한국어 초록
비디오 생성 결과를 명세에 따라 평가하는 신경기호 프레임워크 Faithfulness Video Score(FVSCORE)를 소개한다. 기존 평가기는 멀티모달 대규모 언어 모델(MLLM)의 종합 판정이나 비전-언어 평가지표에 의존한다. 그 점수를 사람의 판단과 맞추고 구체적인 시간 관련 위반까지 거슬러 올라가기는 여전히 어렵다. FVSCORE는 비디오마다 프롬프트의 요건을 담은 명시적 명제와, 명시하지 않은 물리적·시간적·모달리티 간 제약을 담은 암묵적 명제를 구성한다. 특화된 인식 도구로 각 명제를 관측 근거와 연결하고, 선형 시간 논리에서 착안한 소프트 시간 연산자로 시간에 따른 신뢰도 기록을 평가한다. 이어 지각적 중요도를 고려한 보정 단계에서 사람이 지각할 만큼 중요한 위반만 남긴다. 이렇게 검증을 인간의 지각에 맞추고, 타임스탬프와 근거를 연결한 보고서를 생성한다. 공개 벤치마크와 복잡한 다중 사건 벤치마크에서 현재 가장 성능이 높은 비디오 모델을 대상으로 광범위하게 실험했다. FVSCORE는 종합 평가기 및 에이전트 기반 평가기보다 사람 판단과의 상관이 높았으며, 정확하고 해석하기 쉬운 피드백을 제공했다.
원문 초록
We introduce Faithfulness Video Score (FVSCORE), a neuro-symbolic framework for specification-driven video generation evaluation. Existing evaluators rely on holistic MLLM judgments or vision-language metrics, yet aligning their scores with human judgments and tracing them to specific temporal violations remain open challenges. FVSCORE addresses these limitations by compiling each video into explicit propositions capturing prompt requirements and implicit propositions capturing unstated physical, temporal, and cross-modal constraints. It grounds each proposition using specialized perceptual tools and evaluates the resulting confidence traces with soft temporal operators inspired by Linear Temporal Logic. A Significance-Aware Calibration step then aligns verification with human perception by retaining only perceptually significant violations before producing a timestamp- and evidence-grounded report. We conduct extensive experiments across public and complex multi-event benchmarks with the strongest video models to date, demonstrating that FVSCORE outperforms holistic and agent-based evaluators in human correlation while providing highly accurate and interpretable feedback.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.22673v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.