좋은 발표는 요약처럼 보이지 않는다, 가르쳐야 한다! 논문-to-비디오 발표에서 핵심 전달 내용 측정
A Good Talk Does not Look Like a Summary, It Teaches You! Measuring Takeaways from Paper-to-Video Talks
과학 논문에서 자동 생성된 비디오는 교육 및 연구 보급에 점점 더 많이 활용되고 있다. 그러나 기존 평가 지표들은 주로 시각적 품질이나 논문의 핵심 내용이 비디오에 등장하는지 여부를 측정할 뿐, 비디오가 실제로 시청자의 아이디어 이해에 도움이 되는지는 평가하지 않는다. 우리는 과학 발표 비디오의 교육적 품질을 평가하는 프레임워크인 EffectivePresentationScorer를 소개한다. 이 프레임워크는 비디오가 주요 아이디어를 명확하게 설명하는지, 필요한 배경 개념을 소개하는지, 기술적 세부 사항을 논문의 주요 기여와 연결하는지를 확인한다. EffectivePresentationScorer를 기존 논문-to-비디오 생성 시스템에 적용한 결과, 생성된 비디오들이 올바른 주제를 언급하고 논문의 구조를 따르기는 하지만, 선수 개념을 설명하거나 해당 방법이 왜 효과적인지 명확히 하는 데는 실패하는 것으로 나타났다. 이러한 실패들은 설명적 품질보다 내용의 존재 여부에 초점을 맞추는 기존 비디오 평가 지표에 의해 종종 간과된다.