arXiv · AI· Jiaju Ma, Ashvini Kumar Jindal, Chuhua Wang, Sumithra Bhakthavatsalam·· 10 天前AI 评分28
MotionGraphicsBench:基于程序化验证评估动态图形生成
MotionGraphicsBench: Evaluating Motion Graphics Generation with Programmatic Verification
AI 导读
团队提出MotionGraphicsBench基准,用于评估大语言模型在动态图形生成中结合空间、外观和时间要求的指令遵循能力。 该基准包含100个专家策划实例,每个输入静态SVG与运动编辑提示配对确定性验证程序。在47种配置下,来自32个LLM和12个提供商的pass@1范围从6.0%到67.7%。
来源:arXiv · AI · arxiv.org