arXiv · AI· Yuanhao Ban, Tong Xie, Sohyun An, Yunqi Hong, Evan Frick, I-Hung Hsu, Wei-Lin Chiang, Ion Stoica, Cho-Jui Hsieh·· 14 小时前AI 评分35
Arena-T2I Hard:基于依赖感知清单的 T2I 模型忠实度基准与改进方法
Arena-T2I Hard: Benchmarking and Improving Faithfulness with Dependency-Aware Checklist
AI 导读
Arena-T2I Hard 是一个包含 310 条提示词的 T2I 忠实度基准,每条提示词分解为约 30 个 yes/no 约束,涵盖文本渲染等六类场景。 该基准显示最强闭源系统得分为 0.855,11 个系统间存在 33 个百分点的性能差距,且高 Arena 排名无法预测忠实度。
来源:arXiv · AI · arxiv.org