arXiv · AI· Kwangsuk Park, JiWoong Yang, Vaniushkina Kseniia·· 21 天前AI 评分36
当事实变成故事:模型改写新闻时,源一致性指标遗漏了哪些失真?
What Breaks When Facts Become Stories? The Distortions Source-Agreement Metrics Miss When Models Retell Real Events
AI 导读
三项模型家族将2000篇新闻改写为摘要与故事,研究发现“源一致性”指标无法准确衡量重构中的故意偏离,导致真实失真被遗漏。在故事中,问责失真上升高达7倍,其中三分之二的案例减轻了肇事者的责任。为支持检测研究,作者发布了可重构语料库ReTold-2k。
来源:arXiv · AI · arxiv.org