跳到正文
arXiv · AI· Kwangsuk Park, JiWoong Yang, Vaniushkina Kseniia·· 21 天前AI 评分36

当事实变成故事:模型改写新闻时,源一致性指标遗漏了哪些失真?

What Breaks When Facts Become Stories? The Distortions Source-Agreement Metrics Miss When Models Retell Real Events

AI 导读

三项模型家族将2000篇新闻改写为摘要与故事,研究发现“源一致性”指标无法准确衡量重构中的故意偏离,导致真实失真被遗漏。在故事中,问责失真上升高达7倍,其中三分之二的案例减轻了肇事者的责任。为支持检测研究,作者发布了可重构语料库ReTold-2k。

来源:arXiv · AI · arxiv.org