跳到正文
arXiv · NLP· Anastasia Voznyuk, Andrey Grabovoy·· 2026-10-12AI 评分31

机器生成文本检测器对格式伪影的依赖性测量

Measuring Artifact Reliance in Machine-Generated Text Detectors

AI 导读

研究发现,机器生成文本检测器在科学文献基准上接近完美的表现,主要源于对PDF提取格式伪影的过度依赖。 使用仅含27个表层特征的逻辑回归模型,在arXiv子集上取得了0.951-0.997的macro-F1分数,甚至超过了所有评测的专用检测器。 仅对生成文本重新排版而不改变一个字,就能反转公开检测器20-27%的正确判断,证实了这种表面特征的主导地位。

来源:arXiv · NLP · arxiv.org