arXiv · NLP· Anastasia Voznyuk, Andrey Grabovoy·· 2026-10-12AI 评分31
机器生成文本检测器对格式伪影的依赖性测量
Measuring Artifact Reliance in Machine-Generated Text Detectors
AI 导读
研究发现,机器生成文本检测器在科学文献基准上接近完美的表现,主要源于对PDF提取格式伪影的过度依赖。 使用仅含27个表层特征的逻辑回归模型,在arXiv子集上取得了0.951-0.997的macro-F1分数,甚至超过了所有评测的专用检测器。 仅对生成文本重新排版而不改变一个字,就能反转公开检测器20-27%的正确判断,证实了这种表面特征的主导地位。
来源:arXiv · NLP · arxiv.org