arXiv · NLP· Bhaskar Ganesh Devalla, Junchao Wu, Nilesh Dokuparthi, Greeshma Yaluru, Tatiana Muniz Rodriguez, Lidia S. Chao, Derek F. Wong·· 8 小时前AI 评分33
IndicDetect:印地语、泰卢固语和泰米尔语跨语言 LLM 生成文本检测基准
IndicDetect: Evaluating Cross-Lingual LLM-Generated Text Detection for Hindi, Telugu, and Tamil
AI 导读
IndicDetect 发布了针对 Hindi、Telugu 和 Tamil 的 AI 生成文本检测基准,旨在评估检测器在现实分布偏移下的鲁棒性。 该基准包含人工撰写与 LLM 生成文本的配对数据,系统评估了统计和神经检测器在领域、生成器偏移及对抗扰动下的表现。 研究发现检测器存在显著鲁棒性失效,Hindi 在对抗扰动下表现最弱,IndicDetect 为此提供了标准化的数据分割与评估协议。
来源:arXiv · NLP · arxiv.org