arXiv · NLP· Xiaozhe Ji, Renfen Hu, Hai Hu·· 8 小时前AI 评分20
PinyinBench 揭示语言模型汉字音韵知识局限
Phonological Knowledge of Chinese Characters in Language Models
AI 导读
研究引入 PinyinBench 基准，评估 17 个语言模型的汉字音韵知识。前沿模型 DS-v4-flash 在声母韵母识别达 90%+，但仅声调差异时降至 72%。 音调信息嵌入可解码性强但因果干预弱，音频训练提升音韵解码但未增强操控效果。证实声调知识最难获取与操纵。
来源：arXiv · NLP · arxiv.org