arXiv · NLP· Koki Ryu, Hitomi Yanaka·· 8 小时前AI 评分28
VocalGrad: 评估音频语言模型的声学感知能力
VocalGrad: Evaluating Acoustic Perception in Audio Language Models
AI 导读
VocalGrad基准显示前沿LALM在声学感知上表现接近随机水平，而人类标注者准确率极高。 该基准将任务简化为时间变化方向的二分类，通过线性探针发现LALM存在两种失败模式：信息未利用或随层级线性可解码性下降。
来源：arXiv · NLP · arxiv.org