跳到正文
arXiv · AI· Jiaqi Xiong, Yunjia Qi, Qi Cao, Yu Zheng, Yutong Zhang, Ziteng Wang, Ruofan Liao, Weisheng Xu, Sichen Liu·· 2026-10-12AI 评分23

DEAF:音频大语言模型声学忠实度诊断基准

DEAF: A Benchmark for Diagnostic Evaluation of Acoustic Faithfulness in Audio Language Models

AI 导读

研究引入基准DEAF,包含2,700多个冲突样本,用于诊断音频多模态大语言模型是否真正处理声学信号。 该基准覆盖情感韵律、背景声音和说话人身份三个声学维度。 评估七款Audio MLLMs发现,尽管模型对声学变化敏感,但其预测主要受文本输入驱动,显示出标准语音基准高分与真实声学理解之间存在差距。

来源:arXiv · AI · arxiv.org