arXiv · NLP· S\'everin Baroudi, Yanis Labrak, Pierfrancesco Melucci, Sergio Burdisso, Petr Motlicek, Herv\'e Bredin, Mirco Ravanelli, Ricard Marxer·· 2026-10-06AI 评分31
语音语言模型免训练任务特化:基于对比激活添加的方法
Steering Speech-Language Models: Training-Free Task Specialization via Contrastive Activation Addition
AI 导读
该研究提出免训练的对比激活添加(CAA)协议,通过少量标注语音生成引导向量,在推理时优化语音语言模型(SpeechLLMs)在转录等任务上的表现。 与仅使用提示词相比,添加引导向量在自动语音识别和情绪识别等任务中带来一致提升,并具备跨域迁移能力。 证明了脚本归一化方向可有效强制特定语言的目标书写系统。
来源:arXiv · NLP · arxiv.org