跳到正文
热点事件持续更新

ReListen免训练小时级音频定位方法发布

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

研究人员Ming-Hao Hsu等提出并发布了ReListen,这是一种免训练方法,利用冻结的音频语言模型在回答前自行定位小时级音频中的关键证据。 该方法采用Jev风格扫描机制,模型对20秒窗口进行评分并选出最高分的一分钟作为证据。在VoiceGiraffe数据集上,88.5%的问题定位效果优于转录检索,准确率比全转录高出9.2分。 ReListen在推理速度上优于所有基于转录的系统,且显存占用恒定。该方法无需额外训练即可处理超长音频,实现了高效且低资源消耗的证据定位。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. arXiv · NLP
    ReListen:基于冻结音频语言模型的免训练小时级音频证据定位

    提出免训练方法 ReListen,利用冻结音频语言模型通过 Jev 风格扫描定位小时级音频中的关键证据。 模型对 20 秒窗口进行评分,选出最高分的一分钟作为证据,在 VoiceGiraffe 数据集上 88.5% 的问题定位优于转录检索,准确率比全转录高 9.2 分。 该方法推理速度优于所有基于转录的系统,且显存占用恒定,无需额外训练即可处理超长音频。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。