跳到正文
arXiv · ML· Benjamin Van Niekerk, Jean-Philippe Letendre, Nicol Visser, Hugo Seute, Herman Kamper, Mirco Ravanelli·· 3 天前AI 评分28

Facto 提出分解自监督语音分词方法

Factorized Self-Supervised Speech Tokenization

AI 导读

研究提出 Facto 自监督语音分词器,通过分解静态与动态信息提升 token 对噪声扰动的鲁棒性。 方法基于线性分解处理未见说话人,理论分析了收敛与扩展特性,并验证了其在 TTS 和语音转换任务中的性能提升。 代码与模型检查点已开源发布。

来源:arXiv · ML · arxiv.org