arXiv · NLP· Aryan Vijay Bhosale, Harshit Rajgarhia, Abhishek Mukherji, Dinesh Manocha·· 4 小时前AI 评分45
TORUS:统一音频模型的闭环评测基准
TORUS: A Unified Closed-Loop Benchmark for Unified Audio Models
AI 导读
研究者发布音频原生闭环评测基准 TORUS,用于评估统一音频模型的自洽性。 该基准包含 1053 道题目,覆盖 21 项任务及 8 种音频领域场景。 最佳统一模型仅能正确回答 52.4% 的自我生成问题,而 gpt-audio 回答率为 53.6%。
来源:arXiv · NLP · arxiv.org