arXiv · cs.CL· Aryan Vijay Bhosale, Harshit Rajgarhia, Abhishek Mukherji, Dinesh Manocha·· 4 小时前
TORUS：面向统一音频模型的闭环基准
TORUS: A Unified Closed-Loop Benchmark for Unified Audio Models
AI 导读
研究者提出 TORUS，一个音频原生统一基准，用 1,053 道题（117 项测试）覆盖 21 个任务、8 种音频域设置和全部 3 类音频，闭环评估统一音频模型的理解-生成自洽性。表现最好的统一模型只能答对其生成内容相关的 52.4% 问题，gpt-audio 为 53.6%。团队据此主张，理解-生成自洽性应成为未来统一音频系统的核心测试项。
来源：arXiv · cs.CL · arxiv.org