腾讯混元及其合作伙伴发布了MMAE评估标准,结果显示人工智能音频编辑技术的精确度低于5%。

人工智能在音频生成领域已取得显著进展,但编辑现有音频仍是一项重大挑战。近期,腾讯混元联合上海交通大学、南洋理工大学、天津大学、北京大学及复旦大学等顶尖研究机构,推出了MMAE(大规模多任务音频编辑基准测试)——这是首个专为通用指令驱动型音频编辑设计的大规模多任务基准测试。该基准的推出为人工智能音频编辑领域确立了系统的评估标准,同时也暴露出现有技术在实现精准修改方面的明显不足。
从“生成”到“编辑”:人工智能音频面临的真正挑战
传统的音频人工智能技术主要侧重于根据文本或提示词生成新内容。而MMAE基准测试的核心要求则是让模型理解现有的音频片段,并依据自然语言指令进行精准调整:仅修改需要改动的部分,其余部分保持不变。这种“编辑而非重构”的思路对音频的保真度、指令遵循能力以及上下文理解深度都有更高要求,因此更贴近播客后期制作、音乐混音和语音个性化等实际应用场景。
测试结果显示,当前主流模型的整体精确匹配率低于5%,这凸显出可靠音频编辑技术存在的巨大差距。这意味着在处理实际的编辑任务时,人工智能往往会出现过度修改、遗漏指令或降低原始音频质量等问题。
MMAE基准测试的亮点:针对真实场景的多维度评估
MMAE基准测试在设计上极为严谨周全,具备以下核心特点:
2,000个高保真样本:全部取自现实场景,确保评估具有实用性和多样性。17,741项细粒度评估指标:提供详尽的评分标准,便于进行客观量化。7种模态设置:涵盖声音、音乐、语音及其组合,可支持在复杂的音频环境中进行测试。6个任务复杂度等级:从基础修改到多步推理及多轮编辑不等,能够全面评估模型的能力。8类操作类型:支持不同粒度上的编辑任务,包括局部和全局操作,从而考验模型对细节的掌控能力。
AIbase评论:MMAE不仅仅是一个技术评估工具,更是推动音频人工智能从“生成型”向“可编辑型”转变的重要里程碑。它为研究人员和开发者提供了统一的评估标准,有望加速下一代音频编辑模型的发展。
未来展望:音频编辑或将成为人工智能多模态系统的核心能力
随着多模态大模型快速发展,精准的音频编辑将在内容创作、电影后期制作以及无障碍工具等领域发挥关键作用。腾讯混元与其他机构近期的合作体现了中国在音频人工智能研究领域的领先地位。业内预计未来会有更多开源资源及后续模型出现,共同填补这一技术空白。
相关文章
苹果 iOS 27:Siri 迎来重大升级,新规限制摘要网页链接
随着人工智能的飞速发展,苹果在其最新操作系统中进一步完善了隐私和生态系统策略。新发布的 iOS 27 Beta 2 更新进一步收紧了 Apple Intelligence 的使用规则,直接限制了 Siri 处理外部网页链接的能力。根据更新的系统提示,如果用户提供一个具体的URL,并要求Siri对其进行摘要、朗读或提取信息,Siri必须明确告知用户其无法访问该网页。保护内容生态系统:禁止直接抓取更新
阿里云推出 Meeo CLI,一款支持一键部署的开源工具
阿里云推出了 Meoo(Miao Wu),这是一款旨在简化本地 AI 编程项目启动流程的开源命令行工具。通过弥合本地开发与云部署之间的鸿沟,Meoo 使开发者能够快速将本地原型转化为可运行的应用程序,从而显著降低了部署 AI 原生解决方案的门槛。简化本地项目部署通常情况下,由本地 AI 编程助手生成的应用程序仅限于本地执行和预览。将其部署到线上往往需要手动处理复杂的任务,包括数据库配置、用户认证、
谷歌推出 Veo 3.1 Lite 视频模式,为 Ultra 订阅用户提供无限生成功能
谷歌推出了一种新的视频生成模式——“Veo 3.1 - Lite [低优先级]”,该模式专为 Ultra 订阅用户设计,旨在提升创作效率并提高成本效益。 该模式的主要优势在于运行时不会消耗额外的订阅积分,它与现有的“Veo 3.1 - Fast [低优先级]”选项协同工作,从而降低了高质量 AI 视频创作的门槛。作为谷歌产品线中性价比最高且响应最快的选项,Veo 3.1 Lite 的价格不到 Fa
相关专题推荐
评论 (0)
0/500

人工智能在音频生成领域已取得显著进展,但编辑现有音频仍是一项重大挑战。近期,腾讯混元联合上海交通大学、南洋理工大学、天津大学、北京大学及复旦大学等顶尖研究机构,推出了MMAE(大规模多任务音频编辑基准测试)——这是首个专为通用指令驱动型音频编辑设计的大规模多任务基准测试。该基准的推出为人工智能音频编辑领域确立了系统的评估标准,同时也暴露出现有技术在实现精准修改方面的明显不足。
从“生成”到“编辑”:人工智能音频面临的真正挑战
传统的音频人工智能技术主要侧重于根据文本或提示词生成新内容。而MMAE基准测试的核心要求则是让模型理解现有的音频片段,并依据自然语言指令进行精准调整:仅修改需要改动的部分,其余部分保持不变。这种“编辑而非重构”的思路对音频的保真度、指令遵循能力以及上下文理解深度都有更高要求,因此更贴近播客后期制作、音乐混音和语音个性化等实际应用场景。
测试结果显示,当前主流模型的整体精确匹配率低于5%,这凸显出可靠音频编辑技术存在的巨大差距。这意味着在处理实际的编辑任务时,人工智能往往会出现过度修改、遗漏指令或降低原始音频质量等问题。
MMAE基准测试的亮点:针对真实场景的多维度评估
MMAE基准测试在设计上极为严谨周全,具备以下核心特点:
2,000个高保真样本:全部取自现实场景,确保评估具有实用性和多样性。17,741项细粒度评估指标:提供详尽的评分标准,便于进行客观量化。7种模态设置:涵盖声音、音乐、语音及其组合,可支持在复杂的音频环境中进行测试。6个任务复杂度等级:从基础修改到多步推理及多轮编辑不等,能够全面评估模型的能力。8类操作类型:支持不同粒度上的编辑任务,包括局部和全局操作,从而考验模型对细节的掌控能力。
AIbase评论:MMAE不仅仅是一个技术评估工具,更是推动音频人工智能从“生成型”向“可编辑型”转变的重要里程碑。它为研究人员和开发者提供了统一的评估标准,有望加速下一代音频编辑模型的发展。
未来展望:音频编辑或将成为人工智能多模态系统的核心能力
随着多模态大模型快速发展,精准的音频编辑将在内容创作、电影后期制作以及无障碍工具等领域发挥关键作用。腾讯混元与其他机构近期的合作体现了中国在音频人工智能研究领域的领先地位。业内预计未来会有更多开源资源及后续模型出现,共同填补这一技术空白。
苹果 iOS 27:Siri 迎来重大升级,新规限制摘要网页链接
随着人工智能的飞速发展,苹果在其最新操作系统中进一步完善了隐私和生态系统策略。新发布的 iOS 27 Beta 2 更新进一步收紧了 Apple Intelligence 的使用规则,直接限制了 Siri 处理外部网页链接的能力。根据更新的系统提示,如果用户提供一个具体的URL,并要求Siri对其进行摘要、朗读或提取信息,Siri必须明确告知用户其无法访问该网页。保护内容生态系统:禁止直接抓取更新
阿里云推出 Meeo CLI,一款支持一键部署的开源工具
阿里云推出了 Meoo(Miao Wu),这是一款旨在简化本地 AI 编程项目启动流程的开源命令行工具。通过弥合本地开发与云部署之间的鸿沟,Meoo 使开发者能够快速将本地原型转化为可运行的应用程序,从而显著降低了部署 AI 原生解决方案的门槛。简化本地项目部署通常情况下,由本地 AI 编程助手生成的应用程序仅限于本地执行和预览。将其部署到线上往往需要手动处理复杂的任务,包括数据库配置、用户认证、
谷歌推出 Veo 3.1 Lite 视频模式,为 Ultra 订阅用户提供无限生成功能
谷歌推出了一种新的视频生成模式——“Veo 3.1 - Lite [低优先级]”,该模式专为 Ultra 订阅用户设计,旨在提升创作效率并提高成本效益。 该模式的主要优势在于运行时不会消耗额外的订阅积分,它与现有的“Veo 3.1 - Fast [低优先级]”选项协同工作,从而降低了高质量 AI 视频创作的门槛。作为谷歌产品线中性价比最高且响应最快的选项,Veo 3.1 Lite 的价格不到 Fa





首页






