阿里巴巴 Tongyi 推出支持自由风格自然语言控制的语音模型
今日,阿里巴巴同译实验室语音团队发布了两款突破性语音生成模型:Fun-CosyVoice3.5与Fun-AudioGen-VD。其核心亮点在于支持"自由风格"指令——用户无需复杂参数调整,仅通过自然语言描述即可精准操控声线表现风格,或从零构建复杂音频场景。

两款模型各具专长:
Fun-CosyVoice3.5:多语言复现与精细化控制
作为CosyVoice的增强版,该模型在理解语音表达细微差异方面实现核心突破。
指令驱动生成:用户可输入"说话更自信"或"放慢语速并加入情感变化"等指令实现实时语音调整。
语言扩展:新增泰语、印尼语、葡萄牙语及越南语支持,在13种语言中保持行业领先的转写准确率(WER)与语音相似度。
罕见字符优化:专项训练将非常用字符错误率从15.2%降至5.3%。
性能提升:首包延迟降低35%,显著增强实时交互流畅度。
Fun-AudioGen-VD:全面声音设计
该模型作为"音频导演",生成融合"角色+环境"的整合音频。
声音定制:可指定性别、年龄、口音及"沙哑/低沉/低音调"等精细特征。
情感与角色扮演:模拟客服专员、播音员、儿童等角色,甚至能传达"表面平静内心紧张"等复杂状态。
沉浸式环境:添加背景音效(战场喧嚣、咖啡馆低语)与空间特效(教堂混响、水下声学),实现全空间模拟。
同益实验室指出,这些模型将推动高质量语音创作的普及化,为播客制作、游戏开发及影视后期提供强大的AI支持。
相关文章
DeepMind首席执行官哈西里斯:我每天睡六个小时,通常在凌晨1点左右感到精力充沛。
Fortune 最近刊登了对谷歌 DeepMind 首席执行官 Demis Hassabis 的采访,揭示了他对休息和生产力的非传统方法。Hassabis 透露,他睡眠时间非常少,将清醒时间划分为两个不同的工作阶段。关于他的睡眠习惯,Hassabis 表示:“我目标睡六小时,但我的习惯非同寻常。我可以在白天有效运作。”他强调,睡眠少于六小时会对大脑健康产生负面影响。Hassabis 于 2010 年联合创立了 DeepMind(后被谷歌收购),并因其在蛋白质结构预测方面的开创性工作荣获 20
尽管营收未达预期,OpenAI与Anthropic仍在争夺市场份额
尽管近期有报道称OpenAI未达营收目标,给本周二的科技股带来压力,但私营人工智能实验室的投资者仍表现坚韧。经验丰富的投资者已确认,尽管媒体报道负面,他们仍不会减少投资。分析师认为当前的人工智能竞赛仍处于早期阶段,因此不会出现“赢家通吃”的局面。尽管高昂的计算成本给营收带来压力,但实验室可通过提高订阅费来提升盈利能力。行业格局正发生微妙变化与OpenAI不同,其竞争对手Anthropic获得了强有
加利福尼亚州自动驾驶合规:罚单、地理围栏和100万英里的新时代
Guident公司在南佛罗里达州运营一辆AuveTech自动驾驶班车,利用其远程监控技术管理西棕榈滩的一条4英里路线和博卡拉顿的一条1英里路线。| 图片来源:Guident加利福尼亚州正在重新定义无人驾驶车辆的监管格局,正逐渐摆脱科技行业“快速行动,打破常规”的思维模式,转向严格的问责制和严苛的行驶里程要求。Guident执行董事长兼首席执行官哈罗德·布劳恩(Harold Braun)在《机器人报
相关专题推荐
评论 (0)
0/500
今日,阿里巴巴同译实验室语音团队发布了两款突破性语音生成模型:Fun-CosyVoice3.5与Fun-AudioGen-VD。其核心亮点在于支持"自由风格"指令——用户无需复杂参数调整,仅通过自然语言描述即可精准操控声线表现风格,或从零构建复杂音频场景。

两款模型各具专长:
Fun-CosyVoice3.5:多语言复现与精细化控制
作为CosyVoice的增强版,该模型在理解语音表达细微差异方面实现核心突破。
指令驱动生成:用户可输入"说话更自信"或"放慢语速并加入情感变化"等指令实现实时语音调整。
语言扩展:新增泰语、印尼语、葡萄牙语及越南语支持,在13种语言中保持行业领先的转写准确率(WER)与语音相似度。
罕见字符优化:专项训练将非常用字符错误率从15.2%降至5.3%。
性能提升:首包延迟降低35%,显著增强实时交互流畅度。
Fun-AudioGen-VD:全面声音设计
该模型作为"音频导演",生成融合"角色+环境"的整合音频。
声音定制:可指定性别、年龄、口音及"沙哑/低沉/低音调"等精细特征。
情感与角色扮演:模拟客服专员、播音员、儿童等角色,甚至能传达"表面平静内心紧张"等复杂状态。
沉浸式环境:添加背景音效(战场喧嚣、咖啡馆低语)与空间特效(教堂混响、水下声学),实现全空间模拟。
同益实验室指出,这些模型将推动高质量语音创作的普及化,为播客制作、游戏开发及影视后期提供强大的AI支持。
DeepMind首席执行官哈西里斯:我每天睡六个小时,通常在凌晨1点左右感到精力充沛。
Fortune 最近刊登了对谷歌 DeepMind 首席执行官 Demis Hassabis 的采访,揭示了他对休息和生产力的非传统方法。Hassabis 透露,他睡眠时间非常少,将清醒时间划分为两个不同的工作阶段。关于他的睡眠习惯,Hassabis 表示:“我目标睡六小时,但我的习惯非同寻常。我可以在白天有效运作。”他强调,睡眠少于六小时会对大脑健康产生负面影响。Hassabis 于 2010 年联合创立了 DeepMind(后被谷歌收购),并因其在蛋白质结构预测方面的开创性工作荣获 20
尽管营收未达预期,OpenAI与Anthropic仍在争夺市场份额
尽管近期有报道称OpenAI未达营收目标,给本周二的科技股带来压力,但私营人工智能实验室的投资者仍表现坚韧。经验丰富的投资者已确认,尽管媒体报道负面,他们仍不会减少投资。分析师认为当前的人工智能竞赛仍处于早期阶段,因此不会出现“赢家通吃”的局面。尽管高昂的计算成本给营收带来压力,但实验室可通过提高订阅费来提升盈利能力。行业格局正发生微妙变化与OpenAI不同,其竞争对手Anthropic获得了强有





首页






