选项
首页
新闻
Qwen 3.5-Omni 凭借 215 项 SOTA 纪录刷新历史,开启全感官 AI 时代

Qwen 3.5-Omni 凭借 215 项 SOTA 纪录刷新历史,开启全感官 AI 时代

2026-04-06
247

昨晚,同益实验室正式发布了全新的多模态大模型Qwen3.5-Omni。与前代模型相比,该模型在理解、交互和任务执行方面实现了重大飞跃,将人工智能从“局限于屏幕的助手”转变为“能够理解物理世界的智能代理”。

核心突破:全模态处理与215项SOTA基准

Qwen3.5-Omni采用原生“全模态”架构,能够无缝处理文本、图像、音频和视频。 在涵盖视听分析、推理、对话及翻译的各项评估中,该模型共取得215项最先进(SOTA)成绩。值得注意的是,其通用音频理解与识别能力已超越Gemini-3.1Pro等模型,而视觉与文本处理性能仍保持顶尖水平,与同等规模的Qwen3.5模型表现相当。

QQ20260331-090527.jpg

技术架构:混合注意力MoE

该模型在经典的“思考者-说话者”(Thinker-Talker)框架基础上进行了基础架构的全面革新:

Thinker(理解中心):升级为混合注意力专家混合(MoE)架构,支持长达256K令牌的超长上下文。这使其能够处理长达10小时的音频或1小时的视频,并借助TMRoPE技术在冗长序列中精准捕捉细微细节。

Talker(表达中心):整合了全新的ARIA技术和RVQ编码,取代了计算成本高昂的DiT处理流程。这不仅解决了词语遗漏和数字发音错误等常见的音频生成问题,还赋予了模型强大的实时语音控制能力。

实际应用:从氛围编码到语音克隆

Qwen3.5-Omni 的能力催生了多种变革性的应用场景:

自然涌现的氛围编码:该模型无需专门训练即可展现出色的代码理解与生成能力,能够直接根据视频逻辑生成 Python 代码或前端原型。

类人实时交互:支持语义中断。它能区分背景噪音(如咳嗽)与有意中断,用户可通过简单指令调整语调(例如“开心”)和音量。

精细化视频分析:可生成结构化、带时间戳的字幕,精准识别视频中的动作、背景音乐变化及镜头切换。

个性化语音克隆:用户只需上传一段简短的音频样本,即可创建高度自然的个性化“数字声音”,支持113种语言。

Qwen3.5-Omni 现已在阿里云白莲平台上线,提供 Plus、Flash 和 Light 三个版本。此外,用户还可通过 ModelScope 社区访问实时对话(Realtime)API 和演示。

相关文章
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元 Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元 初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待 人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待 目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
“钱文AI免费版”与机构版:揭穿高价写作骗局 “钱文AI免费版”与机构版:揭穿高价写作骗局 6月25日,中央电视台播出了关于混乱的高考志愿填报市场的一则调查报道,引发了广泛的公众讨论。 报道画面显示,许多高中升学中介机构打着“十年教龄教师”和“教授”等头衔的旗号,收取4,980至12,980元不等的天价费用。 实际上,这些所谓的“资深顾问”往往是入职不到两个月的新员工,甚至是兼职的大学生。他们的“专业方案”都是通过免费的Qwen AI生成的,有些机构甚至直接将Qwen生成的内容加价转卖给
相关专题推荐
设计与艺术 顶级AI插画工具:更快地创作编辑类场景和封面插图
顶级AI插画工具:更快地创作编辑类场景和封面插图

2026年最新高评分AI插画工具:我们精心挑选的这份清单汇集了功能强大的顶级工具,助您快速创作令人惊艳的编辑场景和引人注目的封面艺术。每款工具都经过了严格的实际测试,并提供了免费版与付费版的对比,帮助您找到最适合您工作流程的工具。 立即尝试这些必试解决方案,释放您的AI优势,提升创作效率。立即访问 XIX.AI 探索更多。

10 个工具
xix.ai
教育与学习 备考首选的顶尖AI辅导老师:练习数学、科学和英语
备考首选的顶尖AI辅导老师:练习数学、科学和英语

2026年最新、评分最高的考试备考AI辅导工具现已登陆XIX.AI!我们精心筛选的这份清单汇集了多款功能强大、颠覆传统的工具,提供免费与付费版本的对比、实际测试以及每周更新的排行榜。它们能帮助你提升写作效率、简化复杂主题的学习,并释放你的学术潜能。 立即探索,发现最适合您的备考工具,今天就开始创作,释放您的AI优势!

10 个工具
xix.ai
金融 用于个人财务管理的 AI 预算规划工具
用于个人财务管理的 AI 预算规划工具

2026 年最新最佳顶级评分 AI 预算规划工具,专为个人财务管理打造,现已登陆 XIX.AI!本精选合集收录了强大且具颠覆性的解决方案,助您开展实际测试、理解消费习惯,并制定个性化计划以提升生产力。享受免费与付费版的对比及详细排名。这些必试工具旨在简化财务管理,助您释放 AI 优势。立即探索!

11 个工具
xix.ai
健康养生 AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复
AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复

2026年最新精选高评分AI睡眠追踪助手,助您实现最佳恢复效果。这份全面更新的每周指南汇集了强大的工具,提供实际测试结果、免费与付费版本对比以及详细排名,助您找到必试的解决方案,从而提升睡眠质量并养成更好的就寝习惯。 立即访问 XIX.AI,解锁您的AI优势。

10 个工具
xix.ai
数据分析 用于产品和收入分析的 AI SQL 辅助工具
用于产品和收入分析的 AI SQL 辅助工具

2026年最新、最受欢迎、评分最高的AI SQL辅助工具,助力产品与营收分析! XIX.AI 精心遴选了一系列功能强大、颠覆性的必试工具,这些工具均经过每周更新的排名体系进行实战测试。它们能通过加速数据分析、简化复杂查询并生成精准洞察,帮助用户显著提升工作效率,从而推动更明智的商业决策。立即探索,发现最适合您的工具,释放您的AI优势!

14 个工具
xix.ai
教育与学习 最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案
最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案

2026年最新最佳高评分AI作业助手:不仅提供答案,更传授核心概念。专为学生打造的强大工具,精选必试清单,每周更新,免费与付费版本对比,真实使用测试,精准排名,助您充分释放学习潜能。立即探索,发现最适合您的工具,让学习更高效。

10 个工具
xix.ai
评论 (1)
0/500
ScottWalker
ScottWalker 2026-06-23 06:00:16

'Screen-bound assistant'? More like screen-bound hype. 😏 215 SOTA benchmarks is impressive, but let's see how it performs in real-world chaos. Still, exciting times for multimodal AI!

OR