Qwen 3.5-Omni 凭借 215 项 SOTA 纪录刷新历史,开启全感官 AI 时代
昨晚,同益实验室正式发布了全新的多模态大模型Qwen3.5-Omni。与前代模型相比,该模型在理解、交互和任务执行方面实现了重大飞跃,将人工智能从“局限于屏幕的助手”转变为“能够理解物理世界的智能代理”。
核心突破:全模态处理与215项SOTA基准
Qwen3.5-Omni采用原生“全模态”架构,能够无缝处理文本、图像、音频和视频。 在涵盖视听分析、推理、对话及翻译的各项评估中,该模型共取得215项最先进(SOTA)成绩。值得注意的是,其通用音频理解与识别能力已超越Gemini-3.1Pro等模型,而视觉与文本处理性能仍保持顶尖水平,与同等规模的Qwen3.5模型表现相当。

技术架构:混合注意力MoE
该模型在经典的“思考者-说话者”(Thinker-Talker)框架基础上进行了基础架构的全面革新:
Thinker(理解中心):升级为混合注意力专家混合(MoE)架构,支持长达256K令牌的超长上下文。这使其能够处理长达10小时的音频或1小时的视频,并借助TMRoPE技术在冗长序列中精准捕捉细微细节。
Talker(表达中心):整合了全新的ARIA技术和RVQ编码,取代了计算成本高昂的DiT处理流程。这不仅解决了词语遗漏和数字发音错误等常见的音频生成问题,还赋予了模型强大的实时语音控制能力。
实际应用:从氛围编码到语音克隆
Qwen3.5-Omni 的能力催生了多种变革性的应用场景:
自然涌现的氛围编码:该模型无需专门训练即可展现出色的代码理解与生成能力,能够直接根据视频逻辑生成 Python 代码或前端原型。
类人实时交互:支持语义中断。它能区分背景噪音(如咳嗽)与有意中断,用户可通过简单指令调整语调(例如“开心”)和音量。
精细化视频分析:可生成结构化、带时间戳的字幕,精准识别视频中的动作、背景音乐变化及镜头切换。
个性化语音克隆:用户只需上传一段简短的音频样本,即可创建高度自然的个性化“数字声音”,支持113种语言。
Qwen3.5-Omni 现已在阿里云白莲平台上线,提供 Plus、Flash 和 Light 三个版本。此外,用户还可通过 ModelScope 社区访问实时对话(Realtime)API 和演示。
相关文章
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元
初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待
目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
“钱文AI免费版”与机构版:揭穿高价写作骗局
6月25日,中央电视台播出了关于混乱的高考志愿填报市场的一则调查报道,引发了广泛的公众讨论。 报道画面显示,许多高中升学中介机构打着“十年教龄教师”和“教授”等头衔的旗号,收取4,980至12,980元不等的天价费用。 实际上,这些所谓的“资深顾问”往往是入职不到两个月的新员工,甚至是兼职的大学生。他们的“专业方案”都是通过免费的Qwen AI生成的,有些机构甚至直接将Qwen生成的内容加价转卖给
相关专题推荐
评论 (1)
0/500
昨晚,同益实验室正式发布了全新的多模态大模型Qwen3.5-Omni。与前代模型相比,该模型在理解、交互和任务执行方面实现了重大飞跃,将人工智能从“局限于屏幕的助手”转变为“能够理解物理世界的智能代理”。
核心突破:全模态处理与215项SOTA基准
Qwen3.5-Omni采用原生“全模态”架构,能够无缝处理文本、图像、音频和视频。 在涵盖视听分析、推理、对话及翻译的各项评估中,该模型共取得215项最先进(SOTA)成绩。值得注意的是,其通用音频理解与识别能力已超越Gemini-3.1Pro等模型,而视觉与文本处理性能仍保持顶尖水平,与同等规模的Qwen3.5模型表现相当。

技术架构:混合注意力MoE
该模型在经典的“思考者-说话者”(Thinker-Talker)框架基础上进行了基础架构的全面革新:
Thinker(理解中心):升级为混合注意力专家混合(MoE)架构,支持长达256K令牌的超长上下文。这使其能够处理长达10小时的音频或1小时的视频,并借助TMRoPE技术在冗长序列中精准捕捉细微细节。
Talker(表达中心):整合了全新的ARIA技术和RVQ编码,取代了计算成本高昂的DiT处理流程。这不仅解决了词语遗漏和数字发音错误等常见的音频生成问题,还赋予了模型强大的实时语音控制能力。
实际应用:从氛围编码到语音克隆
Qwen3.5-Omni 的能力催生了多种变革性的应用场景:
自然涌现的氛围编码:该模型无需专门训练即可展现出色的代码理解与生成能力,能够直接根据视频逻辑生成 Python 代码或前端原型。
类人实时交互:支持语义中断。它能区分背景噪音(如咳嗽)与有意中断,用户可通过简单指令调整语调(例如“开心”)和音量。
精细化视频分析:可生成结构化、带时间戳的字幕,精准识别视频中的动作、背景音乐变化及镜头切换。
个性化语音克隆:用户只需上传一段简短的音频样本,即可创建高度自然的个性化“数字声音”,支持113种语言。
Qwen3.5-Omni 现已在阿里云白莲平台上线,提供 Plus、Flash 和 Light 三个版本。此外,用户还可通过 ModelScope 社区访问实时对话(Realtime)API 和演示。
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元
初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待
目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
“钱文AI免费版”与机构版:揭穿高价写作骗局
6月25日,中央电视台播出了关于混乱的高考志愿填报市场的一则调查报道,引发了广泛的公众讨论。 报道画面显示,许多高中升学中介机构打着“十年教龄教师”和“教授”等头衔的旗号,收取4,980至12,980元不等的天价费用。 实际上,这些所谓的“资深顾问”往往是入职不到两个月的新员工,甚至是兼职的大学生。他们的“专业方案”都是通过免费的Qwen AI生成的,有些机构甚至直接将Qwen生成的内容加价转卖给





首页






