谷歌和英伟达将DiffusionGemma开源,单显卡推理速度提升4倍
2026年6月10日,谷歌推出了DiffusionGemma——一款实验性的开源语言模型,它打破了传统自回归范式中“逐词生成文本”的模式。 该模型率先将图像AI中的扩散机制应用于文本生成,从随机噪声开始,通过迭代精炼,每步可并行输出256个令牌的文本块。

在硬件性能方面,得益于英伟达的深度优化,该模型在单GPU单用户模式下的运行速度比同类传统模型快近四倍。 在 H100 GPU 上,单次请求的输出速度可达每秒 1,000 个令牌;即使在 RTX 5090 等高端消费级 GPU 上,其输出速度也能超过每秒 700 个令牌。
DiffusionGemma 拥有 260 亿个参数,采用专家混合(MoE)架构,每步仅激活 38 亿个参数。 虽然在标准基准测试中,其文本生成质量和准确度略逊于传统的 Gemma4 系列模型,但其独特的“全块感知”能力克服了自回归模型仅能向前推导的局限性。 由于在生成过程中所有令牌均可相互引用,该模型在涉及非线性及结构化数据的任务中表现尤为出色,例如文本补全、代码填充、数独求解和氨基酸序列处理。

该模型的权重现已根据 Apache 2.0 许可证在 Hugging Face 上开源,并可与 vLLM 和 MLX 等主流推理框架无缝兼容。这一探索不仅消除了 GPU 计算能力在内存带宽方面的限制,还为未来人工智能在复杂逻辑和非线性文本生成领域的应用开辟了一条新的技术路径。
相关文章
DeepMind首席执行官哈西里斯:我每天睡六个小时,通常在凌晨1点左右感到精力充沛。
Fortune 最近刊登了对谷歌 DeepMind 首席执行官 Demis Hassabis 的采访,揭示了他对休息和生产力的非传统方法。Hassabis 透露,他睡眠时间非常少,将清醒时间划分为两个不同的工作阶段。关于他的睡眠习惯,Hassabis 表示:“我目标睡六小时,但我的习惯非同寻常。我可以在白天有效运作。”他强调,睡眠少于六小时会对大脑健康产生负面影响。Hassabis 于 2010 年联合创立了 DeepMind(后被谷歌收购),并因其在蛋白质结构预测方面的开创性工作荣获 20
尽管营收未达预期,OpenAI与Anthropic仍在争夺市场份额
尽管近期有报道称OpenAI未达营收目标,给本周二的科技股带来压力,但私营人工智能实验室的投资者仍表现坚韧。经验丰富的投资者已确认,尽管媒体报道负面,他们仍不会减少投资。分析师认为当前的人工智能竞赛仍处于早期阶段,因此不会出现“赢家通吃”的局面。尽管高昂的计算成本给营收带来压力,但实验室可通过提高订阅费来提升盈利能力。行业格局正发生微妙变化与OpenAI不同,其竞争对手Anthropic获得了强有
加利福尼亚州自动驾驶合规:罚单、地理围栏和100万英里的新时代
Guident公司在南佛罗里达州运营一辆AuveTech自动驾驶班车,利用其远程监控技术管理西棕榈滩的一条4英里路线和博卡拉顿的一条1英里路线。| 图片来源:Guident加利福尼亚州正在重新定义无人驾驶车辆的监管格局,正逐渐摆脱科技行业“快速行动,打破常规”的思维模式,转向严格的问责制和严苛的行驶里程要求。Guident执行董事长兼首席执行官哈罗德·布劳恩(Harold Braun)在《机器人报
相关专题推荐
评论 (0)
0/500
2026年6月10日,谷歌推出了DiffusionGemma——一款实验性的开源语言模型,它打破了传统自回归范式中“逐词生成文本”的模式。 该模型率先将图像AI中的扩散机制应用于文本生成,从随机噪声开始,通过迭代精炼,每步可并行输出256个令牌的文本块。

在硬件性能方面,得益于英伟达的深度优化,该模型在单GPU单用户模式下的运行速度比同类传统模型快近四倍。 在 H100 GPU 上,单次请求的输出速度可达每秒 1,000 个令牌;即使在 RTX 5090 等高端消费级 GPU 上,其输出速度也能超过每秒 700 个令牌。
DiffusionGemma 拥有 260 亿个参数,采用专家混合(MoE)架构,每步仅激活 38 亿个参数。 虽然在标准基准测试中,其文本生成质量和准确度略逊于传统的 Gemma4 系列模型,但其独特的“全块感知”能力克服了自回归模型仅能向前推导的局限性。 由于在生成过程中所有令牌均可相互引用,该模型在涉及非线性及结构化数据的任务中表现尤为出色,例如文本补全、代码填充、数独求解和氨基酸序列处理。

该模型的权重现已根据 Apache 2.0 许可证在 Hugging Face 上开源,并可与 vLLM 和 MLX 等主流推理框架无缝兼容。这一探索不仅消除了 GPU 计算能力在内存带宽方面的限制,还为未来人工智能在复杂逻辑和非线性文本生成领域的应用开辟了一条新的技术路径。
DeepMind首席执行官哈西里斯:我每天睡六个小时,通常在凌晨1点左右感到精力充沛。
Fortune 最近刊登了对谷歌 DeepMind 首席执行官 Demis Hassabis 的采访,揭示了他对休息和生产力的非传统方法。Hassabis 透露,他睡眠时间非常少,将清醒时间划分为两个不同的工作阶段。关于他的睡眠习惯,Hassabis 表示:“我目标睡六小时,但我的习惯非同寻常。我可以在白天有效运作。”他强调,睡眠少于六小时会对大脑健康产生负面影响。Hassabis 于 2010 年联合创立了 DeepMind(后被谷歌收购),并因其在蛋白质结构预测方面的开创性工作荣获 20
尽管营收未达预期,OpenAI与Anthropic仍在争夺市场份额
尽管近期有报道称OpenAI未达营收目标,给本周二的科技股带来压力,但私营人工智能实验室的投资者仍表现坚韧。经验丰富的投资者已确认,尽管媒体报道负面,他们仍不会减少投资。分析师认为当前的人工智能竞赛仍处于早期阶段,因此不会出现“赢家通吃”的局面。尽管高昂的计算成本给营收带来压力,但实验室可通过提高订阅费来提升盈利能力。行业格局正发生微妙变化与OpenAI不同,其竞争对手Anthropic获得了强有





首页






