创始人说
英伟达及其合作伙伴在全球扩展人工智能数据中心
英伟达与其合作伙伴和客户一直在积极扩大全球计算机设施的规模,以满足训练大型人工智能(AI)模型(如GPT-4)的高计算需求。据光学计算初创公司Lightmatter的联合创始人托马斯·格雷厄姆(Thomas Graham)表示,随着更多人工智能模型投入生产,这种扩展将变得更加关键。在最近于纽约接受彭博智能(Bloomberg Intelligence)高级技术分析师曼迪普·辛格(Mandeep Singh)采访时,格雷厄姆强调了对计算资源日益增长的需求。
“对更多计算能力的需求不仅仅关乎规模法则,还关乎现在部署这些人工智能模型,”格雷厄姆解释说。辛格询问了像GPT-4这样的大型语言模型(LLMs)的未来,以及它们是否会继续扩大规模。对此,格雷厄姆将重点转向人工智能的实际应用,强调推理(inferencing)或部署阶段的重要性,这需要大量的计算能力。
“如果你将训练视为研发,推理实际上就是部署。当你进行部署时,你需要大规模计算机来运行你的模型,”格雷厄姆在彭博智能主办的“生成式人工智能:能兑现生产力承诺吗?”会议上表示。
格雷厄姆的观点与英伟达首席执行官黄仁勋(Jensen Huang)的看法一致,黄仁勋向华尔街强调,推进“代理型”人工智能形式不仅需要更复杂的训练,还需要显著增强的推理能力,这将导致计算需求呈指数级增长。

“如果你将训练视为研发,推理实际上就是部署,当你进行部署时,你需要大型计算机来运行你的模型,”格雷厄姆说。照片:彭博社,克雷格·瓦尔加(Craig Warga)提供 Lightmatter在人工智能基础设施中的角色
成立于2018年的Lightmatter处于开发芯片技术的前沿,该技术使用光学连接在一个半导体芯片上连接多个处理器。这些光学互连可以比传统铜线更高效地传输数据,使用的能源更少。据格雷厄姆介绍,这项技术可以简化数据中心机架内和机架之间的连接,提高数据中心的整体效率和经济性。
“通过用光纤替换数据中心中的铜线——包括服务器印刷电路板上的铜线和机架之间的电缆——我们可以显著提高带宽,”格雷厄姆对辛格说。Lightmatter目前正与多家科技公司合作设计新的数据中心,格雷厄姆指出,这些设施正在从零开始建设。该公司已与全球代工厂(Global Foundries)建立合作伙伴关系,这家位于纽约州北部的合同半导体制造商为先进微器件(Advanced Micro Devices)等客户提供服务。
虽然格雷厄姆没有透露除此之外的具体合作伙伴和客户,但他暗示Lightmatter与博通(Broadcom)或马威尔(Marvell)等硅供应商合作,为谷歌(Google)、亚马逊(Amazon)和微软(Microsoft)等设计自己数据中心处理器的科技巨头创建定制组件。
人工智能数据中心的规模与未来
为了说明人工智能部署的规模,格雷厄姆指出,至少有十二个新的人工智能数据中心正在计划或建设中,每个都需要一吉瓦的电力。“为了便于理解,纽约市平均每天使用大约五吉瓦的电力。所以,我们讨论的是多个纽约市的电力消耗,”他说。他预测,到2026年,全球人工智能处理将需要40吉瓦的电力,相当于八个纽约市,专门用于人工智能数据中心。
Lightmatter最近获得了4亿美元的风险投资,估值达到44亿美元。格雷厄姆提到,公司计划在“未来几年”开始生产。
当被问及可能对Lightmatter计划造成干扰的因素时,格雷厄姆对持续扩展人工智能计算基础设施的需求表示了信心。然而,他承认,如果人工智能算法取得突破,需要的计算量显著减少,或更快实现通用人工智能(AGI),可能会挑战当前对计算需求指数增长的假设。
相关文章
Cognichip 发布AI驱动的芯片开发以加速半导体创新
芯片对AI行业至关重要,但其开发速度落后于新型AI模型和产品的快速发展步伐。Cognichip 旨在通过基础AI模型革新芯片设计,以加快市场交付速度。Cognichip 总部位于旧金山,正在开发一种物理信息驱动的AI模型,以优化半导体公司的芯片开发流程。这种被称为“人工智能芯片”的方法旨在将生产时间缩短50%,并显著降低成本。这一愿景源于半导体行业资深人士Faraj Aalaei,他在富士通网络通
音乐中永恒的爱:《Unchained Melody》的持久情感影响
音乐是一种传递人类情感的深刻媒介,爱作为一个普遍且永恒的主题尤为突出。从新恋情的激动到分离的深切痛苦,情歌跨越世代和文化与听众产生共鸣。《Unchained Melody》这一经典杰作,完美展现了音乐如何 encapsulating 爱的深度与普遍性。让我们深入探讨其永恒的主题。关键要点爱作为全球连接器:音乐如何跨越文化差异表达爱。渴望的本质:探讨渴望如何塑造我们对爱的理解。希望与团结:情歌如何激
AI驱动的视觉创作与Bing图像生成器
在当今的数字世界中,引人入胜的视觉效果至关重要。无论你是营销人员、设计师还是创意爱好者,生成独特的图像都非常重要。AI驱动的图像生成已经改变了这一过程,使用户能够从文本提示生成令人惊叹的视觉效果。本文深入探讨了Bing图像生成器,这是一款直观的工具,民主化了AI图像生成,轻松提供令人印象深刻的结果。主要亮点Bing图像生成器将文本提示转化为AI生成的图像。与Bing搜索和Microsoft Edg
评论 (30)
0/200
BillyEvans
2025-04-20 17:23:59
¡Para 2026, la IA consumirá energía como varias ciudades de Nueva York! ¡Es una locura! 😱 Me encanta el progreso tecnológico, pero también tenemos que pensar en el medio ambiente. ¡Ojalá encuentren una forma más ecológica! 🌿
0
PeterRodriguez
2025-04-20 14:07:12
Wow, AI data centers eating up that much power by 2026? 😲 That’s wild! Makes me wonder if we’re ready for the energy bill or if renewables can keep up.
0
GeorgeJones
2025-04-20 12:57:20
AI가 여러 뉴욕 시의 전력을 소비한다는 생각은 좀 무섭네요! 하지만 진보를 위한 대가라고 생각해요. Nvidia의 확장은 인상적이지만, 에너지 수요에 따라갈 수 있을까요? 🤔 더 많은 태양광 패널이 필요할지도 모르겠어요!
0
TerryYoung
2025-04-20 08:05:08
This AI expansion sounds insane! By 2026, the power consumption could match multiple New York Cities? That's wild! I'm excited to see what kind of AI models they'll be training, but also kinda worried about the environmental impact. Can't wait to see how this pans out! 🤯
0
JohnWilson
2025-04-20 05:53:25
The idea of AI consuming power like multiple NYCs is kinda scary! But I guess it's the price we pay for progress. Nvidia's expansion is impressive, but can we keep up with the energy demands? 🤔 Maybe we need more solar panels or something!
0
英伟达及其合作伙伴在全球扩展人工智能数据中心
英伟达与其合作伙伴和客户一直在积极扩大全球计算机设施的规模,以满足训练大型人工智能(AI)模型(如GPT-4)的高计算需求。据光学计算初创公司Lightmatter的联合创始人托马斯·格雷厄姆(Thomas Graham)表示,随着更多人工智能模型投入生产,这种扩展将变得更加关键。在最近于纽约接受彭博智能(Bloomberg Intelligence)高级技术分析师曼迪普·辛格(Mandeep Singh)采访时,格雷厄姆强调了对计算资源日益增长的需求。
“对更多计算能力的需求不仅仅关乎规模法则,还关乎现在部署这些人工智能模型,”格雷厄姆解释说。辛格询问了像GPT-4这样的大型语言模型(LLMs)的未来,以及它们是否会继续扩大规模。对此,格雷厄姆将重点转向人工智能的实际应用,强调推理(inferencing)或部署阶段的重要性,这需要大量的计算能力。
“如果你将训练视为研发,推理实际上就是部署。当你进行部署时,你需要大规模计算机来运行你的模型,”格雷厄姆在彭博智能主办的“生成式人工智能:能兑现生产力承诺吗?”会议上表示。
格雷厄姆的观点与英伟达首席执行官黄仁勋(Jensen Huang)的看法一致,黄仁勋向华尔街强调,推进“代理型”人工智能形式不仅需要更复杂的训练,还需要显著增强的推理能力,这将导致计算需求呈指数级增长。
Lightmatter在人工智能基础设施中的角色
成立于2018年的Lightmatter处于开发芯片技术的前沿,该技术使用光学连接在一个半导体芯片上连接多个处理器。这些光学互连可以比传统铜线更高效地传输数据,使用的能源更少。据格雷厄姆介绍,这项技术可以简化数据中心机架内和机架之间的连接,提高数据中心的整体效率和经济性。
“通过用光纤替换数据中心中的铜线——包括服务器印刷电路板上的铜线和机架之间的电缆——我们可以显著提高带宽,”格雷厄姆对辛格说。Lightmatter目前正与多家科技公司合作设计新的数据中心,格雷厄姆指出,这些设施正在从零开始建设。该公司已与全球代工厂(Global Foundries)建立合作伙伴关系,这家位于纽约州北部的合同半导体制造商为先进微器件(Advanced Micro Devices)等客户提供服务。
虽然格雷厄姆没有透露除此之外的具体合作伙伴和客户,但他暗示Lightmatter与博通(Broadcom)或马威尔(Marvell)等硅供应商合作,为谷歌(Google)、亚马逊(Amazon)和微软(Microsoft)等设计自己数据中心处理器的科技巨头创建定制组件。
人工智能数据中心的规模与未来
为了说明人工智能部署的规模,格雷厄姆指出,至少有十二个新的人工智能数据中心正在计划或建设中,每个都需要一吉瓦的电力。“为了便于理解,纽约市平均每天使用大约五吉瓦的电力。所以,我们讨论的是多个纽约市的电力消耗,”他说。他预测,到2026年,全球人工智能处理将需要40吉瓦的电力,相当于八个纽约市,专门用于人工智能数据中心。
Lightmatter最近获得了4亿美元的风险投资,估值达到44亿美元。格雷厄姆提到,公司计划在“未来几年”开始生产。
当被问及可能对Lightmatter计划造成干扰的因素时,格雷厄姆对持续扩展人工智能计算基础设施的需求表示了信心。然而,他承认,如果人工智能算法取得突破,需要的计算量显著减少,或更快实现通用人工智能(AGI),可能会挑战当前对计算需求指数增长的假设。




¡Para 2026, la IA consumirá energía como varias ciudades de Nueva York! ¡Es una locura! 😱 Me encanta el progreso tecnológico, pero también tenemos que pensar en el medio ambiente. ¡Ojalá encuentren una forma más ecológica! 🌿




Wow, AI data centers eating up that much power by 2026? 😲 That’s wild! Makes me wonder if we’re ready for the energy bill or if renewables can keep up.




AI가 여러 뉴욕 시의 전력을 소비한다는 생각은 좀 무섭네요! 하지만 진보를 위한 대가라고 생각해요. Nvidia의 확장은 인상적이지만, 에너지 수요에 따라갈 수 있을까요? 🤔 더 많은 태양광 패널이 필요할지도 모르겠어요!




This AI expansion sounds insane! By 2026, the power consumption could match multiple New York Cities? That's wild! I'm excited to see what kind of AI models they'll be training, but also kinda worried about the environmental impact. Can't wait to see how this pans out! 🤯




The idea of AI consuming power like multiple NYCs is kinda scary! But I guess it's the price we pay for progress. Nvidia's expansion is impressive, but can we keep up with the energy demands? 🤔 Maybe we need more solar panels or something!












