创始人说
英伟达及其合作伙伴在全球扩展人工智能数据中心
英伟达与其合作伙伴和客户一直在积极扩大全球计算机设施的规模,以满足训练大型人工智能(AI)模型(如GPT-4)的高计算需求。据光学计算初创公司Lightmatter的联合创始人托马斯·格雷厄姆(Thomas Graham)表示,随着更多人工智能模型投入生产,这种扩展将变得更加关键。在最近于纽约接受彭博智能(Bloomberg Intelligence)高级技术分析师曼迪普·辛格(Mandeep Singh)采访时,格雷厄姆强调了对计算资源日益增长的需求。
“对更多计算能力的需求不仅仅关乎规模法则,还关乎现在部署这些人工智能模型,”格雷厄姆解释说。辛格询问了像GPT-4这样的大型语言模型(LLMs)的未来,以及它们是否会继续扩大规模。对此,格雷厄姆将重点转向人工智能的实际应用,强调推理(inferencing)或部署阶段的重要性,这需要大量的计算能力。
“如果你将训练视为研发,推理实际上就是部署。当你进行部署时,你需要大规模计算机来运行你的模型,”格雷厄姆在彭博智能主办的“生成式人工智能:能兑现生产力承诺吗?”会议上表示。
格雷厄姆的观点与英伟达首席执行官黄仁勋(Jensen Huang)的看法一致,黄仁勋向华尔街强调,推进“代理型”人工智能形式不仅需要更复杂的训练,还需要显著增强的推理能力,这将导致计算需求呈指数级增长。

“如果你将训练视为研发,推理实际上就是部署,当你进行部署时,你需要大型计算机来运行你的模型,”格雷厄姆说。照片:彭博社,克雷格·瓦尔加(Craig Warga)提供 Lightmatter在人工智能基础设施中的角色
成立于2018年的Lightmatter处于开发芯片技术的前沿,该技术使用光学连接在一个半导体芯片上连接多个处理器。这些光学互连可以比传统铜线更高效地传输数据,使用的能源更少。据格雷厄姆介绍,这项技术可以简化数据中心机架内和机架之间的连接,提高数据中心的整体效率和经济性。
“通过用光纤替换数据中心中的铜线——包括服务器印刷电路板上的铜线和机架之间的电缆——我们可以显著提高带宽,”格雷厄姆对辛格说。Lightmatter目前正与多家科技公司合作设计新的数据中心,格雷厄姆指出,这些设施正在从零开始建设。该公司已与全球代工厂(Global Foundries)建立合作伙伴关系,这家位于纽约州北部的合同半导体制造商为先进微器件(Advanced Micro Devices)等客户提供服务。
虽然格雷厄姆没有透露除此之外的具体合作伙伴和客户,但他暗示Lightmatter与博通(Broadcom)或马威尔(Marvell)等硅供应商合作,为谷歌(Google)、亚马逊(Amazon)和微软(Microsoft)等设计自己数据中心处理器的科技巨头创建定制组件。
人工智能数据中心的规模与未来
为了说明人工智能部署的规模,格雷厄姆指出,至少有十二个新的人工智能数据中心正在计划或建设中,每个都需要一吉瓦的电力。“为了便于理解,纽约市平均每天使用大约五吉瓦的电力。所以,我们讨论的是多个纽约市的电力消耗,”他说。他预测,到2026年,全球人工智能处理将需要40吉瓦的电力,相当于八个纽约市,专门用于人工智能数据中心。
Lightmatter最近获得了4亿美元的风险投资,估值达到44亿美元。格雷厄姆提到,公司计划在“未来几年”开始生产。
当被问及可能对Lightmatter计划造成干扰的因素时,格雷厄姆对持续扩展人工智能计算基础设施的需求表示了信心。然而,他承认,如果人工智能算法取得突破,需要的计算量显著减少,或更快实现通用人工智能(AGI),可能会挑战当前对计算需求指数增长的假设。
相关文章
人工智能旅游行程生成器助您规划完美旅行
利用尖端的人工智能技术,规划难忘的旅程变得更加简单。旅行日程生成器通过制作包含景点、餐饮建议和每日日程的定制旅行指南,彻底改变了假期规划,所有内容都可以导出为方便的 PDF 文件。有了这款智能助手,旅行中的焦虑将变成兴奋。关键点由人工智能驱动的智能行程创建,实现真正的个性化旅行。完整的每日行程表,包括必游地标和当地美食热点。即时下载 PDF 文件,以便离线访问,并方便与旅伴分享。直观的数字平台,让
苹果 Vision Pro 首次亮相,改变了增强现实技术的游戏规则
Apple 凭借其开创性的 Vision Pro 头戴式耳机,在空间计算领域实现了一次大胆的飞跃,通过尖端的工程技术和周到的设计,重新定义了增强现实和虚拟现实体验的可能性。Vision Pro 简介重新定义空间计算Vision Pro 是苹果公司多年来最具雄心的硬件项目,它是一款独立的空间计算机,能将数字内容与物理空间无缝融合。与早期的 AR/VR 产品不同,Vision Pro 引入了一种全新的
Perplexity 人工智能购物助手改变网上购物体验
Perplexity AI 凭借其革命性的人工智能购物助手在电子商务领域掀起波澜,有望改变消费者在线发现和购买产品的方式。这一创新平台将对话式人工智能与电子商务功能相结合,以其无广告、意图驱动的购物体验向谷歌和亚马逊等行业巨头发起挑战。主要亮点人工智能驱动的产品研究和直接购买与谷歌、亚马逊和沃尔玛正面竞争集成 Shopify 提供的实时产品数据直观的一键结账和可视化搜索功能个性化、无广告购物推荐先
评论 (31)
0/200
ScottMitchell
2025-08-18 09:01:03
Mind-blowing how AI's eating up power like a sci-fi monster! 😱 By 2026, it'll need multiple NYCs' worth of electricity? Hope they figure out sustainable energy fast, or we’re all in for a wild ride.
0
BillyEvans
2025-04-20 17:23:59
¡Para 2026, la IA consumirá energía como varias ciudades de Nueva York! ¡Es una locura! 😱 Me encanta el progreso tecnológico, pero también tenemos que pensar en el medio ambiente. ¡Ojalá encuentren una forma más ecológica! 🌿
0
PeterRodriguez
2025-04-20 14:07:12
Wow, AI data centers eating up that much power by 2026? 😲 That’s wild! Makes me wonder if we’re ready for the energy bill or if renewables can keep up.
0
GeorgeJones
2025-04-20 12:57:20
AI가 여러 뉴욕 시의 전력을 소비한다는 생각은 좀 무섭네요! 하지만 진보를 위한 대가라고 생각해요. Nvidia의 확장은 인상적이지만, 에너지 수요에 따라갈 수 있을까요? 🤔 더 많은 태양광 패널이 필요할지도 모르겠어요!
0
TerryYoung
2025-04-20 08:05:08
This AI expansion sounds insane! By 2026, the power consumption could match multiple New York Cities? That's wild! I'm excited to see what kind of AI models they'll be training, but also kinda worried about the environmental impact. Can't wait to see how this pans out! 🤯
0
英伟达及其合作伙伴在全球扩展人工智能数据中心
英伟达与其合作伙伴和客户一直在积极扩大全球计算机设施的规模,以满足训练大型人工智能(AI)模型(如GPT-4)的高计算需求。据光学计算初创公司Lightmatter的联合创始人托马斯·格雷厄姆(Thomas Graham)表示,随着更多人工智能模型投入生产,这种扩展将变得更加关键。在最近于纽约接受彭博智能(Bloomberg Intelligence)高级技术分析师曼迪普·辛格(Mandeep Singh)采访时,格雷厄姆强调了对计算资源日益增长的需求。
“对更多计算能力的需求不仅仅关乎规模法则,还关乎现在部署这些人工智能模型,”格雷厄姆解释说。辛格询问了像GPT-4这样的大型语言模型(LLMs)的未来,以及它们是否会继续扩大规模。对此,格雷厄姆将重点转向人工智能的实际应用,强调推理(inferencing)或部署阶段的重要性,这需要大量的计算能力。
“如果你将训练视为研发,推理实际上就是部署。当你进行部署时,你需要大规模计算机来运行你的模型,”格雷厄姆在彭博智能主办的“生成式人工智能:能兑现生产力承诺吗?”会议上表示。
格雷厄姆的观点与英伟达首席执行官黄仁勋(Jensen Huang)的看法一致,黄仁勋向华尔街强调,推进“代理型”人工智能形式不仅需要更复杂的训练,还需要显著增强的推理能力,这将导致计算需求呈指数级增长。
Lightmatter在人工智能基础设施中的角色
成立于2018年的Lightmatter处于开发芯片技术的前沿,该技术使用光学连接在一个半导体芯片上连接多个处理器。这些光学互连可以比传统铜线更高效地传输数据,使用的能源更少。据格雷厄姆介绍,这项技术可以简化数据中心机架内和机架之间的连接,提高数据中心的整体效率和经济性。
“通过用光纤替换数据中心中的铜线——包括服务器印刷电路板上的铜线和机架之间的电缆——我们可以显著提高带宽,”格雷厄姆对辛格说。Lightmatter目前正与多家科技公司合作设计新的数据中心,格雷厄姆指出,这些设施正在从零开始建设。该公司已与全球代工厂(Global Foundries)建立合作伙伴关系,这家位于纽约州北部的合同半导体制造商为先进微器件(Advanced Micro Devices)等客户提供服务。
虽然格雷厄姆没有透露除此之外的具体合作伙伴和客户,但他暗示Lightmatter与博通(Broadcom)或马威尔(Marvell)等硅供应商合作,为谷歌(Google)、亚马逊(Amazon)和微软(Microsoft)等设计自己数据中心处理器的科技巨头创建定制组件。
人工智能数据中心的规模与未来
为了说明人工智能部署的规模,格雷厄姆指出,至少有十二个新的人工智能数据中心正在计划或建设中,每个都需要一吉瓦的电力。“为了便于理解,纽约市平均每天使用大约五吉瓦的电力。所以,我们讨论的是多个纽约市的电力消耗,”他说。他预测,到2026年,全球人工智能处理将需要40吉瓦的电力,相当于八个纽约市,专门用于人工智能数据中心。
Lightmatter最近获得了4亿美元的风险投资,估值达到44亿美元。格雷厄姆提到,公司计划在“未来几年”开始生产。
当被问及可能对Lightmatter计划造成干扰的因素时,格雷厄姆对持续扩展人工智能计算基础设施的需求表示了信心。然而,他承认,如果人工智能算法取得突破,需要的计算量显著减少,或更快实现通用人工智能(AGI),可能会挑战当前对计算需求指数增长的假设。




Mind-blowing how AI's eating up power like a sci-fi monster! 😱 By 2026, it'll need multiple NYCs' worth of electricity? Hope they figure out sustainable energy fast, or we’re all in for a wild ride.




¡Para 2026, la IA consumirá energía como varias ciudades de Nueva York! ¡Es una locura! 😱 Me encanta el progreso tecnológico, pero también tenemos que pensar en el medio ambiente. ¡Ojalá encuentren una forma más ecológica! 🌿




Wow, AI data centers eating up that much power by 2026? 😲 That’s wild! Makes me wonder if we’re ready for the energy bill or if renewables can keep up.




AI가 여러 뉴욕 시의 전력을 소비한다는 생각은 좀 무섭네요! 하지만 진보를 위한 대가라고 생각해요. Nvidia의 확장은 인상적이지만, 에너지 수요에 따라갈 수 있을까요? 🤔 더 많은 태양광 패널이 필요할지도 모르겠어요!




This AI expansion sounds insane! By 2026, the power consumption could match multiple New York Cities? That's wild! I'm excited to see what kind of AI models they'll be training, but also kinda worried about the environmental impact. Can't wait to see how this pans out! 🤯












