选项
首页
新闻
苹果与LM Studio宣布达成突破性合作,四家基于Mac的工作室部署了拥有万亿参数的大型模型

苹果与LM Studio宣布达成突破性合作,四家基于Mac的工作室部署了拥有万亿参数的大型模型

2026-08-26
102

苹果与LM Studio宣布达成突破性合作,四家基于Mac的工作室部署了拥有万亿参数的大型模型

WWDC上的突破性演示:在苹果硬件上运行万亿参数的人工智能模型

在最近举行的 WWDC 上,AI 软件平台 LM Studio 与苹果合作,展示了一项人工智能技术的突破性成果。 该团队成功利用由四台 Mac Studio 组成的集群,运行了 Moonshot AI 的旗舰模型 Kimi K2.6。此次演示清晰地展示了 Apple Silicon 架构在处理超大规模 AI 模型方面的强大能力。

Kimi K2.6模型基于先进的MoE架构构建,总参数数量高达一万亿。尽管该模型的动态专家调度系统通过每次仅激活约320亿个参数来降低推理过程中的计算负载,但加载整个模型仍面临巨大的内存挑战。 若采用FP16精度进行处理,则需要约2TB的内存。在传统数据中心环境中,要满足这一需求通常需要使用配备8至16块高端GPU的服务器集群,其成本可能高达数百万美元。

然而,此次演示通过一项创新的技术方案突破了这一限制。四台搭载 M3 Ultra 芯片的 Mac Studio 通过 Thunderbolt 5 接口相互连接,利用了最新 macOS 版本中支持的“Thunderbolt 上的 RDMA”(RDMA-over-Thunderbolt)技术。 这种方法实现了设备之间的直接内存共享,将总计 2TB 的统一内存有效整合为一个逻辑内存池。因此,该万亿参数模型得以顺利加载。在现场演示中,该集群表现出色,每秒生成约 28 个令牌,同时功耗远低于传统的基于 GPU 的计算中心。

除此次演示外,LM Studio 还作为合作项目的一部分推出了 LM Link。该工具基于 Tailscale Mesh VPN 架构构建,允许用户通过端到端加密连接,从任何地点安全地访问本地 Mac Studio 集群。 用户可通过 MacBook 或 iPhone 调用该集群的计算能力进行推理,无需亲临主机设备所在位置。所有敏感数据均在安全的闭环内本地处理,避免通过第三方云服务器进行传输。

此次演示不仅是一场技术展示,更向业界传递了一个明确信号。 Apple Silicon 凭借其统一内存设计和高效的多设备连接功能,正逐渐成为部署大型 AI 模型的可行选择。对于需要频繁且长期运行大型模型推理任务的组织而言,该解决方案通过硬件投资取代云服务,从而消除了与云服务相关的高昂成本,并随着时间的推移实现显著的成本节约。

随着消费级硬件集群性能的持续提升,采用人工智能技术的门槛正在进一步降低。这一成就表明,尖端人工智能创新的源泉将不再局限于拥有大型超级计算设施的少数科技巨头。在去中心化的计算格局下,近未来很可能涌现出新的发展机遇。

相关文章
“登月计划”:中国这款拥有2.8万亿参数的人工智能能否与美国科技公司抗衡? “登月计划”:中国这款拥有2.8万亿参数的人工智能能否与美国科技公司抗衡? 2026年2月,Anthropic指控中国人工智能实验室DeepSeek、Moonshot和MiniMax开展“工业规模的行动”,以“非法提取Claude的能力来改进其自身模型”。图片来源:Alvan Nee/Unsplash中国人工智能公司Moonshot发布了Kimi K3,称其可与美国前沿模型媲美,与此同时,中国国家主席习近平呼吁建立全球人工智能治理机制中国人工智能初创公司Moonshot发
Cozy 3.0 正式发布,支持多人及多智能体协作 Cozy 3.0 正式发布,支持多人及多智能体协作 字节跳动已正式发布 Coze 3.0,在 Agent 创建方面引入了全新方法,同时在团队协作和生态系统集成方面带来了重大进展。此次更新优先考虑协作效率,全面支持“一个用户 + 多个 Agent”和“多个用户 + 多个 Agent”等灵活配置。为了简化团队合作,系统现在具备多项目管理机制,可自动整理和归档资产。深度集成本地生态系统,实现无缝跨平台工作流在技术生态开放性方面,新平台实现了主流环境之间的无缝过渡。用户现在可以自由访问各种本地 Agent,包括 Claude Code、Codex CLI
微软升级 Copilot 笔记本,新增任务委派、Office 编辑和交互式报告功能 微软升级 Copilot 笔记本,新增任务委派、Office 编辑和交互式报告功能 微软正在向 Copilot Notebooks 推出关键更新,包括任务委派、Office 文档就地编辑以及交互式报告。这一转变将该工具从简单的 AI 组织者转变为执行任务的综合智能工作空间。根据微软 2026 年 10 月的更新,这些功能正通过 Frontier Preview Program 逐步发布。Copilot Notebooks 已整合文档、电子邮件和会议记录,以回答问题、生成学习指南并创建音频摘要。通过此次更新,用户可以将任务委派给 Copilot 并安排定期自动化操作,例如每日简报
相关专题推荐
设计与艺术 顶级AI插画工具:更快地创作编辑类场景和封面插图
顶级AI插画工具:更快地创作编辑类场景和封面插图

2026年最新高评分AI插画工具:我们精心挑选的这份清单汇集了功能强大的顶级工具,助您快速创作令人惊艳的编辑场景和引人注目的封面艺术。每款工具都经过了严格的实际测试,并提供了免费版与付费版的对比,帮助您找到最适合您工作流程的工具。 立即尝试这些必试解决方案,释放您的AI优势,提升创作效率。立即访问 XIX.AI 探索更多。

10 个工具
xix.ai
教育与学习 备考首选的顶尖AI辅导老师:练习数学、科学和英语
备考首选的顶尖AI辅导老师:练习数学、科学和英语

2026年最新、评分最高的考试备考AI辅导工具现已登陆XIX.AI!我们精心筛选的这份清单汇集了多款功能强大、颠覆传统的工具,提供免费与付费版本的对比、实际测试以及每周更新的排行榜。它们能帮助你提升写作效率、简化复杂主题的学习,并释放你的学术潜能。 立即探索,发现最适合您的备考工具,今天就开始创作,释放您的AI优势!

10 个工具
xix.ai
金融 用于个人财务管理的 AI 预算规划工具
用于个人财务管理的 AI 预算规划工具

2026 年最新最佳顶级评分 AI 预算规划工具,专为个人财务管理打造,现已登陆 XIX.AI!本精选合集收录了强大且具颠覆性的解决方案,助您开展实际测试、理解消费习惯,并制定个性化计划以提升生产力。享受免费与付费版的对比及详细排名。这些必试工具旨在简化财务管理,助您释放 AI 优势。立即探索!

11 个工具
xix.ai
健康养生 AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复
AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复

2026年最新精选高评分AI睡眠追踪助手,助您实现最佳恢复效果。这份全面更新的每周指南汇集了强大的工具,提供实际测试结果、免费与付费版本对比以及详细排名,助您找到必试的解决方案,从而提升睡眠质量并养成更好的就寝习惯。 立即访问 XIX.AI,解锁您的AI优势。

10 个工具
xix.ai
数据分析 用于产品和收入分析的 AI SQL 辅助工具
用于产品和收入分析的 AI SQL 辅助工具

2026年最新、最受欢迎、评分最高的AI SQL辅助工具,助力产品与营收分析! XIX.AI 精心遴选了一系列功能强大、颠覆性的必试工具,这些工具均经过每周更新的排名体系进行实战测试。它们能通过加速数据分析、简化复杂查询并生成精准洞察,帮助用户显著提升工作效率,从而推动更明智的商业决策。立即探索,发现最适合您的工具,释放您的AI优势!

14 个工具
xix.ai
教育与学习 最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案
最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案

2026年最新最佳高评分AI作业助手:不仅提供答案,更传授核心概念。专为学生打造的强大工具,精选必试清单,每周更新,免费与付费版本对比,真实使用测试,精准排名,助您充分释放学习潜能。立即探索,发现最适合您的工具,让学习更高效。

10 个工具
xix.ai
评论 (0)
0/500
OR