选项
首页
新闻
OpenClaw 的 AReaL v1.0 框架支持并行 AI 代理训练

OpenClaw 的 AReaL v1.0 框架支持并行 AI 代理训练

2026-04-18
155

3月4日,蚂蚁集团与清华大学联合发布了开源强化学习训练框架AReaL v1.0的稳定版。此次发布的核心在于实现“智能体一键式强化学习训练”。该框架无需修改代码,兼容多种智能体框架,使智能体能够立即开始强化学习训练。

自2026年初以来,智能代理(Agents)一直保持着强劲的增长势头。LangChain、Claude Code和OpenClaw等框架虽发展迅速,但仍暴露出两大显著瓶颈。首先,训练门槛较高:现有智能代理框架采用各异的接口,集成时往往需要大量适配代码。 其次,智能体缺乏持续进化能力:大多数依赖初始训练阶段生成的固定模型权重。一旦部署,便无法针对特定场景进一步优化,其能力在发布时即已达到上限。

AReaL 是首个完全异步、训练与推理解耦的大规模强化学习系统。它使智能体能够通过与现实世界任务的交互接收反馈,并持续优化决策。v1.0 版本允许任何智能体无需修改即可连接到强化学习训练。通过在智能体与训练系统之间插入一个代理工作层,开发者只需重定向一个请求地址即可启用训练。

1d5592bf-2f9b-4aa3-b99b-3839c6f7384e.png

(图:无缝集成至代理的 AReaL 异步训练架构)

以广受欢迎的 OpenClaw 框架为例。开发者只需将 OpenClaw 配置中的 `base_url` 和 `api_key` 指向 AReaL 网关,其 OpenClaw 智能体便会连接到强化学习训练环境。智能体在继续正常执行任务的同时,用户会定期对其表现进行评分。AReaL 会自动收集这些训练数据并在后台更新模型,从而使智能体能够通过持续使用实现自主进化。

AReaL v1.0 版本还推出了原生训练引擎 Archon。该引擎基于 PyTorch 的原生能力构建,实现了数据、管道、张量、上下文和专家并行这五大维度的全并行处理,从而降低了安装和调试门槛。此外,它还提供了多种训练和推理后端选项,便于在不同环境中灵活部署。 令人惊叹的是,这一复杂的分布式系统仅用一个月的人力就从零开始开发并验证完成。在 32 天内,近百万行代码经过修改,全面实现了 Archon 引擎,使其能够训练数十亿参数的专家混合(MoE)模型。

这一效率突破背后的秘诀在于 AReaL 集成的 AI 辅助开发系统,该系统能够自动化处理高度复杂的工程任务。

b278c32ad83a3898e05ced31b6ceef17.png

AReaL v1.0 具备 AI 辅助开发工作流,提供从规划、编码到验证及 PR 创建的全流程支持。在处理 MoE 并行化、内存优化和算法实现等核心模块时,专用的 AI 编程助手将扮演资深专家的角色。它在代码修改过程中提供及时、精准的指导,确保每次修改的正确性。 AReaL的AI辅助编程不仅仅是一个生产力工具;它能够承担复杂基础设施项目中的“可交付成果”研发工作,开创了AI基础设施工程的下一个范式。

AReaL团队表示,他们将持续迭代训练引擎、用户体验以及多模态代理的训练。AReaL v1.0的代码和文档现已开源,发布于inclusionAI社区。

· GitHub 仓库:https://github.com/inclusionAI/AReaL

· 相关论文:https://arxiv.org/abs/2505.24298

相关文章
阿里巴巴超级杯:Qwen3.8-Max 重磅登场,代码与办公工具能力全面升级 阿里巴巴超级杯:Qwen3.8-Max 重磅登场,代码与办公工具能力全面升级 阿里巴巴正式发布了Qwen3.8-Max,这是一款拥有2.4万亿参数的下一代基础大模型。这一重大AI进展在编码和专业办公任务等核心领域带来了显著的性能提升,展现了强大的技术能力。在权威的Arena大模型排名中,Qwen3.8-Max取得了令人瞩目的成绩,仅次于Anthropic的Claude系列,位居行业前列。这一里程碑标志着国内大模型在处理复杂任务方面取得了快速进展,为开发者和企业用户提供了先进的智能工具。该模型的API现已在Qwen AI平台上上线,并集成到新推出的“Qwen Offic
印度科技巨头投资3000万美元,打造微软Office的AI竞争对手 印度科技巨头投资3000万美元,打造微软Office的AI竞争对手 连续创业者 Bhavin Turakhia 正投入 3000 万美元自有资金,押注企业 AI 领域仍有新玩家的空间。他最新的创业项目 Neo 基于一个核心信念:传统的职场软件不能仅靠聊天机器人进行修补,而需要进行彻底的架构重构。46 岁的 Turakhia 有着支持雄心勃勃的企业科技项目的历史。在过去二十年中,他联合创立了 Directi、Radix、Titan 和 Zeta,在寻求外部投资之前,主要使用个人资本为这些项目提供资金。他正将同样的自力更生策略应用于 Neo。Turakhia 向
前OpenAI首席科学家Ilya的SSI首次发布模型 前OpenAI首席科学家Ilya的SSI首次发布模型 AI 取得了另一项重大里程碑。在从 OpenAI 离职后,前首席科学家伊利亚·苏茨克弗(Ilya Sutskever)创立了 Safe Superintelligence Inc.(SSI),该公司最近公布了其首个模型的详细信息。海外社交媒体上的报道指出,该团队正在利用 TTT(测试时训练)开发一个紧凑的推理引擎,这是他们在追求安全超级智能过程中的关键进展。这种新颖的架构专注于使模型能够“学习如何学习”。与在推理过程中保持参数静态的传统大型语言模型不同,该引擎在处理现实世界任务时会动态更新特定
相关专题推荐
聊天机器人 最佳AI对话训练工具,助你备战面试
最佳AI对话训练工具,助你备战面试

2026年最新、最受好评的AI面试模拟训练工具现已登陆XIX.AI!这份精心精选的合集收录了功能强大、具有革命性意义的工具,它们均经过严格的实际测试,能够提供精准的反馈。 您将看到免费版与付费版的对比分析以及详细排名,助您挑选出必试之选,从而提升自信并精进技能。立即探索,发现助您面试成功的完美工具!

12 个工具
xix.ai
设计与艺术 最适合创意实验的AI风格转换工具
最适合创意实验的AI风格转换工具

2026年最新最佳、评价最高的AI风格转换工具,助您开展创意实验!XIX.AI精心甄选了一系列功能强大、颠覆性的必试工具,这些工具经过实际测试和严格排名,可带来卓越的效果。这些顶级解决方案通过加速内容创作并释放无限创意潜能,帮助创作者显著提升工作效率。 立即探索,找到最适合您的工具,今天就开始创作吧!

9 个工具
xix.ai
漫画创作 最适合视觉叙事的AI对话气泡工具
最适合视觉叙事的AI对话气泡工具

2026年最新、最受欢迎的视觉叙事AI对话气泡工具现已登陆XIX.AI!这份精心精选的合集汇集了功能强大、具有颠覆性的工具,可帮助创作者提升工作效率并突破创作瓶颈。 获取免费版与付费版的对比分析,查看实际测试结果,并查阅最新排行榜,找到最适合打造引人入胜的视觉叙事的必试解决方案。立即探索,发现您的理想工具!

10 个工具
xix.ai
会议助理 顶级AI会议摘要工具:清晰追踪决策与后续跟进
顶级AI会议摘要工具:清晰追踪决策与后续跟进

2026年最新高评分最佳AI会议摘要工具,助您清晰追踪决策并轻松跟进。这份精心筛选的清单展示了功能强大、具有颠覆性的解决方案,它们通过自动化会议记录、识别关键行动项以及简化所有项目中的团队协调,显著提升工作效率。 获取免费版与付费版的对比分析,以及实际测试报告和每周更新的排行榜,助您找到最适合的工具。立即探索,释放您的AI优势!

9 个工具
xix.ai
数据分析 最佳人工智能数据清洗工具:快速处理缺失值与重复数据
最佳人工智能数据清洗工具:快速处理缺失值与重复数据

2026年最新、最优秀且评分最高的AI数据清洗工具,可快速处理缺失值与重复数据问题。这份精心挑选的清单展示了那些功能强大、能带来颠覆性变革的解决方案,可显著提升工作效率。所有候选工具都经过了严格的实际应用测试,以确保其稳定性。您可以获取免费版与付费版的对比信息,找出最符合您需求的必备工具。即刻访问XIX.AI,开启您的AI优势之旅。

11 个工具
xix.ai
设计与艺术 最佳AI创意构思工具,助力艺术家突破视觉瓶颈
最佳AI创意构思工具,助力艺术家突破视觉瓶颈

2026 年最新最佳顶级评分 AI 创意构思工具由 XIX.AI 精心策划,旨在帮助创作者突破视觉瓶颈并即时提升创造力。这些强大的变革性工具提供真实世界测试、详细的免费与付费对比以及每周更新的排名。发现您的完美工具,加速内容创作,并立即释放您的 AI 优势。立即探索!

14 个工具
xix.ai
评论 (1)
0/500
NicholasDavis
NicholasDavis 2026-05-18 18:00:11

這個框架讓AI訓練變得好簡單!不過,如果人人都能輕鬆訓練AI,未來市場上的AI產品會不會變得太相似,反而缺乏創新呢?🤔 有點期待又怕受傷害。

OR