同益实验室首发FIPO算法,32B模型推理性能超越o1-mini

同益实验室的智能计算团队今天发布了一种针对大型语言模型的全新训练后优化算法——FIPO(受未来KL影响的策略优化)。 该算法引入了创新的“Future-KL”机制,有效解决了纯强化学习(Pure RL)训练中常见的“推理长度停滞”技术难题。
在长文本推理和复杂逻辑对齐的训练过程中,传统强化学习往往无法在冗长的序列中精确识别关键决策点。由同义团队开发的FIPO算法对关键令牌采用差异化奖励分配,从而引导模型在生成思维链(CoT)时采取更具前瞻性的策略。
实验结果表明,在采用32B规模模型的纯强化学习架构下,应用FIPO算法的模型表现已超越DeepSeek-Zero-MATH和OpenAI的o1-mini等同等规模模型,标志着国内大模型在逻辑推理和数学计算能力方面取得了重大突破。
当前,大模型之间的竞争正从预训练规模转向推理阶段的深度对齐。 FIPO的发布不仅为评估逻辑推理模型中“思维过程”的质量提供了一种新途径,也表明开源社区和国内领先实验室正在逐步开辟一条独立的技术道路,以追求世界级的推理模型。
相关文章
携程商务旅行推出人工智能生态系统,涵盖7家行业服务商和17项核心功能
携程商务旅行正式推出“携程商务旅行AI生态系统”,利用大型语言模型从根本上重构企业差旅管理。 这一综合性生态系统涵盖四大核心场景:差旅安排、差旅管理、采购及能力共享。该生态系统推出了七个专业AI助手,分别负责差旅问答、行程预订、审批、数据洞察、合规风险控制、财务结算及资源采购,标志着行业正从数字化管理向自动化、AI助手驱动的时代转型。从战略层面看,携程商务旅行业务采取开放的“打破壁垒”策略,通过开
随着AI模型路由技术势头渐增,Stripe将收购OpenRouter
Stripe 已同意收购 OpenRouter——这是一家人工智能模型路由平台,可让开发者通过单一接口访问数百种模型。此项收购将模型选择和路由功能融入 Stripe 现有的 AI 应用及基于令牌的计费业务中。据 Stripe 称,OpenRouter 支持来自 80 多家提供商的 400 多个模型。开发者无需与每个模型提供商分别进行集成,只需通过 OpenRouter 借助一个 API 即可发送请
前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发
巴雷特·佐夫(Barret Zoph)此前因与Thinking Machines Lab首席执行官米里亚姆·穆拉拉蒂(Miriam Mularati)意见不合而突然离职并加入OpenAI,如今他再次更换了雇主。Alphabet旗下的谷歌宣布,佐夫将回归担任研究副总裁,将其在强化学习和后训练方面的专业知识带入Gemini团队。“旋转门”式研究人员的职业循环佐夫的职业生涯是人工智能人才流动的典型例证。
相关专题推荐
评论 (0)
0/500

同益实验室的智能计算团队今天发布了一种针对大型语言模型的全新训练后优化算法——FIPO(受未来KL影响的策略优化)。 该算法引入了创新的“Future-KL”机制,有效解决了纯强化学习(Pure RL)训练中常见的“推理长度停滞”技术难题。
在长文本推理和复杂逻辑对齐的训练过程中,传统强化学习往往无法在冗长的序列中精确识别关键决策点。由同义团队开发的FIPO算法对关键令牌采用差异化奖励分配,从而引导模型在生成思维链(CoT)时采取更具前瞻性的策略。
实验结果表明,在采用32B规模模型的纯强化学习架构下,应用FIPO算法的模型表现已超越DeepSeek-Zero-MATH和OpenAI的o1-mini等同等规模模型,标志着国内大模型在逻辑推理和数学计算能力方面取得了重大突破。
当前,大模型之间的竞争正从预训练规模转向推理阶段的深度对齐。 FIPO的发布不仅为评估逻辑推理模型中“思维过程”的质量提供了一种新途径,也表明开源社区和国内领先实验室正在逐步开辟一条独立的技术道路,以追求世界级的推理模型。
携程商务旅行推出人工智能生态系统,涵盖7家行业服务商和17项核心功能
携程商务旅行正式推出“携程商务旅行AI生态系统”,利用大型语言模型从根本上重构企业差旅管理。 这一综合性生态系统涵盖四大核心场景:差旅安排、差旅管理、采购及能力共享。该生态系统推出了七个专业AI助手,分别负责差旅问答、行程预订、审批、数据洞察、合规风险控制、财务结算及资源采购,标志着行业正从数字化管理向自动化、AI助手驱动的时代转型。从战略层面看,携程商务旅行业务采取开放的“打破壁垒”策略,通过开
随着AI模型路由技术势头渐增,Stripe将收购OpenRouter
Stripe 已同意收购 OpenRouter——这是一家人工智能模型路由平台,可让开发者通过单一接口访问数百种模型。此项收购将模型选择和路由功能融入 Stripe 现有的 AI 应用及基于令牌的计费业务中。据 Stripe 称,OpenRouter 支持来自 80 多家提供商的 400 多个模型。开发者无需与每个模型提供商分别进行集成,只需通过 OpenRouter 借助一个 API 即可发送请
前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发
巴雷特·佐夫(Barret Zoph)此前因与Thinking Machines Lab首席执行官米里亚姆·穆拉拉蒂(Miriam Mularati)意见不合而突然离职并加入OpenAI,如今他再次更换了雇主。Alphabet旗下的谷歌宣布,佐夫将回归担任研究副总裁,将其在强化学习和后训练方面的专业知识带入Gemini团队。“旋转门”式研究人员的职业循环佐夫的职业生涯是人工智能人才流动的典型例证。





首页






