字节跳动Seed发布EdgeBench基准测试,旨在重新定义智能体进化指标
随着人工智能的飞速发展,衡量智能体在真实世界场景中持续学习的成效已成为研究人员和业界共同关注的重点。字节跳动Seed团队近期推出了“EdgeBench”——一项长期基准测试,为该研究领域提供了新的量化标准。
EdgeBench的核心优势在于其强调在真实世界环境中的学习。该基准包含横跨六个领域的134项任务,每项任务都要求智能体持续运行至少12小时。这种设计通过更真实地模拟智能体在复杂、动态环境中长时间的表现,克服了短期评估的局限性。 该团队收集了约38,000小时的交互数据,以此构建了这一严谨的测试框架。

研究结果揭示了一个显著规律:智能体的环境学习表现紧密遵循对数-S型曲线,R²值高达0.998。这表明学习过程具有高度规律性。 此外,2025年9月至2026年5月的数据表明,最先进模型的学习速度显著提升,每三个月翻一番。
EdgeBench 已向开发者开源了 51 项任务及其完整的评估框架。尽管仍处于学术探索阶段,但它是首个能够定量描述长期环境学习模式的基准测试。 对于人工智能研究人员而言,这些模式不仅提供了评估模型性能的具体指标,也为未来提升智能体的环境适应能力和学习效率提供了指导。
相关文章
携程商务旅行推出人工智能生态系统,涵盖7家行业服务商和17项核心功能
携程商务旅行正式推出“携程商务旅行AI生态系统”,利用大型语言模型从根本上重构企业差旅管理。 这一综合性生态系统涵盖四大核心场景:差旅安排、差旅管理、采购及能力共享。该生态系统推出了七个专业AI助手,分别负责差旅问答、行程预订、审批、数据洞察、合规风险控制、财务结算及资源采购,标志着行业正从数字化管理向自动化、AI助手驱动的时代转型。从战略层面看,携程商务旅行业务采取开放的“打破壁垒”策略,通过开
随着AI模型路由技术势头渐增,Stripe将收购OpenRouter
Stripe 已同意收购 OpenRouter——这是一家人工智能模型路由平台,可让开发者通过单一接口访问数百种模型。此项收购将模型选择和路由功能融入 Stripe 现有的 AI 应用及基于令牌的计费业务中。据 Stripe 称,OpenRouter 支持来自 80 多家提供商的 400 多个模型。开发者无需与每个模型提供商分别进行集成,只需通过 OpenRouter 借助一个 API 即可发送请
前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发
巴雷特·佐夫(Barret Zoph)此前因与Thinking Machines Lab首席执行官米里亚姆·穆拉拉蒂(Miriam Mularati)意见不合而突然离职并加入OpenAI,如今他再次更换了雇主。Alphabet旗下的谷歌宣布,佐夫将回归担任研究副总裁,将其在强化学习和后训练方面的专业知识带入Gemini团队。“旋转门”式研究人员的职业循环佐夫的职业生涯是人工智能人才流动的典型例证。
相关专题推荐
评论 (1)
0/500
随着人工智能的飞速发展,衡量智能体在真实世界场景中持续学习的成效已成为研究人员和业界共同关注的重点。字节跳动Seed团队近期推出了“EdgeBench”——一项长期基准测试,为该研究领域提供了新的量化标准。
EdgeBench的核心优势在于其强调在真实世界环境中的学习。该基准包含横跨六个领域的134项任务,每项任务都要求智能体持续运行至少12小时。这种设计通过更真实地模拟智能体在复杂、动态环境中长时间的表现,克服了短期评估的局限性。 该团队收集了约38,000小时的交互数据,以此构建了这一严谨的测试框架。

研究结果揭示了一个显著规律:智能体的环境学习表现紧密遵循对数-S型曲线,R²值高达0.998。这表明学习过程具有高度规律性。 此外,2025年9月至2026年5月的数据表明,最先进模型的学习速度显著提升,每三个月翻一番。
EdgeBench 已向开发者开源了 51 项任务及其完整的评估框架。尽管仍处于学术探索阶段,但它是首个能够定量描述长期环境学习模式的基准测试。 对于人工智能研究人员而言,这些模式不仅提供了评估模型性能的具体指标,也为未来提升智能体的环境适应能力和学习效率提供了指导。
携程商务旅行推出人工智能生态系统,涵盖7家行业服务商和17项核心功能
携程商务旅行正式推出“携程商务旅行AI生态系统”,利用大型语言模型从根本上重构企业差旅管理。 这一综合性生态系统涵盖四大核心场景:差旅安排、差旅管理、采购及能力共享。该生态系统推出了七个专业AI助手,分别负责差旅问答、行程预订、审批、数据洞察、合规风险控制、财务结算及资源采购,标志着行业正从数字化管理向自动化、AI助手驱动的时代转型。从战略层面看,携程商务旅行业务采取开放的“打破壁垒”策略,通过开
随着AI模型路由技术势头渐增,Stripe将收购OpenRouter
Stripe 已同意收购 OpenRouter——这是一家人工智能模型路由平台,可让开发者通过单一接口访问数百种模型。此项收购将模型选择和路由功能融入 Stripe 现有的 AI 应用及基于令牌的计费业务中。据 Stripe 称,OpenRouter 支持来自 80 多家提供商的 400 多个模型。开发者无需与每个模型提供商分别进行集成,只需通过 OpenRouter 借助一个 API 即可发送请
前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发
巴雷特·佐夫(Barret Zoph)此前因与Thinking Machines Lab首席执行官米里亚姆·穆拉拉蒂(Miriam Mularati)意见不合而突然离职并加入OpenAI,如今他再次更换了雇主。Alphabet旗下的谷歌宣布,佐夫将回归担任研究副总裁,将其在强化学习和后训练方面的专业知识带入Gemini团队。“旋转门”式研究人员的职业循环佐夫的职业生涯是人工智能人才流动的典型例证。





首页






