OpenAI 发布 GeneBench-Pro 基准测试,以推动人工智能在生物分析领域的应用
随着生物技术日新月异,高效、准确地分析复杂的生物数据已成为研究人员面临的一大挑战。 为了使人工智能模型在该领域具备更强的分析能力,OpenAI 最近推出了一项名为 GeneBench-Pro 的新基准测试。该基准测试旨在评估人工智能在基因组学和蛋白质组学等领域的实际研究能力,特别是其在面对杂乱且不完整的数据时进行判断和决策的能力。
GeneBench-Pro 与传统基准测试截然不同。传统测试往往侧重于模型的记忆容量以及执行固定任务序列的能力,而 GeneBench-Pro 则强调其在现实世界中的研究实用性。 其任务围绕“模糊、不完整且存在噪声”的数据环境构建,使模型能够在此类条件下进行探索和分析,从而更准确地反映其判断能力。

该基准测试涵盖了广泛的生物学领域,包括基因组学、定量生物学和转化医学,包含 129 个问题,涉及统计遗传学、群体遗传学、功能基因组学和蛋白质组学等子领域。 每道题目都提供了一个接近真实研究环境的数据集,要求模型独立选择分析方法,根据简要的实验背景调整策略,并最终得出结论。
为避免传统长过程测试中常见的评分偏差,OpenAI在设计GeneBench-Pro时采用了合成数据。这种方法使OpenAI能够更严格地控制数据生成过程,确保模型表现反映的是真正的理解,而非通过猜测或捷径获得的正确答案。
OpenAI 已在 Hugging Face 平台上开源了 GeneBench-Pro 的 10 道代表性样题,使外部研究人员能够通过交互式界面进行探索。未来,OpenAI 计划将其中 50 道题目交由 Artificial Analysis 进行独立评估,以验证不同模型在此基准测试中的实际表现。
相关文章
MiniMax 2.5 登顶全球使用量榜首,月营收超 1.5 亿美元;旗舰版 M3 预计上半年发布
中国大语言模型正以其在成本效益和工程卓越方面的声誉,在全球开发者生态系统中产生强劲势头。截至 2026 年 3 月 3 日,全球领先的 API 聚合平台 OpenRouter 的数据显示,国产模型呈现出前所未有的主导地位:MiniMax M2.5 位居全球调用量榜首,紧随其后的是 Kimi K2.5 和 GLM-5。这一“前三甲”阵容表明,中国提供商已通过更优的 AI 部署效率和强劲的开发者采用率,超越了国际竞争对手。七天内处理 3.07 万亿 Token:MiniMax 的快速扩张Min
Meta 的 Muse 在早期移动发布中超越 ChatGPT
新数据显示,Meta 最新的 AI 应用 Muse 可能成为这家社交巨头的下一个重大成功。根据 Appfigures 最近的估算,Muse 在前 12 天内的移动设备下载次数超过了 ChatGPT 在发布后 12 天内的下载量。(该数据仅涵盖美国和加拿大市场。)该公司还发现,Muse 的日活跃用户数超过了 ChatGPT 在同一阶段的用户数。在此之前,由于两款应用的发布策略不同,直接比较这两款应用一直具有挑战性。ChatGPT 在全球范围内发布,但仅在 iOS 平台上提供;而 Muse 在苹果
TechCrunch Disrupt 2026:Clay公司的卡里姆·阿明谈GTM工程师的崛起
两年前,在大多数企业中几乎找不到GTM工程师的身影。如今,这一职位正在整个科技行业崭露头角,相关专业人士正利用人工智能和自动化技术构建营收引擎——而此前,这些工作需要招聘多名员工、使用各种分散的工具,并依赖劳动密集型的手动工作流程。是什么引发了这一转变?这对企业获取客户和业务扩展将产生怎样的影响?在2026年TechCrunch Disrupt大会上,Clay联合创始人兼首席执行官卡里姆·阿明(K
相关专题推荐
评论 (0)
0/500
随着生物技术日新月异,高效、准确地分析复杂的生物数据已成为研究人员面临的一大挑战。 为了使人工智能模型在该领域具备更强的分析能力,OpenAI 最近推出了一项名为 GeneBench-Pro 的新基准测试。该基准测试旨在评估人工智能在基因组学和蛋白质组学等领域的实际研究能力,特别是其在面对杂乱且不完整的数据时进行判断和决策的能力。
GeneBench-Pro 与传统基准测试截然不同。传统测试往往侧重于模型的记忆容量以及执行固定任务序列的能力,而 GeneBench-Pro 则强调其在现实世界中的研究实用性。 其任务围绕“模糊、不完整且存在噪声”的数据环境构建,使模型能够在此类条件下进行探索和分析,从而更准确地反映其判断能力。

该基准测试涵盖了广泛的生物学领域,包括基因组学、定量生物学和转化医学,包含 129 个问题,涉及统计遗传学、群体遗传学、功能基因组学和蛋白质组学等子领域。 每道题目都提供了一个接近真实研究环境的数据集,要求模型独立选择分析方法,根据简要的实验背景调整策略,并最终得出结论。
为避免传统长过程测试中常见的评分偏差,OpenAI在设计GeneBench-Pro时采用了合成数据。这种方法使OpenAI能够更严格地控制数据生成过程,确保模型表现反映的是真正的理解,而非通过猜测或捷径获得的正确答案。
OpenAI 已在 Hugging Face 平台上开源了 GeneBench-Pro 的 10 道代表性样题,使外部研究人员能够通过交互式界面进行探索。未来,OpenAI 计划将其中 50 道题目交由 Artificial Analysis 进行独立评估,以验证不同模型在此基准测试中的实际表现。
MiniMax 2.5 登顶全球使用量榜首,月营收超 1.5 亿美元;旗舰版 M3 预计上半年发布
中国大语言模型正以其在成本效益和工程卓越方面的声誉,在全球开发者生态系统中产生强劲势头。截至 2026 年 3 月 3 日,全球领先的 API 聚合平台 OpenRouter 的数据显示,国产模型呈现出前所未有的主导地位:MiniMax M2.5 位居全球调用量榜首,紧随其后的是 Kimi K2.5 和 GLM-5。这一“前三甲”阵容表明,中国提供商已通过更优的 AI 部署效率和强劲的开发者采用率,超越了国际竞争对手。七天内处理 3.07 万亿 Token:MiniMax 的快速扩张Min
Meta 的 Muse 在早期移动发布中超越 ChatGPT
新数据显示,Meta 最新的 AI 应用 Muse 可能成为这家社交巨头的下一个重大成功。根据 Appfigures 最近的估算,Muse 在前 12 天内的移动设备下载次数超过了 ChatGPT 在发布后 12 天内的下载量。(该数据仅涵盖美国和加拿大市场。)该公司还发现,Muse 的日活跃用户数超过了 ChatGPT 在同一阶段的用户数。在此之前,由于两款应用的发布策略不同,直接比较这两款应用一直具有挑战性。ChatGPT 在全球范围内发布,但仅在 iOS 平台上提供;而 Muse 在苹果
TechCrunch Disrupt 2026:Clay公司的卡里姆·阿明谈GTM工程师的崛起
两年前,在大多数企业中几乎找不到GTM工程师的身影。如今,这一职位正在整个科技行业崭露头角,相关专业人士正利用人工智能和自动化技术构建营收引擎——而此前,这些工作需要招聘多名员工、使用各种分散的工具,并依赖劳动密集型的手动工作流程。是什么引发了这一转变?这对企业获取客户和业务扩展将产生怎样的影响?在2026年TechCrunch Disrupt大会上,Clay联合创始人兼首席执行官卡里姆·阿明(K





首页






