选项
首页
新闻
高中生为AI Minecraft建立挑战创建网站

高中生为AI Minecraft建立挑战创建网站

2025-04-18
288

使用Minecraft进行创意AI基准测试

随着传统AI基准测试方法的不足,开发者们正在探索创新方法来评估生成式AI模型的能力。其中一种创意方法是使用Microsoft旗下的热门沙盒游戏Minecraft。一组开发者推出了Minecraft基准测试,或称MC-Bench,这是一个平台,让AI模型根据给定的提示竞争创建Minecraft建筑。

在MC-Bench上,用户可以投票选择他们喜欢的AI模型创作,并且只有在投票后才会知道每个建筑是由哪个模型创建的。这种互动方式不仅吸引了社区参与,还提供了一种独特的方式来评估AI能力。

图片来源:Minecraft Benchmark

图片来源:Minecraft Benchmark

Adi Singh,一名12年级学生,也是MC-Bench的发起人,认为Minecraft的广泛知名度是关键。作为有史以来最畅销的视频游戏,它为许多人所熟悉,使人们更容易判断AI生成建筑的质量,即使他们自己没有玩过这款游戏。Singh对TechCrunch解释说:“Minecraft让人们更容易看到AI发展的进展。人们已经习惯了Minecraft的画面和氛围。”

MC-Bench由八名志愿者组成的团队支持。Anthropic、Google、OpenAI和Alibaba等公司提供了他们的产品用于运行基准测试提示,尽管他们并未以其他方式参与该项目。

Singh设想将MC-Bench扩展到超越简单建筑的更复杂、目标导向的任务。他表示:“游戏可能只是一个测试代理推理的媒介,相比现实生活更安全,且更可控,适合测试目的,在我看来更理想。”

其他游戏作为AI基准

除了Minecraft,其他游戏如Pokémon Red、Street Fighter和Pictionary也被用作AI的实验性基准测试。AI基准测试的挑战在于其复杂性,因为传统标准化测试通常偏向于AI模型,这些模型因训练方法而在狭窄问题解决领域(如机械记忆或基本推断)表现优异。

例如,OpenAI的GPT-4在LSAT考试中能获得88%的分数,但却难以完成像统计“strawberry”中R字母数量这样的简单任务。同样,Anthropic的Claude 3.7 Sonnet在软件工程基准测试中达到62.3%的准确率,但在玩Pokémon时远不如大多数五岁儿童。

图片来源:Minecraft Benchmark

图片来源:Minecraft Benchmark

MC-Bench:不仅仅是编程基准

从技术角度看,MC-Bench是一个编程基准测试,因为它要求AI模型编写代码来创建像“雪人Frosty”或“原始沙滩上的迷人热带小屋”这样的建筑。然而,该平台的吸引力在于其可访问性。用户更容易评估建筑的视觉质量,而不是分析代码,这拓宽了项目的覆盖范围和模型性能数据收集的潜力。

关于这些分数是否真正反映AI实用性的争论仍在继续。然而,Singh认为它们是一个强有力的指标。他说:“当前的排行榜非常贴近我使用这些模型的体验,这与许多纯文本基准测试不同。也许MC-Bench可以帮助公司了解他们是否朝着正确的方向前进。”

相关文章
前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发 前OpenAI研究员巴雷特·佐夫重返谷歌,助力Gemini的开发 巴雷特·佐夫(Barret Zoph)此前因与Thinking Machines Lab首席执行官米里亚姆·穆拉拉蒂(Miriam Mularati)意见不合而突然离职并加入OpenAI,如今他再次更换了雇主。Alphabet旗下的谷歌宣布,佐夫将回归担任研究副总裁,将其在强化学习和后训练方面的专业知识带入Gemini团队。“旋转门”式研究人员的职业循环佐夫的职业生涯是人工智能人才流动的典型例证。
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元 Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元 初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待 人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待 目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
相关专题推荐
设计与艺术 顶级AI插画工具:更快地创作编辑类场景和封面插图
顶级AI插画工具:更快地创作编辑类场景和封面插图

2026年最新高评分AI插画工具:我们精心挑选的这份清单汇集了功能强大的顶级工具,助您快速创作令人惊艳的编辑场景和引人注目的封面艺术。每款工具都经过了严格的实际测试,并提供了免费版与付费版的对比,帮助您找到最适合您工作流程的工具。 立即尝试这些必试解决方案,释放您的AI优势,提升创作效率。立即访问 XIX.AI 探索更多。

10 个工具
xix.ai
教育与学习 备考首选的顶尖AI辅导老师:练习数学、科学和英语
备考首选的顶尖AI辅导老师:练习数学、科学和英语

2026年最新、评分最高的考试备考AI辅导工具现已登陆XIX.AI!我们精心筛选的这份清单汇集了多款功能强大、颠覆传统的工具,提供免费与付费版本的对比、实际测试以及每周更新的排行榜。它们能帮助你提升写作效率、简化复杂主题的学习,并释放你的学术潜能。 立即探索,发现最适合您的备考工具,今天就开始创作,释放您的AI优势!

10 个工具
xix.ai
金融 用于个人财务管理的 AI 预算规划工具
用于个人财务管理的 AI 预算规划工具

2026 年最新最佳顶级评分 AI 预算规划工具,专为个人财务管理打造,现已登陆 XIX.AI!本精选合集收录了强大且具颠覆性的解决方案,助您开展实际测试、理解消费习惯,并制定个性化计划以提升生产力。享受免费与付费版的对比及详细排名。这些必试工具旨在简化财务管理,助您释放 AI 优势。立即探索!

11 个工具
xix.ai
健康养生 AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复
AI睡眠追踪助手:通过养成更好的睡前习惯来促进身体恢复

2026年最新精选高评分AI睡眠追踪助手,助您实现最佳恢复效果。这份全面更新的每周指南汇集了强大的工具,提供实际测试结果、免费与付费版本对比以及详细排名,助您找到必试的解决方案,从而提升睡眠质量并养成更好的就寝习惯。 立即访问 XIX.AI,解锁您的AI优势。

10 个工具
xix.ai
数据分析 用于产品和收入分析的 AI SQL 辅助工具
用于产品和收入分析的 AI SQL 辅助工具

2026年最新、最受欢迎、评分最高的AI SQL辅助工具,助力产品与营收分析! XIX.AI 精心遴选了一系列功能强大、颠覆性的必试工具,这些工具均经过每周更新的排名体系进行实战测试。它们能通过加速数据分析、简化复杂查询并生成精准洞察,帮助用户显著提升工作效率,从而推动更明智的商业决策。立即探索,发现最适合您的工具,释放您的AI优势!

14 个工具
xix.ai
教育与学习 最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案
最佳的、兼具教学功能的AI作业助手:学习概念,而不仅仅是答案

2026年最新最佳高评分AI作业助手:不仅提供答案,更传授核心概念。专为学生打造的强大工具,精选必试清单,每周更新,免费与付费版本对比,真实使用测试,精准排名,助您充分释放学习潜能。立即探索,发现最适合您的工具,让学习更高效。

10 个工具
xix.ai
评论 (27)
0/500
DouglasMartinez
DouglasMartinez 2026-04-16 22:00:52

Interesting approach! Using Minecraft for AI benchmarking sounds way more engaging than standard tests. Wonder if this could lead to AI that actually helps design game worlds? The student's project is a cool example of how gaming and AI research can mix. Hope they share the results! 🎮

RaymondGreen
RaymondGreen 2026-03-09 12:00:46

高校生がAI建築チャレンジのサイトを作ったのか…!Minecraftの世界でAIの創造性を測るってアイデア、すごく面白いな。でも、これって結局マイクロソフトのプロモーションみたいなものじゃないの?AIがどんどんゲーム内に溶け込んでいくの、ちょっと怖い気もする😅 未来のゲームはすべてAIが作っちゃうのかな?

NicholasYoung
NicholasYoung 2025-10-21 02:30:49

AIが建築対決するなんて面白すぎる!🏗️ Minecraftでベンチマークを取る発想が新鮮だけど、これってゲームバランス崩さないのかな?ちょっと心配…

JamesMiller
JamesMiller 2025-10-16 02:30:35

É sempre incrível ver jovens inovando com IA! Alguém já testou se esses desafios do Minecraft realmente conseguem medir bem a criatividade dos modelos? Ou será que é só mais uma moda passageira? 😅

RalphRoberts
RalphRoberts 2025-09-21 06:30:34

这个高中生用Minecraft来测试AI生成建筑也太有创意了吧!😂 传统AI评测标准太死板了,确实需要这种更直观有趣的方式。不过我很好奇评判标准是什么,是美观度还是还原度?也想试试看用我的世界来测试Stable Diffusion效果

JasonJohnson
JasonJohnson 2025-08-23 09:01:25

This high school kid building an AI Minecraft challenge site is wild! 🧱 Makes me wonder how far AI can push creativity in games. Could it outbuild my epic castle? 😎

OR