opção
Lar
Notícias
O aluno do ensino médio cria um site para os desafios de construção da AI Minecraft

O aluno do ensino médio cria um site para os desafios de construção da AI Minecraft

18 de Abril de 2025
246

Benchmarking de IA Criativa com Minecraft

À medida que os métodos tradicionais de benchmarking de IA ficam aquém, os desenvolvedores estão explorando abordagens inovadoras para avaliar a capacidade dos modelos de IA generativa. Um desses métodos criativos envolve o uso do Minecraft, o popular jogo sandbox pertencente à Microsoft. Um grupo de desenvolvedores lançou o Minecraft Benchmark, ou MC-Bench, uma plataforma onde modelos de IA competem na criação de construções no Minecraft com base em prompts fornecidos.

No MC-Bench, os usuários podem votar em qual criação de modelo de IA preferem, e somente após votar descobrem qual modelo fez cada construção. Essa abordagem interativa não apenas envolve a comunidade, mas também oferece uma maneira única de avaliar as capacidades da IA.

Créditos da Imagem: Minecraft Benchmark

Créditos da Imagem: Minecraft Benchmark

Adi Singh, um estudante do 12º ano e o iniciador do MC-Bench, acredita que o amplo reconhecimento do Minecraft é fundamental. Como o videogame mais vendido de todos os tempos, ele é familiar para muitos, facilitando a avaliação da qualidade das construções geradas por IA, mesmo para aqueles que não jogaram o jogo. "O Minecraft permite que as pessoas vejam o progresso [do desenvolvimento da IA] muito mais facilmente," explicou Singh à TechCrunch. "As pessoas estão acostumadas com o Minecraft, com a aparência e a vibe."

O MC-Bench é apoiado por uma equipe de oito colaboradores voluntários. Empresas como Anthropic, Google, OpenAI e Alibaba forneceram seus produtos para executar prompts de benchmark, embora não estejam diretamente envolvidas com o projeto.

Singh planeja expandir o MC-Bench além de construções simples para tarefas mais complexas e orientadas a objetivos. "Os jogos podem ser apenas um meio para testar o raciocínio agentivo que é mais seguro do que na vida real e mais controlável para fins de teste, tornando-o mais ideal aos meus olhos," disse ele.

Outros Jogos como Benchmarks de IA

Além do Minecraft, outros jogos como Pokémon Red, Street Fighter e Pictionary têm sido usados como benchmarks experimentais para IA. O desafio de benchmarking de IA reside em sua complexidade, pois os testes padronizados tradicionais frequentemente favorecem modelos de IA devido aos seus métodos de treinamento, que se destacam em áreas específicas de resolução de problemas, como memorização mecânica ou extrapolação básica.

Por exemplo, enquanto o GPT-4 da OpenAI pode alcançar o 88º percentil no LSAT, ele enfrenta dificuldades em tarefas mais simples, como contar o número de Rs em "strawberry". Da mesma forma, o Claude 3.7 Sonnet da Anthropic alcançou 62,3% de precisão em um benchmark de engenharia de software, mas fica aquém ao jogar Pokémon em comparação com a maioria das crianças de cinco anos.

Créditos da Imagem: Minecraft Benchmark

Créditos da Imagem: Minecraft Benchmark

MC-Bench: Mais do que Apenas um Benchmark de Programação

Tecnicamente, o MC-Bench é um benchmark de programação porque exige que os modelos de IA escrevam código para criar construções como "Frosty, o Boneco de Neve" ou "uma charmosa cabana tropical em uma praia de areia intocada". No entanto, o apelo da plataforma está em sua acessibilidade. É mais fácil para os usuários avaliarem a qualidade visual de uma construção do que analisar o código, o que amplia o alcance do projeto e o potencial para coleta de dados sobre o desempenho do modelo.

O debate continua sobre se essas pontuações refletem verdadeiramente a utilidade da IA. Singh, no entanto, acredita que elas são um forte indicador. "A tabela de classificação atual reflete de forma bastante próxima minha própria experiência ao usar esses modelos, o que é diferente de muitos benchmarks puramente textuais," disse ele. "Talvez [o MC-Bench] possa ser útil para as empresas saberem se estão indo na direção certa."

Artigo relacionado
Dentro dos Detalhes Revelados Sobre o Gemini de Próxima Geração: Poder de Cálculo Sobrecarregado, Equipes Internas Discordaram Sobre Prioridades de Desenvolvimento e Alocação de Recursos Dentro dos Detalhes Revelados Sobre o Gemini de Próxima Geração: Poder de Cálculo Sobrecarregado, Equipes Internas Discordaram Sobre Prioridades de Desenvolvimento e Alocação de Recursos Os relatórios indicam que o lançamento do tão aguardado modelo Gemini de próxima geração do Google foi adiado. Desentendimentos internos sobre prioridades de desenvolvimento e alocação de recursos, combinados com capacidade computacional limitada e p
A OpenAI descarta preocupações com a desaceleração do crescimento e afirma que múltiplas unidades de negócio estão acelerando. A OpenAI descarta preocupações com a desaceleração do crescimento e afirma que múltiplas unidades de negócio estão acelerando. Em resposta à escrutínio externo sobre o desaceleramento do crescimento das vendas e o não cumprimento de metas internas, o líder em inteligência artificial, OpenAI, emitiu uma declaração confiante na terça-feira, 28 de abril. A empresa esclareceu qu
Alibaba Super Cup: Qwen3.8-Max estreia com aprimoramento nas ferramentas de programação e escritório Alibaba Super Cup: Qwen3.8-Max estreia com aprimoramento nas ferramentas de programação e escritório A Alibaba revelou oficialmente o Qwen3.8-Max, um modelo de base de próxima geração com 2,4 trilhão de parâmetros. Este avanço significativo em IA oferece ganhos substanciais de desempenho em áreas principais, como programação e tarefas profissionais
Recomendações de tópicos especiais relacionados
Composição musical Melhores Ferramentas de IA para Criação de Melodias para Rascunhos de Músicas
Melhores Ferramentas de IA para Criação de Melodias para Rascunhos de Músicas

2026 Últimas Melhores Ferramentas de Escrita de Melodias por IA Mais Bem Avaliadas para Rascunhos de Músicas! A XIX.AI reuniu uma coleção altamente poderosa e transformadora, que passou por rigorosos testes no mundo real para oferecer a melhor experiência de escrita. Você pode encontrar comparações detalhadas entre as versões gratuita e paga, classificações precisas e opções imperdíveis projetadas para ajudá-lo a criar rascunhos de músicas impressionantes sem esforço e aumentar significativamente sua produtividade criativa. Explore agora para descobrir a ferramenta perfeita para você!

8 ferramentas
xix.ai
chatbot Melhores ferramentas de treinamento de conversação com IA para prática de entrevistas
Melhores ferramentas de treinamento de conversação com IA para prática de entrevistas

As melhores ferramentas de treinamento de conversação com IA mais recentes e altamente avaliadas para 2026, ideais para prática de entrevistas, estão disponíveis no XIX.AI! Esta coleção selecionada apresenta ferramentas poderosas e transformadoras, submetidas a rigorosos testes do mundo real para fornecer feedback preciso. Você encontrará uma comparação entre opções gratuitas e pagas, além de classificações detalhadas, para ajudá-lo a escolher a opção imperdível que aumenta sua confiança e habilidades. Explore agora para descobrir a ferramenta perfeita para o sucesso nas entrevistas!

12 ferramentas
xix.ai
Design e Arte As melhores ferramentas de transferência de estilo com IA para experimentos criativos
As melhores ferramentas de transferência de estilo com IA para experimentos criativos

As melhores e mais bem avaliadas ferramentas de transferência de estilo com IA de 2026 para experimentos criativos! A XIX.AI selecionou uma coleção poderosa e revolucionária de ferramentas imperdíveis, que oferecem resultados excepcionais por meio de testes reais e classificações rigorosas. Essas soluções de ponta ajudam os profissionais criativos a aumentar significativamente a produtividade, acelerando a criação de conteúdo e revelando possibilidades criativas infinitas. Explore agora para descobrir a ferramenta perfeita para você e comece a criar hoje mesmo!

9 ferramentas
xix.ai
Criação de quadrinhos As melhores ferramentas de balões de diálogo com IA para a narrativa visual
As melhores ferramentas de balões de diálogo com IA para a narrativa visual

As melhores e mais bem avaliadas ferramentas de balões de diálogo com IA para narrativa visual de 2026 já estão disponíveis no XIX.AI! Esta coleção selecionada apresenta ferramentas poderosas e revolucionárias que ajudam os criadores a aumentar a produtividade e superar gargalos criativos. Veja uma comparação entre versões gratuitas e pagas, confira testes reais e verifique os rankings mais recentes para encontrar as soluções imperdíveis, perfeitas para criar narrativas visuais envolventes. Explore agora e descubra sua ferramenta ideal!

10 ferramentas
xix.ai
Assistente de Reunião As melhores ferramentas de resumo de reuniões com IA: acompanhe decisões e ações de acompanhamento com clareza
As melhores ferramentas de resumo de reuniões com IA: acompanhe decisões e ações de acompanhamento com clareza

As melhores e mais bem avaliadas ferramentas de resumo de reuniões com IA de 2026 para um acompanhamento claro das decisões e acompanhamentos sem esforço. Esta lista selecionada apresenta soluções poderosas e revolucionárias que aumentam drasticamente a produtividade ao automatizar notas de reuniões, identificar ações-chave e otimizar a coordenação da equipe em todos os projetos. Veja uma comparação entre versões gratuitas e pagas, além de testes práticos e rankings atualizados semanalmente para ajudá-lo a encontrar a ferramenta perfeita. Explore agora para aproveitar ao máximo as vantagens da IA!

9 ferramentas
xix.ai
Análise de dados Melhores ferramentas de limpeza de dados com IA: corrija valores faltantes e duplicatas rapidamente
Melhores ferramentas de limpeza de dados com IA: corrija valores faltantes e duplicatas rapidamente

2026 – Os melhores e mais bem avaliados ferramentas de limpeza de dados com IA, atualizadas para corrigir rapidamente valores faltantes e duplicatas. Esta lista selecionada apresenta soluções poderosas e revolucionárias que aumentam significativamente a produtividade. Cada opção passou por testes rigorosos em condições reais para garantir sua confiabilidade. Acesse uma comparação gratuita entre as versões pagas e gratuitas e descubra a ferramenta indispensável que melhor atende às suas necessidades. Explore agora em XIX.AI para aproveitar todos os benefícios oferecidos pela IA.

11 ferramentas
xix.ai
Comentários (27)
0/500
DouglasMartinez
DouglasMartinez 16 de Abril de 2026 à52 15:00:52 WEST

Interesting approach! Using Minecraft for AI benchmarking sounds way more engaging than standard tests. Wonder if this could lead to AI that actually helps design game worlds? The student's project is a cool example of how gaming and AI research can mix. Hope they share the results! 🎮

RaymondGreen
RaymondGreen 9 de Março de 2026 à46 04:00:46 WET

高校生がAI建築チャレンジのサイトを作ったのか…!Minecraftの世界でAIの創造性を測るってアイデア、すごく面白いな。でも、これって結局マイクロソフトのプロモーションみたいなものじゃないの?AIがどんどんゲーム内に溶け込んでいくの、ちょっと怖い気もする😅 未来のゲームはすべてAIが作っちゃうのかな?

NicholasYoung
NicholasYoung 20 de Outubro de 2025 à49 19:30:49 WEST

AIが建築対決するなんて面白すぎる!🏗️ Minecraftでベンチマークを取る発想が新鮮だけど、これってゲームバランス崩さないのかな?ちょっと心配…

JamesMiller
JamesMiller 15 de Outubro de 2025 à35 19:30:35 WEST

É sempre incrível ver jovens inovando com IA! Alguém já testou se esses desafios do Minecraft realmente conseguem medir bem a criatividade dos modelos? Ou será que é só mais uma moda passageira? 😅

RalphRoberts
RalphRoberts 20 de Setembro de 2025 à34 23:30:34 WEST

这个高中生用Minecraft来测试AI生成建筑也太有创意了吧!😂 传统AI评测标准太死板了,确实需要这种更直观有趣的方式。不过我很好奇评判标准是什么,是美观度还是还原度?也想试试看用我的世界来测试Stable Diffusion效果

JasonJohnson
JasonJohnson 23 de Agosto de 2025 à25 02:01:25 WEST

This high school kid building an AI Minecraft challenge site is wild! 🧱 Makes me wonder how far AI can push creativity in games. Could it outbuild my epic castle? 😎

OR