Nvidia AI joga Minecraft e ganha prêmio de conferência de aprendizado de máquina

minerar todos os diamantes —

NeurIPS 2022 homenageia MineDojo por jogar Minecraft quando instruído por avisos por escrito.

Benj Edwards – 28 de novembro de 2022 22h13 UTC

Continua após a publicidade..

Prolongar / A IA do MineDojo pode executar tarefas complexas no Minecraft .Nvidia
Um artigo descrevendo

MineDojo, Agente de IA generalista da Nvidia que pode executar ações a partir de prompts escritos em Minecraft,

ganhou um Outstanding Datasets and Benchmarks Paper Award no 2022 NeurIPS (Processamento de Informação Neural Systems), Nvidia revelou na segunda-feira. Para treine a estrutura do MineDojo para jogar Minecraft, os pesquisadores alimentaram 730.000 Minecraft vídeos do YouTube (com mais de 2,2 bilhões de palavras transcritas), 7.000 páginas da Web extraídas do wiki Minecraft e 340.000 postagens do Reddit e 6,6 milhões de comentários do Reddit descrevendo Minecraft jogabilidade.

A partir desses dados, os pesquisadores criaram um modelo de transformador personalizado chamado MineCLIP que associa videoclipes com atividades específicas do jogo Minecraft. Como resultado, alguém pode dizer a um agente do MineDojo o que fazer no jogo usando linguagem natural de alto nível, como “encontrar uma pirâmide no deserto” ou “construir um portal inferior e entrar nele”, e o MineDojo executará a série de etapas necessário para que isso aconteça no jogo.

MineDojo's AI can perform complex tasks in Minecraft.

Exemplos de tarefas que o MineDojo pode executar.

Nvidia

MineDojo visa criar um agente flexível que podem generalizar ações aprendidas e aplicá-las a diferentes comportamentos no jogo. Como a Nvidia escreve , “Embora os pesquisadores tenham treinado há muito tempo agentes de IA autônomos em ambientes de videogame como

StarCraft

, Dota e Go, esses agentes geralmente são especialistas em apenas algumas tarefas. Então, os pesquisadores da Nvidia recorreram a Minecraft, o jogo mais popular do mundo, para desenvolver uma estrutura de treinamento escalável para um agente generalista – que pode executar com sucesso uma ampla variedade de tarefas abertas.”

Nvidia

O premiado papel, “MINEDOJO: Construindo Agentes Incorporados Abertos com Conhecimento em Escala da Internet,” estreou em junho. Seus autores incluem Linxi Fan da Nvidia e Guanzhi Wang, Yunfan Jiang, Ajay Mandlekar, Yuncong Yang, Haoyi Zhu, Andrew Tang, De-An Huang, Yuke Zhu e Anima Anandkumar de várias instituições acadêmicas. Você pode ver exemplos de MineDojo em ação em seu website oficial , e o código para MineDojo e MineCLIP está disponível no GitHub.