nvidia
Un papel que describe mina dojoel agente de IA generalista de Nvidia que puede realizar acciones a partir de indicaciones escritas en Minecraft, ganó un premio de conjuntos de datos sobresalientes y artículos de referencia en el 2022 NeurIPS (Sistemas de procesamiento de información neuronal), reveló Nvidia el lunes.
Para entrenar el framework MineDojo para jugar Minecraftlos investigadores lo alimentaron con 730.000 Minecraft vídeos de YouTube (con más de 2200 millones de palabras transcritas), 7000 páginas web extraídas del Minecraft wiki y 340 000 publicaciones de Reddit y 6,6 millones de comentarios de Reddit que describen Minecraft Como se Juega.
A partir de estos datos, los investigadores crearon un modelo de transformador personalizado llamado MineCLIP que asocia clips de video con juegos específicos. Minecraft actividades. Como resultado, alguien puede decirle a un agente de MineDojo qué hacer en el juego utilizando un lenguaje natural de alto nivel, como “buscar una pirámide del desierto” o “construir un portal inferior y entrar”, y MineDojo ejecutará la serie de pasos. necesario para que suceda en el juego.
Ejemplos de tareas que puede realizar MineDojo.
nvidia
MineDojo tiene como objetivo crear un agente flexible que pueda generalizar las acciones aprendidas y aplicarlas a diferentes comportamientos en el juego. Como Nvidia escribe“Si bien los investigadores han entrenado durante mucho tiempo a agentes autónomos de IA en entornos de videojuegos como Barco de estrellas, Dota, y Go, estos agentes suelen ser especialistas en pocas tareas. Así que los investigadores de Nvidia recurrieron a Minecraftel juego más popular del mundo, para desarrollar un marco de entrenamiento escalable para un agente generalista, uno que pueda ejecutar con éxito una amplia variedad de tareas abiertas”.
nvidia
el premiado papel“MINEDOJO: Creación de agentes incorporados abiertos con conocimiento a escala de Internet”, debutó en junio Sus autores incluyen a Linxi Fan de Nvidia y Guanzhi Wang, Yunfan Jiang, Ajay Mandlekar, Yuncong Yang, Haoyi Zhu, Andrew Tang, De-An Huang, Yuke Zhu y Anima Anandkumar de varias instituciones académicas.
Puede ver ejemplos de MineDojo en acción en su página web oficialy el código de mina dojo y MineCLIP está disponible en GitHub.