El horror del cuerpo giratorio en un video de gimnasia expone los defectos de la IA
El miércoles, un video del recién lanzado generador de video Sora AI de OpenAI fue viral en las redes sociales, que muestra a una gimnasta a la que le crecen extremidades adicionales y pierde brevemente la cabeza durante lo que parece ser una rutina de suelo de estilo olímpico.
Resulta que los errores de síntesis sin sentido en el video, lo que nos gusta llamar “jabberwockies”, dan pistas sobre detalles técnicos sobre cómo funcionan los generadores de video de IA y cómo podrían mejorar en el futuro.
Pero antes de profundizar en los detalles, echemos un vistazo al vídeo en sí.
Un vídeo generado por IA de una gimnasta imposible, creado con OpenAI Sora.
En el vídeo, vemos una vista de lo que parece un gimnasia de piso
“A pesar de lo genial que es el nuevo Sora, la gimnasia sigue siendo en gran medida la prueba de Turing para el video de IA”, escribió un capitalista de riesgo. Deedy Das
Nos comunicamos con Das y él confirmó que generó el video usando Sora. También proporcionó el mensaje, que era muy largo y estaba dividido en cuatro partes, generado por Claude de Anthropic, usando instrucciones complejas como “La gimnasta inicia desde la esquina trasera derecha, tomando posición con el pie derecho apuntando hacia atrás en la postura B-plus”.
“Habiendo jugado con modelos de texto a video durante los últimos 6 meses, sé que tienen dificultades con movimientos físicos complejos como la gimnasia”, nos dijo Das en una conversación. “Tenía que intentarlo [in Sora] porque la consistencia del personaje parecía mejorada. En general, fue una mejora porque antes… la gimnasta simplemente se teletransportaba o cambiaba de ropa en medio del giro, pero en general todavía luce francamente horrible. Esperábamos que el vídeo de IA aprendiera física de forma predeterminada, ¡pero eso aún no ha sucedido!”.