Reliquia histórica de una película muda asombrosamente mejorada a 4K por inteligencia artificial


Lanzado en 1896, L'arrivée d'un train en gare de La Ciotat es uno de los primeros ejemplos de creación de películas que tenemos: el corto silencioso de 50 segundos, que muestra un tren de correo entrando en la estación de La Ciotat, parece aburrido para los estándares de hoy, pero habría sorprendido a las multitudes del siglo XIX al ver imágenes en movimiento por primera vez. hora.

Ahora esto reliquia de la película famosa y antigua se ha ampliado a un glorioso material de archivo 4K de 60 cuadros por segundo gracias al poder de la inteligencia artificial: usar Redes neuronales para completar los píxeles faltantes y los marcos faltantes que no estaban allí para empezar.

Es el trabajo del desarrollador y YouTuber Denis Shiryaev, y si ves su nueva toma se presenta como una película moderna filmada en blanco y negro. Los detalles sobre la ropa y el tren en sí se pueden seleccionar fácilmente; todo funciona sin problemas y sincronizado; y puedes ver lejos en la distancia.

Además de agregar una nueva pista de audio, Shiryaev ha utilizado dos algoritmos aquí: el primero es el Gigapixel AI de Topaz Labs, que se llena de detalles a medida que las imágenes se hacen más grandes.

Lo hace analizando un gran número de imágenes a medida que se reducen, aprendiendo qué información se pierde en el camino. Con esta capacitación para aprovechar, la IA puede trabajar hacia atrás para agregar información a medida que las imágenes se amplían.

El segundo bit de magia AI es agregado por DAIN (o Interpolación de fotogramas de video consciente de la profundidad), desarrollado por un equipo de investigadores e ingenieros de Google.

DAIN también se llena de detalles, como Gigapixel AI, pero esta vez se trata de insertar imágenes completas en lugar de píxeles individuales, aumentando la velocidad de fotogramas hasta 60 cuadros por segundo.

Una vez más, está utilizando un archivo de videos existentes como materiales de capacitación, tratando de resolver lo que debería estar en los vacíos mediante la evaluación de los fotogramas antes y después, y los diferentes niveles de profundidad que hay en una toma.

Tenga en cuenta que los detalles adicionales que está viendo en esta restauración pueden no ser lo que realmente estaba en el metraje, hasta el último píxel; en cambio, son las mejores conjeturas de algoritmos informáticos capacitados en vastas bibliotecas de fotos y videos similares. .

El original L'arrivée d'un train en gare de La Ciotat fue filmado por el Hermanos Lumière, utilizando una película de 35 mm dentro de un Cinématographe cámara (que también se duplicó como proyector).

También debemos señalar que en comparación con algunos muy copias de baja resolución y mal aspecto de la película en línea, el fuente de video Shiryaev utilizado también es de muy buena calidad, probablemente gracias a técnicas de restauración anteriores.

Desafortunadamente, el video fuente no viene con ningún detalle sobre cómo se hizo, pero parece que se ha mejorado digitalmente de alguna manera.

Cualquiera que sea la historia detrás de la fuente utilizada, la nueva versión agrega resolución y suavidad adicionales al metraje, dándonos otro ejemplo de cómo los motores de IA pueden construir sus propios realidad digital.

Si bien existen preocupaciones válidas sobre fotos profundas y videos, recreando escenas que nunca existieron, esta ampliación de una película muda clásica muestra las formas positivas en que se pueden implementar las redes neuronales.

Mira algunos de los mayor versiones de L'arrivée d'un train en gare de La Ciotat flotando alrededor de YouTube, y puede ver la diferencia que pueden hacer el procesamiento digital y las mejoras artificiales. La película está incluso disponible. en color ahora tambien.

LO MÁS LEÍDO

Leave a Reply

Your email address will not be published. Required fields are marked *