Este huevo LED del tamaño de una habitación captura increíbles modelos 3D de las personas que están dentro de él – TechCrunch


Capturar actuaciones humanas en 3D de alta definición es una propuesta complicada, y entre los muchos desafíos está conseguir la iluminación adecuada. Este nuevo e impresionante proyecto de investigadores de Google coloca el tema en el centro de lo que solo se puede describir como un huevo LED prismático, pero los modelos 3D resultantes son notables y, lo que es más importante, se pueden volver a ver.

Lo que se llama captura volumétrica utiliza múltiples cámaras en una configuración de 360 ​​grados para capturar lo que puede parecer una representación fotorrealista de un sujeto, incluidos todos los pequeños detalles como la deformación de la ropa, el movimiento del cabello, etc. Tiene dos debilidades serias: Primero, se parece más a una película en 3D que a una modelo, ya que no puedes posar a la persona o cambiar sus atributos o ropa; La segunda es una extensión de la primera, en el sentido de que no se puede cambiar la forma en que se ilumina a la persona, sea lo que sea que haya tenido cuando la capturó, eso es lo que se obtiene.

"Los Relightables" es un intento de un equipo de Google AI para abordar este segundo problema, ya que el primero está bastante integrado. Su sistema no solo produce un modelo 3D altamente detallado de una persona en movimiento, sino que permite que ese modelo se ilumine de manera realista fuentes de luz, lo que permite colocarlo en juegos, películas y otras situaciones donde la iluminación puede cambiar.

Imágenes del documento de Google AI que muestran el proceso de captura y el modelo 3D resultante solo y en un entorno virtual iluminado.

Todo es gracias al huevo prismático mencionado anteriormente (y un par de líneas de código, por supuesto). El huevo está revestido con 331 luces LED que pueden producir cualquier color, y a medida que la persona está siendo capturada, esos LED cambian en un patrón estructurado especial que produce un modelo independiente de la iluminación.

Los modelos resultantes se pueden colocar en cualquier entorno virtual y reflejarán no la iluminación en la que fueron capturados, sino la iluminación de ese pequeño mundo. Los ejemplos en el video a continuación no son exactamente de calidad de nivel de Hollywood, pero puede ver la idea general de lo que están buscando.

Las limitaciones de la captura volumétrica la hacen inadecuada para muchos usos en películas, pero ser reencontrable hace que estas interpretaciones se acerquen mucho más a los modelos 3D comunes de lo que eran antes. Por supuesto, todavía tienes que hacer toda tu actuación dentro de un huevo gigante.

"The Relightables" será presentado por el equipo de SIGGRAPH Asia.

LO MÁS LEÍDO

Leave a Reply

Your email address will not be published. Required fields are marked *