Artista usa IA para extraer paletas de colores de descripciones de texto

Agrandar
/ Una serie de cuatro paletas de colores de ejemplo extraídas de indicaciones breves escritas por Matt DesLauriers.

Un artista residente en Londres llamado Matt DesLauriers ha desarrolló una herramienta para generar paletas de colores desde cualquier indicación de texto, lo que permite que alguien escriba “hermosa puesta de sol” y obtenga una serie de colores que coincidan con una escena típica de puesta de sol, por ejemplo. O podría ser más abstracto, encontrando colores que coincidan con “un martes triste y lluvioso”.

Para lograr el efecto, DesLauriers utiliza Stable Diffusion, un modelo de síntesis de imágenes de código abierto, para generar una imagen que coincida con el mensaje de texto. A continuación, un codificador de GIF de JavaScript llamado regalo extrae la información de la paleta analizando la imagen y cuantificando los colores hasta un determinado conjunto.

DesLauriers tiene publicó su código en GitHub; requiere una instalación local de Stable Diffusion y Node.JS. Es un prototipo de vanguardia en este momento que requiere cierta habilidad técnica para configurarlo, pero también es un ejemplo notable de las innovaciones gráficas inesperadas que pueden surgir de los lanzamientos de código abierto de potentes modelos de síntesis de imágenes. Stable Diffusion, que se convirtió en código abierto el 22 de agosto, genera imágenes de una red neuronal que ha sido entrenada en decenas de millones de imágenes extraídas de Internet. Su capacidad para aprovechar una amplia gama de influencias visuales se traduce bien en la extracción de información de la paleta de colores.

Otros ejemplos de la paleta que proporcionó DesLauriers incluyen “Tokyo neon”, que sugiere colores de un vibrante paisaje urbano japonés, “living coral”, que hace eco de un arrecife de coral con rosas y azules profundos, y “green garden, blue sky”, que sugiere un paisaje pastoral saturado. escena. En un tuit de hoy, DesLauriers demostrado cómo diferentes métodos de cuantización (reducir la gran cantidad de colores en una imagen a solo unos pocos que representan la imagen) podrían producir diferentes paletas de colores.

Agrandar / Diferentes módulos de cuantificación de color pueden producir diferentes paletas de colores a partir de la misma imagen.

No es la primera vez que un artista usa IA para extraer paletas de colores del texto. En mayo, un artista llamado dribnet publicado una serie de arte generativo llamada “Homenaje al píxel”, inspirada en jose albers. Simultáneamente lanzó un herramienta en línea que cualquiera puede usar para producir una paleta de seis colores basada en entradas de texto.

¿Por qué usar IA para encontrar paletas de colores? Además del factor de novedad, podrías extraer colores coincidentes de fuentes no convencionales o sentimientos abstractos como “el día después de mi último día en la escuela secundaria”, “el envoltorio desechado de una hamburguesa de comida rápida” o “Star Wars y El Señor de las Galaxias”. Mash-up de anillos”.

La capacidad de extraer paletas de colores de indicaciones escritas parece algo que las herramientas de arte populares podrían duplicar en el futuro, ya que se seleccionan grupos de colores que combinan bien puede ser notoriamente difícil. Es probable que muchas más aplicaciones inesperadas de los modelos de síntesis de imágenes estén en camino.

Heaven32: