La nueva herramienta AI “Generative Fill” de Adobe Photoshop le permite manipular fotos con texto

El martes, Adobe agregado una nueva herramienta para su versión beta de Photoshop llamada “Relleno generativo”, que utiliza la síntesis de imágenes basada en la nube para rellenar áreas seleccionadas de una imagen con nuevo contenido generado por IA basado en una descripción de texto. Desarrollado por Adobe Firefly, Generative Fill funciona de manera similar a una técnica llamada “repintado” utilizada en los lanzamientos de DALL-E y Stable Diffusion desde el año pasado.

En el núcleo de Generative Fill se encuentra Adobe Firefly, que es el modelo de síntesis de imágenes personalizado de Adobe. Como modelo de IA de aprendizaje profundo, Firefly ha sido entrenado en millones de imágenes en la biblioteca de archivos de Adobe para asociar ciertas imágenes con descripciones de texto de ellas. Ahora parte de Photoshop, las personas pueden escribir lo que quieren ver (es decir, “un payaso en un monitor de computadora”), y Firefly sintetizará varias opciones para que el usuario elija. Relleno generativo utiliza una conocida técnica de IA llamada “en pintura

” para crear una generación consciente del contexto que pueda combinar a la perfección imágenes sintetizadas en una imagen existente.

Para usar Relleno generativo, los usuarios seleccionan un área de una imagen existente que desean modificar. Después de seleccionarlo, aparece una “Barra de tareas contextual” que permite a los usuarios escribir una descripción de lo que quieren ver generado en el área seleccionada. Photoshop envía estos datos a los servidores de Adobe para su procesamiento y luego devuelve los resultados en la aplicación. Después de generar, el usuario tiene la opción de seleccionar entre varias opciones de generaciones o crear más opciones para navegar.

Cuando se usa, la herramienta Relleno generativo crea una nueva “Capa generativa”, lo que permite alteraciones no destructivas del contenido de la imagen, como adiciones, extensiones o eliminaciones, impulsadas por estas indicaciones de texto. Se ajusta automáticamente a la perspectiva, iluminación y estilo de la imagen seleccionada.

Relleno generativo no es la única función impulsada por IA agregada a la versión beta de Photoshop. Firefly también ha permitido que Photoshop elimine partes de una imagen por completo, borre objetos de una escena o amplíe las dimensiones de una imagen generando nuevo contenido que rodea la imagen existente, una técnica de IA conocida como “superando.”

Estas características han estado disponibles en el generador y editor de imágenes DALL-E 2 de OpenAI desde agosto del año pasado (y en varios lanzamientos caseros de Stable Diffusion desde aproximadamente el mismo tiempo), por lo que Adobe se está poniendo al día para agregarlos a su imagen insignia. editor. Es cierto que es un cambio rápido para una empresa que podría tener un gran objetivo de responsabilidad pintado en la espalda cuando se trata de problemas de generación de contenido dañino o socialmente estigmatizado, utilizando imágenes de artistas para entrenar datos y potenciando la propaganda o la desinformación.

En ese sentido, Adobe no solo bloquea la generación de ciertas palabras clave con derechos de autor, violentas y sexuales, sino que también se basa en condiciones de uso eso restringir personas generen contenido “abusivo, ilegal o confidencial”.

Además, con la capacidad de Relleno generativo para distorsionar fácilmente la realidad mediática aparente de una foto (ciertamente, algo que Photoshop ha estado haciendo desde sus inicios), Adobe está duplicando su Iniciativa de autenticidad de contenidoque utiliza Credenciales de contenido para agregar metadatos a los archivos generados que ayuden a rastrear su procedencia.

El Relleno generativo en la aplicación beta de Photoshop está actualmente disponible para todos los miembros de Creative Cloud con una suscripción o prueba de Photoshop a través de la sección “Aplicaciones beta” de la aplicación Creative Cloud. Todavía no está disponible para uso comercial, no es accesible para personas menores de 18 años, no está disponible en China y actualmente admite mensajes de texto solo en inglés. Adobe planea hacer que Generative Fill esté disponible para todos los clientes de Photoshop a finales de año para que cualquiera pueda hacer payasos de jardín con facilidad.

Si no es suscriptor de Creative Cloud, también puede prueba Relleno generativo gratis en el sitio web de Adobe Firefly con un inicio de sesión de Adobe a través de una herramienta basada en la web. Adobe eliminó recientemente la lista de espera de su versión beta de Firefly.