Los últimos años nos han enseñado que nuestro caras, voces, y labios se puede copiar y replicar con inteligencia artificial. Ahora, un modelo de inteligencia artificial creado por investigadores de Facebook puede imitar, editar y reemplazar texto escrito a mano y de escena usando solo una palabra en una imagen.
Facebook dio a conocer TextStyleBrush, un proyecto de investigación de IA, el viernes. La compañía señala que, si bien la mayoría de los sistemas de inteligencia artificial pueden replicar y reemplazar texto para tareas bien definidas y especializadas, TextStyleBrush es diferente porque puede reproducir texto tanto en escritura a mano como en escenas del mundo real. Hacer esto es mucho más difícil para un modelo de IA debido a las diferentes opciones de texto y matices involucrados.
“Significa comprender estilos de texto ilimitados no solo para diferentes tipografías y caligrafía, sino también para diferentes transformaciones, como rotaciones, texto curvo y deformaciones que ocurren entre el papel y el bolígrafo al escribir a mano; desorden de fondo; y ruido de imagen ”, explicó Facebook en un anuncio de noticias.
TextStyleBrush es el primer modelo de IA auto-supervisado que puede replicar y reemplazar texto en escenas escritas a mano y del mundo real usando solo una palabra de ejemplo de una imagen, según Facebook. Mostró alta precisión en pruebas automatizadas y estudios de usuarios para cualquier tipo de texto, dijo la compañía, y agregó que tenía la intención de enviar el trabajo a una revista revisada por pares.
G / O Media puede obtener una comisión
El modelo de IA funciona de manera similar a como lo hacen las herramientas de pincel de estilo que se utilizan en los procesadores de texto. En este caso, el método se aplica a la estética del texto en imágenes. Sin embargo, los investigadores de Facebook decidieron renunciar a los métodos tradicionales, que incluyen la definición de parámetros específicos como el tipo de letra o la supervisión del estilo de destino, con TextStyleBrush.
“[W]Adoptamos un enfoque de capacitación más holístico y desenredamos el contenido de una imagen de texto de todos los aspectos de su apariencia del cuadro de palabras completo ”, dijo Facebook. “La representación de la apariencia general se puede aplicar como transferencia de una sola vez sin tener que volver a entrenar en las nuevas muestras de estilo de fuente”.
Sin embargo, TextStyleBrush no está exento de limitaciones. Facebook dijo que estos incluyen trabajar con texto escrito en objetos metálicos o texto que tiene caracteres en diferentes colores.
Si bien a primera vista este modelo de IA parece una forma genial y eficiente de copiar y reemplazar texto, tampoco debería verse como una herramienta inocente. Una de las primeras cosas en las que pensé, por ejemplo, fue cómo TextStyleBrush podría usarse para engañar a otros o incluso cometer delitos.
Facebook reconoce que ataques de texto deepfake son un problema, y dijo que esperaba que al publicar abiertamente su investigación en TextStyleBrush, podría alentar nuevas investigaciones para prevenir estos ataques. La compañía dijo que si los investigadores y profesionales de la inteligencia artificial pueden desarrollar esta tecnología antes que los malos actores, pueden “aprender a detectar mejor este nuevo estilo de deepfakes y construir sistemas robustos para combatirlos”.
Actualización 6/12/2021 9:30 pm ET: Se incorporó un enlace con un ejemplo de TextStyleBrush.
.