La síntesis de contenido visual que satisface las necesidades de los usuarios a menudo requiere una controlabilidad flexible y precisa de la pose, forma, expresión y diseño de los objetos generados. Los enfoques existentes obtienen controlabilidad de las redes generativas adversarias (GAN) a través de datos de entrenamiento anotados manualmente o un modelo 3D previo, que a menudo carecen de flexibilidad, precisión y generalidad. En este trabajo, estudiamos una forma poderosa pero mucho menos explorada de controlar GANs, es decir,

Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas

Introducción

¿Qué es DragGAN?

DragGAN es una herramienta poderosa para la manipulación interactiva basada en puntos en el espacio de imagen generativo. Permite a los usuarios "arrastrar" cualquier punto de la imagen para alcanzar de manera precisa puntos objetivo de forma interactiva.

¿Cómo funciona DragGAN?

DragGAN consta de dos componentes principales: 1) una supervisión de movimiento basada en características que guía al punto de control a moverse hacia la posición objetivo, y 2) un nuevo enfoque de seguimiento de puntos que aprovecha las características discriminativas de GAN para seguir localizando la posición de los puntos de control.

Características de DragGAN

  • Control preciso sobre hacia dónde van los píxeles, manipulando así la pose, forma, expresión y disposición de diversas categorías como animales, coches, humanos, paisajes, etc.
  • Capacidad para deformar una imagen con salidas realistas incluso en escenarios desafiantes como la alucinación de contenido oculto y la deformación de formas que siguen consistentemente la rigidez del objeto.
  • Puede utilizarse para tareas de manipulación de imágenes y seguimiento de puntos.

Precio

El artículo y el código están disponibles de forma gratuita, y las imágenes, texto y archivos de video en el sitio se ponen a disposición de forma gratuita para uso no comercial bajo la licencia Creative Commons CC BY-NC 4.0.

Arrastra - Alternativa

FeedHive - Crea contenido a gran escala ⚡

Crea, publica y gestiona fácilmente tu contenido en redes sociales a gran escala con la plataforma alimentada por IA de FeedHive

79.1 K
Herramienta alimentada por IA para arreglar fotos borrosas - Restaurar, desenfocar y enfocar

Fixblurry.photos: Revive viejos recuerdos con nuestro servicio de restauración de fotos impulsado por IA. Arregla fotos borrosas y dañadas de forma gratuita utilizando Face Photo Restorer. Mejora tus imágenes con nuestra herramienta en línea.

--
FlowGPT - una interfaz visual para ChatGPT

FlowGPT es una interfaz visual para ChatGPT con un flujo de conversación visual multi-hilo

13.9 K
Más etiquetas sobre: Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas