La síntesis de contenido visual que satisface las necesidades de los usuarios a menudo requiere una controlabilidad flexible y precisa de la pose, forma, expresión y diseño de los objetos generados. Los enfoques existentes obtienen controlabilidad de las redes generativas adversarias (GAN) a través de datos de entrenamiento anotados manualmente o un modelo 3D previo, que a menudo carecen de flexibilidad, precisión y generalidad. En este trabajo, estudiamos una forma poderosa pero mucho menos explorada de controlar GANs, es decir,

Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas

Introducción

¿Qué es DragGAN?

DragGAN es una herramienta poderosa para la manipulación interactiva basada en puntos en el espacio de imagen generativo. Permite a los usuarios "arrastrar" cualquier punto de la imagen para alcanzar de manera precisa puntos objetivo de forma interactiva.

¿Cómo funciona DragGAN?

DragGAN consta de dos componentes principales: 1) una supervisión de movimiento basada en características que guía al punto de control a moverse hacia la posición objetivo, y 2) un nuevo enfoque de seguimiento de puntos que aprovecha las características discriminativas de GAN para seguir localizando la posición de los puntos de control.

Características de DragGAN

  • Control preciso sobre hacia dónde van los píxeles, manipulando así la pose, forma, expresión y disposición de diversas categorías como animales, coches, humanos, paisajes, etc.
  • Capacidad para deformar una imagen con salidas realistas incluso en escenarios desafiantes como la alucinación de contenido oculto y la deformación de formas que siguen consistentemente la rigidez del objeto.
  • Puede utilizarse para tareas de manipulación de imágenes y seguimiento de puntos.

Precio

El artículo y el código están disponibles de forma gratuita, y las imágenes, texto y archivos de video en el sitio se ponen a disposición de forma gratuita para uso no comercial bajo la licencia Creative Commons CC BY-NC 4.0.

Arrastra - Alternativa

Generador de arte AI y búsqueda de imágenes - eBank NZ

Ebank.nz: Genera arte AI impresionante al instante y busca a través de una vasta colección de imágenes de arte AI con el principal Generador de Arte AI en ebank.nz.

--
Eklipse: Convierte clips de Twitch a TikTok, Reels y Shorts de forma gratuita

Eklipse es un recortador de momentos destacados de juegos de IA. Convierte, edita y comparte lo mejor de tu clip de transmisión de Twitch en TikTok, Reels y YouTube Shorts de forma sencilla y gratuita.

--
Más etiquetas sobre: Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas