La síntesis de contenido visual que satisface las necesidades de los usuarios a menudo requiere una controlabilidad flexible y precisa de la pose, forma, expresión y diseño de los objetos generados. Los enfoques existentes obtienen controlabilidad de las redes generativas adversarias (GAN) a través de datos de entrenamiento anotados manualmente o un modelo 3D previo, que a menudo carecen de flexibilidad, precisión y generalidad. En este trabajo, estudiamos una forma poderosa pero mucho menos explorada de controlar GANs, es decir,

Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas

Introducción

¿Qué es DragGAN?

DragGAN es una herramienta poderosa para la manipulación interactiva basada en puntos en el espacio de imagen generativo. Permite a los usuarios "arrastrar" cualquier punto de la imagen para alcanzar de manera precisa puntos objetivo de forma interactiva.

¿Cómo funciona DragGAN?

DragGAN consta de dos componentes principales: 1) una supervisión de movimiento basada en características que guía al punto de control a moverse hacia la posición objetivo, y 2) un nuevo enfoque de seguimiento de puntos que aprovecha las características discriminativas de GAN para seguir localizando la posición de los puntos de control.

Características de DragGAN

  • Control preciso sobre hacia dónde van los píxeles, manipulando así la pose, forma, expresión y disposición de diversas categorías como animales, coches, humanos, paisajes, etc.
  • Capacidad para deformar una imagen con salidas realistas incluso en escenarios desafiantes como la alucinación de contenido oculto y la deformación de formas que siguen consistentemente la rigidez del objeto.
  • Puede utilizarse para tareas de manipulación de imágenes y seguimiento de puntos.

Precio

El artículo y el código están disponibles de forma gratuita, y las imágenes, texto y archivos de video en el sitio se ponen a disposición de forma gratuita para uso no comercial bajo la licencia Creative Commons CC BY-NC 4.0.

Arrastra - Alternativa

Remover

Generado por create next app

--
RenderNet AI

Rendernet.ai: RenderNet AI ofrece soluciones de renderizado de inteligencia artificial de vanguardia diseñadas para creadores que buscan mejorar sus servicios de renderizado 3D. Nuestra plataforma de renderizado basada en la nube permite la generación de personajes, imágenes y videos consistentes, proporcionando un control sin igual sobre su proceso creativo. Descubra el futuro del renderizado de inteligencia artificial con RenderNet y eleve sus proyectos a nuevas alturas.

--
API de Img2prompt de Methexis-Inc en Replicate

Replicate.com: Genera textos que se ajusten estrechamente a una imagen con estilo utilizando la herramienta Img2Prompt de Methexis Inc. Optimizado para difusión estable (clip ViT-L/14).

--
Restaurador de Fotos Faciales

Restaura tus fotos antiguas y mantén vivos los recuerdos.

--
Más etiquetas sobre: Arrastra tu GAN: Manipulación interactiva basada en puntos en el espacio de imágenes generativas