La synthèse de contenu visuel qui répond aux besoins des utilisateurs nécessite souvent une contrôlabilité flexible et précise de la pose, de la forme, de l'expression et de la disposition des objets générés. Les approches existantes acquièrent la contrôlabilité des réseaux antagonistes génératifs (GAN) via des données d'entraînement annotées manuellement ou un modèle 3D préalable, qui manquent souvent de flexibilité, de précision et de généralité. Dans ce travail, nous étudions une manière puissante mais beaucoup moins explorée de contrôler les GAN, à savoir

Faites glisser votre GAN : Manipulation interactive basée sur des points sur le maniement d'images génératives

Présentation

Qu'est-ce que DragGAN?

DragGAN est un outil puissant pour la manipulation interactive basée sur les points sur le manège d'images génératives. Il permet aux utilisateurs de "tirer" n'importe quel point de l'image pour atteindre précisément des points cibles de manière interactive.

Comment fonctionne DragGAN?

DragGAN se compose de deux composants principaux : 1) une supervision du mouvement basée sur les caractéristiques qui guide le point de manipulation vers la position cible, et 2) une nouvelle approche de suivi des points qui exploite les caractéristiques du GAN discriminatif pour localiser en continu la position des points de manipulation.

Caractéristiques de DragGAN

  • Contrôle précis sur la destination des pixels, permettant de manipuler la pose, la forme, l'expression et la disposition de diverses catégories telles que les animaux, les voitures, les humains, les paysages, etc.
  • Capacité à déformer une image avec des sorties réalistes même pour des scénarios difficiles tels que la création de contenu occulté et la déformation de formes suivant de manière cohérente la rigidité de l'objet.
  • Peut être utilisé pour la manipulation d'images et le suivi de points.

Prix

L'article et le code sont disponibles gratuitement, et les images, textes et fichiers vidéo sur le site sont mis à disposition gratuitement pour une utilisation non commerciale sous la licence Creative Commons CC BY-NC 4.0.

Faites - Alternative

Transformez une photo en dessin animé - Cartoonisez-vous et créez des personnages d'avatar gratuitement

Transformez vos photos en œuvres d'art, en croquis et en dessins animés en un clic - le cartoonizer et éditeur de photos le plus simple, le plus beau et le plus efficace pour tous.

--
Développement de chatbot alimenté par l'IA et solutions d'IA conversationnelle

Chaibar.ai : Révolutionnez votre expérience Mac avec Chaibar, un assistant IA de pointe qui intègre de manière transparente la puissance de ChatGPT et de Dall-E, vous permettant de libérer une créativité et une productivité sans précédent.

--
Change Clothes AI

Changeur de vêtements IA - Transformez votre style avec le changeur de vêtements IA en ligne et essai gratuit.

--
Plus de tags sur: Faites glisser votre GAN : Manipulation interactive basée sur des points sur le maniement d'images génératives