Die Synthese visueller Inhalte, die den Bedürfnissen der Benutzer gerecht werden, erfordert oft eine flexible und präzise Steuerbarkeit der Pose, Form, Ausdruck und Anordnung der generierten Objekte. Bestehende Ansätze erlangen die Steuerbarkeit von generativen adversarialen Netzwerken (GANs) über manuell annotierte Trainingsdaten oder ein zuvor erstelltes 3D-Modell, die oft an Flexibilität, Präzision und Allgemeingültigkeit mangeln. In dieser Arbeit untersuchen wir einen leistungsstarken, aber viel weniger erforschten Weg zur Steuerung von GANs, nämlich zu

Ziehen Sie Ihren GAN: Interaktive punktbasierte Manipulation auf dem generativen Bildmanifold

Einführung

Was ist DragGAN?

DragGAN ist ein leistungsstolles Werkzeug für die interaktive punktbasierte Manipulation auf dem generativen Bildmanifold. Es ermöglicht Benutzern, beliebige Punkte des Bildes "zu ziehen", um auf präzise Weise Zielpositionen auf benutzerinteraktive Weise zu erreichen.

Wie funktioniert DragGAN?

DragGAN besteht aus zwei Hauptkomponenten: 1) einer auf Merkmalen basierenden Bewegungsüberwachung, die den Handpunkt dazu bringt, sich in Richtung der Zielposition zu bewegen, und 2) einem neuen Ansatz zum Punkt-Tracking, der die diskriminativen GAN-Merkmale nutzt, um die Position der Handpunkte weiter zu lokalisieren.

Eigenschaften von DragGAN

  • Präzise Kontrolle darüber, wohin Pixel gehen, um die Pose, Form, Ausdruck und Anordnung verschiedener Kategorien wie Tiere, Autos, Menschen, Landschaften usw. zu manipulieren.
  • Fähigkeit, ein Bild mit realistischen Ausgaben zu verformen, auch für anspruchsvolle Szenarien wie das Halluzinieren verdeckter Inhalte und das Verformen von Formen, die konsistent der Steifigkeit des Objekts folgen.
  • Kann für Bildmanipulation und Punkt-Tracking-Aufgaben verwendet werden.

Preis

Das Paper und der Code sind kostenlos verfügbar, und die Bilder, Texte und Videodateien auf der Website sind zur nicht-kommerziellen Nutzung unter der Creative Commons CC BY-NC 4.0 Lizenz frei verfügbar.

Ziehen - Alternative

Starten Sie mit den KI-Tools und der kreativen Plattform von Soonas.

Entsperren Sie das ultimative Toolkit für professionelle + UGC-Inhalte, verwalten Sie Produktkreativität und messen Sie die Leistung. Steigern Sie Ihre Marke mit unserer umfassenden Suite für Inhalts-Erstellung, -Verwaltung und -Analyse.

95.3 K
SoulGen: Kostenlose KI-Magie-Tool zum Erstellen von Kunst aus Text online

SoulGen ist ein KI-Zauberwerkzeug zur Erstellung atemberaubender Kunstwerke realer Mädchen aus Text oder Vorgaben. Holen Sie sich jetzt eine KOSTENLOSE Testversion und erstellen Sie einen individuellen KI-Charakter.

107.1 K
Stability.ai: Stabile Animation SDK: Text-to-Animation-Tool für Entwickler von Stability AI

Stability.ai: Das Stable Animation SDK von Stability AI ermöglicht Künstlern und Entwicklern, atemberaubende Animationen mithilfe fortschrittlicher Stable Diffusion-Modelle zu generieren, darunter Stable Diffusion 2.0 und Stable Diffusion XL, aus Auslösern, Quellbildern oder Quellvideos, und eröffnet beispiellose kreative Möglichkeiten.

770.2 K
Stability AI enthüllt StableStudio: Die Open-Source-Zukunft von DreamStudio

Stability.ai: Stability AI stellt StableStudio vor, eine Open-Source-Text-zu-Bild-Anwendung, die sich auf die communitygetriebene Entwicklung und die Weiterentwicklung der generativen KI konzentriert. Treten Sie mit StableStudio in die Zukunft der KI ein, um fotorealistische Bildgenerierung, Sprachmodelle und mehr zu erleben.

770.2 K
Weitere Tags über: Ziehen Sie Ihren GAN: Interaktive punktbasierte Manipulation auf dem generativen Bildmanifold