合成滿足用戶需求的視覺內容通常需要對生成的物件的姿勢、形狀、表情和佈局進行靈活和精確的控制。現有方法通常通過手動標註的訓練數據或先前的3D模型來實現生成對抗網絡(GANs)的可控性,但這些方法往往缺乏靈活性、精確性和通用性。在這項工作中,我們研究了一種強大但較少探索的控制GANs的方法,即

在生成圖像流形上進行交互式基於點的操作:拖動您的GAN

介紹

什麼是 DragGAN?

DragGAN 是一個強大的工具,用於對生成圖像流形上的基於點的互動操作。它允許用戶以用戶互動的方式“拖動”圖像的任何點,以精確地達到目標點。

DragGAN 如何工作?

DragGAN 由兩個主要組件組成:1)基於特徵的運動監督,推動手柄點向目標位置移動,2)一種新的點跟踪方法,利用區分性 GAN 特徵來持續定位手柄點的位置。

DragGAN 的特點

  • 可精確控制像素的移動位置,從而操縱各種類別的姿勢、形狀、表情和佈局,如動物、汽車、人類、風景等。
  • 具有變形圖像的能力,產生逼真的輸出,即使在具有挑戰性的情況下,例如幻覺遮蔽內容和變形形狀,仍能始終遵循對象的剛性。
  • 可用於圖像操作和點跟踪任務。

價格

論文和代碼可免費獲得,網站上的圖像、文本和視頻文件可根據創用 CC BY-NC 4.0 許可證免費供非商業用途使用。

在生成圖像流形上進行交互式基於點的操作:拖動您的GAN - 替代

Newtype.ai:AI 圖像生成工具 | 使用 Newtype AI 創建角色

Newtype.ai:使用NewtypeAI直观的基于Web的界面轻松创建令人惊叹的AI角色图像,只需点击几下即可让您喜爱的角色栩栩如生,提供无与伦比的便利性和稳定性。

--
Swapsurprise.ai:AI 強化臉部交換在線工具 - SwapSurprise

Swapsurprise.ai:體驗AI動力人臉交換的魔力,Swapsurprise將尖端技術與創意相結合,讓您可以在幾秒鐘內將您的臉交換到令人驚嘆、有趣和藝術的圖像中。

--
Photoeditor.ai:AI 強化的線上照片編輯器:免費的自動圖像編輯工具

Photoeditor.ai:AI 助力的照片編輯工具,可立即增強圖像,免費在線移除不需要的物件、人物、文字或浮水印,並體驗無縫編輯的尖端技術。

--
Stability.ai:Output: AI 圖像模型改變了計算機視覺

Stability.ai:Stability.ai 的 Stable Diffusion XL 和 SDXL Turbo 通過更短的提示來改變圖像生成,創造出具有增強組成和真實美感的描述性圖像,開啟無與倫比的創意可能性。

--
更多標籤關於: 在生成圖像流形上進行交互式基於點的操作:拖動您的GAN