DragGAN是一個新的AI修圖軟體,能夠讓用戶通過在圖像上拖動來輕鬆調整照片細節。現在我們已經看到了許多AI生圖的工具,像是 DALLE.2、Stable Diffusion 和 Midjourney,用戶可以輕鬆用 AI 生產的派對或是假啤酒廣告圖片來嚇唬大家。而現在 GANs(Generative Adversarial Network: 生成對抗網絡,一種非監督式學習的一種方法,透過兩個神經網路相互博弈的方式進行學習)的應用在業界即將產生另外一波高潮!

現在大部分圖像處理下節修改的方法都得使用 Photoshop 等工具,通常需要一定的技巧才能靈活而精確地控制單個對象的位置、形狀、表情或排列。而最近熱門的生圖方式是使用生成式 AI(例如 Stable Diffusion 或 Midjourney)來創建全新的圖像,但這些提供的控制很少。

DragGAN AI仍在開發中,但它有可能徹底改變我們編輯圖像的方式。有了DragGAN AI 只需點擊幾下,就可以輕鬆地創建逼真的圖像。他們還可以使用DragGAN AI來修復瑕疵、改變背景,甚至在圖像中添加新的對象。DragGAN AI是一個非常強大的新工具,在未來非常有可能改變我們創建和編輯圖像的方式。

Credit: dragan

DragGAN:拖放圖像處理

你可以調整設置為各種類別的圖像,包括動物、汽車和人以及風景,並調整從圖像布局到姿勢和形狀的一切,甚至改變照片中人的表情。

而 DragGAN 有兩個主要部分。第一部分是基於特徵的運動追蹤,幫助你將圖像中的任何一點移動到你的目標位置。第二部分是一個新的點跟蹤方法,幫助跟蹤這些點的位置。有了 DragGAN,任何人都可以對圖像進行變形,並精確控制每個像素的最終位置。

而基於 GAN 的工具目前適用於 2D 圖像,但團隊也計劃發布一個適用於 3D 模型的版本。

Credit: dragan

DragGAN 跟踪這些點並生成與所需變化相對應的圖像。

Credit: dragan


白皮書官網:
https://vcai.mpi-inf.mpg.de/projects/DragGAN/

Github(預計於6月公佈):
https://github.com/XingangPan/DragGAN

Share this post