Adobe在 10/11 號宣布推出三種新的生成式 AI 模型,為 Illustrator、Adobe Express 增添了強大的功能,並極大地改進了 Photoshop 的文本生圖像功能。在 AdAdobe Max 活動中,Adobe 推出了 Firefly Image 2 模型,是原始 Firefly AI 圖像生成器的最新版本,支援Photoshop 的生成填充等流行功能,同時還有兩個用於生成向量圖像和設計模板的新Firefly 模型。
Adobe 表示,與前代產品相比,Firefly Image 2 模型可產生品質明顯更高的影像,尤其是在渲染逼真的人體時,涉及樹葉、皮膚紋理、頭髮、手部和臉部特徵等高頻細節。使用 Firefly Image 2 模型產生的影像具有更高的分辨率,並且具有更鮮豔的色彩和色彩對比度。
Image 2 模型還引入了新的人工智慧編輯功能,幫助使用者自訂結果。照片設定可以手動或自動調整生成影像的景深、運動模糊和視野,就像手動相機控制一樣。還添加了「提示指導」功能,幫助使用者改進文字描述的措辭,同時自動完成提示以提高效率。
Adobe還引入了新的「生成匹配」功能,該功能會影響生成內容的風格以匹配特定圖像。使用者可以從預先選擇的圖像清單中進行選擇,或上傳自己的參考來複製樣式,並使用滑桿控制相似程度。內容憑證——一個數位“營養標籤”,附加屬性元數據並將圖像識別為人工智慧生成——將自動附加到最終輸出。
Adobe 的設計負責人 Scott Belsky在部落格文章中表示,公司已經制定了「新的政策和保障措施」來保護生成匹配免遭濫用,且該功能將提示用戶同意 Adobe 的使用條款並確認他們有權使用上傳的圖像,同時在 Adobe 的伺服器上儲存上傳內容的縮圖(不用於訓練 AI 模型)以提供級別的問責制。在公司尋求回饋期間,產生配對也將保持測試狀態,在此期間用戶將不被允許將其用於商業目的。
儘管如此,目前似乎幾乎沒有什麼能夠真正阻止用戶模仿受保護的內容,這可能會在 Adobe 和反對人工智慧複製其風格的創意人員之間造成更大的分歧。目前,該系統似乎更多的是限制 Adobe 的責任,而不是從一開始就防止模仿行為。
Firefly Image 2 今天可以透過網路為基礎的 Firefly beta進行試用,並且「即將推出」到 Creative Cloud 應用程式中。目前還無法在 Photoshop(標準版、測試版或網頁版)中使用。
Adobe 還推出了適用於 Adobe Illustrator 的新 Firefly 向量模型,該公司聲稱這是「世界上第一個向量圖形生成 AI 模型」。Adobe 的 Firefly 向量模型現已在 Firefly 測試版中推出,允許使用者使用文字提示建立可編輯的向量圖像,自動將圖形的每個元素拆分為「邏輯」群組和圖層。與傳統的 JPEG 和 PNG 檔案不同,向量圖形(也稱為 SVG 檔案)非常適合徽標設計師等創意人員,因為它們可以縮放到任何尺寸,而不會影響整體圖像品質。
就像最初的Firefly 文字到圖像模型一樣,Adobe 表示,其Firefly Vector 模型被設計為可安全用於商業用途,因為是在Adobe Stock 等授權內容和版權擁有的公共領域內容上進行訓練的。Firefly 向量模型現在也可以透過 Adobe Illustrator Beta 試用,此外還有其他 Beta 功能,例如 Mockup(在 3D 模型上真實地呈現你的設計)和用於識別和編輯向量字體的 Retype。
最後,Adobe 推出了 Firefly Design 模型,可以為印刷品、社交貼文、線上廣告、影片等產生可自訂的模板。Adobe 的 Firefly Design 模型為 AdAdobe Express 中新的文字到範本測試版功能提供支持,它使用文字提示為「所有流行的寬高比」生成完全可編輯的範本。它與 Canva 的 Magic Design 功能有一些相似之處,即用戶可以描述類似「海灘度假傳單」的內容來產生獨特的模板,而不是將單一文字和圖像資源拖放到裡面。
據 Adobe 稱,迄今為止 Firefly 模型已被用來生成超過 30 億張圖像,在一項新產品誕生不到一周年的時間就進行大更新是很不尋常的!Canva和微軟等其他公司雖早在去年就發布了各種人工智慧驅動的創意工具,但 Adobe 發布的工具也更是為公司保持競爭力的最好方式。你最期待哪一項功能呢?
未來的更新
Adobe通常都會在MAX大會展示一些更具前瞻性的技術,這些技術可能會也可能不會在未來某個時候出現在其 Creative Cloud 應用程式中。也邊告訴投資人、用戶說Adobe的工程師們正在做什麼。在10/12號的MAX大會上,隨著Firefly 現在成為 Photoshop 的一部分,現在也成為 Illustrator 的一部分,下一個領域就是影片了。
- Project Fast Fill
其核心是生成填入 Photoshop 中,但用於影片。這項快速填充只需讓編輯人員從影片中刪除物件或更改背景,就好像他們正在處理靜態圖像一樣,所有這些都帶有簡單的文字提示。
在過去的幾個月,我們看到影片編輯器中AI工具增加,其中包括 Davinci Resolve、Capcut 等,Premiere Pro的競爭對手。這些通常從字幕的語音識別和遮罩的對象識別開始,但生成填充可能正是Adobe 擁有主要優勢的功能!
2. Project Draw And Delight
用戶可以粗略地塗鴉草圖並添加文字提示,然後 Adobe 的 AI 將它們轉換為精美的向量繪圖。Adobe推出了Illustrator 的生成式 AI 功能,從很多方面來說,就像是這項工作的延伸。
3. Project Poseable
透過 AI 加快建立模型的過程,從而使創建原型和故事板變得更容易。用戶不必花時間編輯場景的每一個微小細節—背景、各個角色的不同角度和姿勢,或角色與場景中周圍物體的互動方式等。用戶可以利用基於 AI 的角色姿勢模型,使用圖像生成模型輕鬆渲染3D 角色場景。
4. Project Stardust
Project Stardust 包含與今年早些時候在 Photoshop 中首次亮相的「上下文工作列」 類似的功能,它可以自動檢測設計過程中的後續步驟,並允許用戶進行快速編輯。在示範影片中,選擇影像背景中的一群模糊的人會提示工作列上出現「刪除幹擾物」按鈕,點擊該按鈕會自動刪除人群。與 Adobe Firefly 支援的 Photoshop 工具相同的生成 AI 功能。
了解更多
5. Project Primrose
Project Primrose 是一款互動式連身裙(是的,是一件真正的連身裙,而不是某些Photoshop 功能),它展示了「柔性紡織品顯示器」的潛在用途,允許穿著者像可編程螢幕一樣在身體上顯示圖案和圖像。Adobe之前已經預告過這種「智慧顯示織物」技術,但先前應用於平面畫布或是小的小手提包。這種衣服可能看起來很炫,但實用性可能偏低。(或許偶像藝人開演唱會時可以考慮!)
6. Project See Through
你是否曾經透過窗戶給某人拍過照片,且希望有一種簡單的方法可以消除玻璃上所有煩人的反射?這正是 Project See Through 所做的事情。Adobe 表示,與手動清理影像以去除障礙物相比,See Through「極大地簡化了」去除過程。如果它成功的話,我認為這對 Photoshop 或 Adobe Express 等程式來說是一個不錯的工具。
7. Project Dub Dub Dub
Project Dub Dub Dub 可以自動將錄音或視訊音軌翻譯成未指定數量的支援語言,同時保留原始說話者的聲音。換句話說,你可以聽到自己被翻譯成法語、德語、西班牙語、阿拉伯語等,生成的對話會自動對齊以匹配原始音訊中的發音。這不僅節省了大量手動配音視訊或音訊內容的時間,而且還減少了僱用外部翻譯服務的需要。(當然這前提是最終結果準確,但現在市面上好像也已經有許多公司正在做類似的事情了。)
另外還有一些其他的功能如下,大家都可以自己到Adobe官方頻道去收看囉!
- Project Res Up
- Project See Through
- Project Neo Sneak
- Project Scene Change
- Project Glyph Ease