Adobe甩出三大AI模型:在PS裡一秒生成影像素材100多項AI能力炸場
今天凌晨,全球最大設計軟體龍頭Adobe甩出Adobe Firefly創意生成式AI模型系列中的三個主要新模型: Adobe Firefly Image 2(螢火蟲二代成像模型)、Firefly Vector Model(螢火蟲向量模型)和Firefly Design Model(螢火蟲設計模型)。
▲Adobe Firefly Image 1和2生成影像效果對比
其中,Firefly向量模型是世界上第一個專注於生成向量圖形的生成式AI模型,該模型透過文字到向量圖形的功能,將向量圖形和生成式AI專業知識直接引入到Adobe Illustrator工作流程中,即日起,Adobe Illustrators的網頁Beta版開啟全球公測。
Adobe還宣布了Creative Cloud(創意應用軟體)的100多項重大AI創新和更新,其中向量圖形軟體Adobe Illustrator、圖像編輯軟體Adobe Photoshop、線上照片編輯器Adobe Lightroom、視頻編輯軟體Adobe Premiere Pro、圖形視頻處理軟體Adobe After Effects和圖片處理軟體Adobe Stock等都正在被Adobe Firefly模型以及其它AI驅動的功能所改變。
例如,使用者在Photoshop想要智慧填充圖片,只需要選取擴充的圖像大小,然後點擊生成就可實現。
Adobe數位媒體業務總裁David Wadhwani談道,3月Adobe推出了Firefly影像模型的測試版,至今,用戶使用該工具已經產生超30億張影像。而Photoshop中由Firefly驅動的生成填充技術,相較於先前的版本,使用者的採用率已經提升了10倍。可以看出,AI正在深入整合到創意工作流程的核心。
Creative Cloud中統一使用所有App的定價為每個月54.99美元,Photoshop為每月20.99美元。
其它定價參考:https://www.adobe.com/creativecloud/plans.html
免費試用連結:https://www.adobe.com/creativecloud/features.html
生成式AI的浪潮不僅讓Midjourney、Stability AI等AI創企站在資本聚光燈下,也讓Adobe等老牌軟體企業對於技術、產品升級迭代的敏銳度再次復甦。過去一年,Adobe的股價上漲幅度達到近90%,截至當地時間今天收盤,Adobe市值達到2,425億美元(折合約1,7,688億元)。
一、自動搭配同一風格生成,版權有風險圖片無法參考
Adobe Firefly Image 2模型是第二代成像模型,可透過改善影像中人體皮膚、頭髮、眼睛、手和其它身體結構,來增強影像的渲染質量,為使用者產生更高品質影像。
Firefly Image 2模型有三大新功能:產生配對(Generative Match)、照片設定(Photo Settings)、提示指導(Prompt Guidance)。
產生匹配指的是Firefly Image 2模型能依照使用者提供的參考影像,產生風格類似的影像。使用者可以選擇工具中預選清單中的影像,或自行上傳參考影像,然後Firefly Image 2模型就可以滿足對應的品牌準則,或複製現有影像的風格,既節省了其從頭開始設計的時間,還能保持圖像的風格一致。
最後,Adobe會在其伺服器上儲存參考圖像的縮圖,基於生成匹配功能將訊息同步提示給用戶,然後讓用戶確認有上傳圖像的使用權限以及其它使用條款。
當使用者上傳的圖像具有版權風險時,或者這張圖被標記為“受保護內容”,Firefly Image 2模型就無法複製其風格:
在照片設定功能中,Firefly Image 2模型能為使用者產生更保真度的細節,例如皮膚毛孔和樹葉,以及為了讓影像有更高品質,使用者還可以控制景深、動作模糊、視野和生成等。
同時,用戶能應用和調整照片設置,類似手動相機鏡頭控制。其中,自動模式能自動選擇「照片」或「藝術」作為影像生成樣式,然後使用者選擇適當的照片設定應用程式。
在提示指導功能上,Firefly Image 2模型改進了對文字提示的理解,能辨識更多地標和文化符號。
在模型創作過程中,使用者可以收到改進提示的建議,激發新的創作創意同時減少重新生成的次數。基於這項功能,使用者能明確如何進行有效的提示,或是否應該重寫。
此外,使用者可以選擇關鍵術語、顏色、形狀等特定元素,以避免產生一些他們不需要的圖像。
最後,在圖像保存階段,使用者可以直接從Firefly共享和保存圖像,並透過他們喜歡的提示進行圖像微調。基於其共享功能,使用者可以分享他們的作品,也能讓其它使用者了解如何創建特定圖像,在共享庫中的圖片,其他人也可以打開和使用。
二、全球首個向量圖生成模型,漸層、分層、平鋪皆可實現
Adobe宣稱,Adobe Firefly向量模型是世界上第一個向量圖形生成AI模型,也是第一個產生「人類品質」向量和圖案輸出的生成AI模型。
Adobe向量圖形軟體Illustrator現在已經推出文字轉向量圖功能測試版,從事創意工作的研究人員可以基於此生成向量圖形,且這些圖形是可編輯並組織成群組。
向量模型的新功能有五個,可以產生匹配影像、向量漸變、分組分層輸出、無縫平鋪、輸出精確幾何形狀。
其中,Firefly向量模型的功能可確保新增至使用者畫板的向量圖形與現有樣式完美匹配。這使得模型能針對場景、主題、圖標和圖案產生高品質的向量輸出。
Adobe官方稱,一般來說,漸層是向量化世界中的一個挑戰。現在,Firefly向量模型可以產生可編輯的向量漸變,能簡化幾何形狀,不需要使用多個實心填滿路徑來描繪相同的影像效果。
同時,產生向量圖形時,所有元素都能依邏輯分組和分層。例如,一棵樹的向量圖中,其能自動將組成該樹的所有相關路徑分組,使用戶更方便地調整、編輯和重複使用最終的向量輸出。
Firefly向量模型產生的向量化圖案可無縫平鋪,因此即便設計圖案無限重複出現,中間也不會出現明顯的間隙。
最後,此模型輸出的高品質向量曲線平滑且精確,能智慧處理多條曲線相交的交點。
三、AI自動產生模板,一條龍提供文字、圖像內容
Firefly設計模型透過Adobe Express中的文字到模板功能,結合Firefly圖像模型、Adobe Stock和Adobe Fonts的專業佈局技術,支援即時產生模板設計。
並且,Firefly設計模型支援大量主流比例模板,這些模板在Express中完全可編輯,並且針對於印刷、社交、線上廣告等不同用途進行客製化設計。使用者可以在Firefly中產生圖像,然後繼續在Express中完善提示,使用Firefly支援的文字效果來豐富標題。
該模型透過AI生成模板,然後利用其自動生成的文字和圖像,能幫用戶從數千個模版中進行快速選擇,並識別中與其需求更適配的佈局。
在內容生成方面,使用者可以根據簡單的提示生成文字和圖像,同時選擇文字大小、顏色和位置,並根據需要裁剪、替換或旋轉圖像。
Firefly設計模型採用即時端到端設計,利用生成式AI來創造與使用者提示相協調的影像、文字和色調。
四、多項生成式AI工具更新,影像編輯工作流程被革命
Adobe數位媒體技術長Ely Greenfield談道:「我們快速、持續地推進Firefly創新,在成像、設計和向量生成方面取得了進步,這三種新模型為輸出品質和用戶控制設定了新的產業標準。”
具有文本到向量圖形功能的Illustrator,除了能生成可編輯高品質向量圖形外,Adobe對Retype也進行了更新,該工具透過快速識別Adobe Fonts中的相似字體,將靜態文本轉換為可編輯文本,同時能快速將影像和圖形轉換為逼真的產品和品牌模型,為了讓設計師之間的協作和交換回饋更便捷,Illustrator也增加了「共享以供審閱」 的功能。
使用更廣泛的影像編輯軟體Adobe Photoshop中,基於Firefly模型其可用性大大提升,Photoshop訂閱者現在可以透過網頁版體驗Photoshop基於AI的強大能力。
在線上照片編輯器Adobe Lightroom中,AI技術提升包括鏡頭模糊、HDR優化以及Lightroom行動版中被簡化的編輯體驗。
其中,HDR優化可以使任何拍攝照片的人都能編輯和導出照片,使其具有更亮的高光、更深的陰影和更鮮豔的色彩; Point Color功能可以幫助攝影師進行精準、準確、細緻的色彩細化,同時為使用者提供對新文件類型的內容憑證支援。
▲Lightroom的鏡頭模糊功能
Adobe也在Premiere Pro和After Effects中發布了新的基於AI的文字編輯和動作改進功能,用戶可以從Express和Premiere Pro等工具中將影片內容無縫發佈到TikTok、YouTube等社交平台上。
圖片處理軟體Adobe Stock的影像編輯過程也被簡化,使用者可透過簡單的文字提示將概念轉換為實際的視覺效果,並且點擊就可以擴展影像背景和縱橫比。
此外,為了讓使用者的設計流程更加簡單,在線上設計工具Express使用中,使用者可以使用由Firefly提供支援的創意副駕駛Generative Fill。基於此,使用者透過文字描述就能插入、刪除或取代任何影像中的物件、人物等。
同時,基於Firefly設計模型,使用者也可以使用文字描述來產生可編輯模板,並且該工具自帶的翻譯功能支援45種語言選擇。
Adobe也推出了全新的端到端解決方案GenStudio,能為品牌方提供基於生成式AI的能力來加速內容構思、創作、製作和激活的一系列產品,具體流程包括,企業在數位資產管理系統Adobe Experience Manager Assets中,透過Express和Firefly對安全性用於商業用途的數位內容進行即時編輯。
為了讓企業的品牌識別更加突出,Adobe允許企業使用品牌自己的風格、角色和物件來客製化和微調Firefly,並且能將客製化的Firefly模型完全整合到企業的Creative Cloud工作流程中並自動化生產工作。
全球六大廣告和傳媒集團之一Havas宣布和Adobe擴大合作夥伴關係,將採用Adobe GenStudio。
結論:AI創造時代,老牌創意軟體巨頭商業路徑清晰
借助Firefly全面上市和多項工具更新的勢頭,Adobe已經展現出其重新定義創意工作流程的創新性。Adobe數位媒體業務總裁David Wadhwani談道:「自從三月發布我們的第一個Firefly圖像模型以來,我們對社群的驚人反應感到驚訝,他們展示了Firefly對於增強實驗和設計以及加快工作流程而不影響創意控制有多有用。”
當下,生成式AI正在重塑人們生成、編輯影像與影片的方式,一句話就能輕鬆為影像設定特定的景深、擴展背景,產生各式各樣想像力十足的影像,這都為老牌創意軟體巨頭敲響警鐘。Adobe透過一系列的更新再次強化了其在影像編輯領域的深度累積。相較於時下火熱的Midjourney、Stable Diffusion,Adobe更強調對於影像的二次編輯能力,並一步一步簡化使用者的使用流程。
Adobe執行長Shantanu Narayen在今年6月接受英國《金融時報》採訪時,他比較了當下生成式AI與先前的技術平台轉變,他預測,許多創投支持的AI公司如雨後春筍般湧現,但缺乏明顯的商業模式,最終將面臨洗牌。然而,在先前的平台轉型中,最終贏家出現前,市場將會長期保持不確定性。