研究人員利用AI從文字生成3D頭像實現虛擬試衣和形狀編輯
近日,研究人員公佈了兩項利用人工智能從文字生成三維頭像的新研究成果,實現了虛擬試衣和頭像形狀編輯等應用。這些成果來自德國馬普所等機構的研究人員,發表在arXiv 上。
第一項研究提出了名為DELTA 的方法,可以創建具有獨立身體和衣服/頭髮層的三維頭像。研究人員使用不同的三維表示方法分別對身體和衣服/頭髮進行建模,從單眼RGB 視頻中即可創建頭像。這種分解方式實現了虛擬試衣和形狀編輯等應用,衣服和頭髮可以在不同體型之間輕鬆轉換。
第二項研究利用穩定擴散和DELTA 混合三維表示,提出了名為TECA 的文字到頭像方法。該方法可僅從文字描述生成高質量頭像,並實現強大的屬性編輯。系統首先用穩定擴散生成面部圖像作為參考,然後依次添加頭髮、衣服等要素。研究人員表示,該方法生成的合成頭像質量顯著提高,屬性轉移實現了強大的編輯能力。
這兩項研究為數字人生成提供了新的思路。利用人工智能算法解構數字人不同組成部分,不僅能創造逼真的三維虛擬形象,還支持線上虛擬試裝等應用,對時裝電商、社交平台和元宇宙都將產生深遠影響。