韓國人工智能公司創造出AI流行音樂女團不僅出單曲還能拍電視劇
最近,韓國人工智能公司Pulse9推出了一個完全由AI打造的韓國流行音樂女團,Eternity。Pulse9 通過該公司研發的“Deep Real”技術打造了11位AI女團成員,並發布了單曲MV“I’m Real”。該單曲在YouTube上的播放量達到67萬。
Deep Real是指將AI設計的人物圖像與數據庫裡的人類面部特徵相結合,生成全新的虛擬人物圖像。與Deepfake不同,它並不會與現實生活中人們的臉部圖像進行合成。虛擬人物市場正在興起,這些虛擬人物市場的背後,正是一代代技術的更迭。
一、首個全員AI女團,AI偶像即將進軍影視業
2020年12月,Pulse 9發起了一個“令人激動人心的AI(AI heart-throb challenge)”的社交活動。人們在虛擬人物理想型測試中,從101位虛擬人物中選出最讓人心動的11位AI成員並組成AI女團。像國內的選秀節目《創造101》一樣,Pulse9打造了一個AI世界的“選秀女團”。
Pulse 9成立於2017年,是一家人工智能技術開發公司。最初,Pulse 9專注於開展AI畫家的業務,但AI畫家業務受疫情影響難以展開。此後,他們將AI圖像生成的業務從繪畫、產品定制等擴展到娛樂業務。2021年4月,他們推出了Eternity女團,團名Eternity(永恆)含有“成為與大眾永遠在一起的最佳虛擬偶像”的意思,每位AI角色都有獨特的設定。
此外,2020年12月,Pulse 9還與泰國Good Drama公司簽約了《AI偶像進軍泰國及進軍電視劇產業的諒解備忘錄》,希望打開AI偶像的泰國市場和AI偶像影視業業務。
泰國Good Drama公司計劃投資7.4億韓元(約為420萬人民幣)製作一部名為“我親愛的AI(My Dear AI)”的電視劇。這部電視劇主要講述男主角AI偶像與人類女性之間的愛情故事,Pulse 9負責製作AI男偶像。
“在韓國,虛擬偶像與人類交談和互動的時代正在開啟”,Pulse 9的CEO Park Ji-eun表示,而她作為創造者,將會賦予AI偶像更具幻想和更具創造性的特點。
同時她還表示,與真人偶像不同,AI偶像可以自由表達自己的觀點。因為人們對AI偶像更具包容性,而AI偶像對人們的惡意評論和批評承受度也更強。
值得一提的是,Pulse 9製作的所有AI偶像都是虛擬人物,在現實世界中難以找到相同的樣貌,在一定程度上避開了肖像權糾紛。
二、與“Deepfake”不同,Deep Real打造的“臉”查無此人
Pulse 9通過該公司自主研發的Deep Real技術打造了11位AI女團成員。
Deep Real技術可以通過人工智能創建虛擬人、物體、室內空間、生物以及虛擬自然環境等。現有的虛擬偶像多數是動畫師長時間人工設計,逐幀創建圖像,打造AI視頻。但Deep Real技術擺脫了現有虛擬角色創作的面部設計和動作等限製作時間長,運營成本高等困境,使用AI模型來生成虛擬人物。Pulse 9公司報導,他們通過Deep Real技術可調整虛擬偶像的眼神、面部表情、嘴角等各處細節,使其與真人的外貌、表情都達到高度相似。
Pulse 9先通過AI技術創建了新的虛擬人物圖像,然後他們通過AI模型將虛擬人物圖像與數據庫裡的參考人物圖像的面部特徵進行合成,得到了一個全新的虛擬人物圖像。由AI設計的虛擬人物圖像與真實世界的人不會重合。
Pulse 9 強調,Deep Real不同於現有的Deepfake,因為它以合理的成本創造了逼真的虛擬人物,而不是通過合成真人臉部。他們認為,Deep Real技術的操作過程會更加複雜。
Deepfake是指一類深度造假的換臉技術,將A的臉換到B身上。通過人臉互換,它可以讓A做出來自己從沒有做過的動作,說過一些沒說過的話,造成以假亂真的效果。
Deepfake以深度學習技術為基礎。通過上傳被替換的“原圖”和合成後的“假圖”到生成對抗性網絡(GAN)模型中,當圖像的逼真度足夠高時,該圖像就會被輸出。然後,AI模型再通過提取視頻關鍵幀,人臉對齊等技術,讓人臉完美“融合”到原視頻。這類視頻仿真度高、欺騙性強,肉眼一般難以識別真偽。
2017 年底,一位名為“Deepfake”的Reddit用戶,將神奇女俠女主角的臉成功替換到其他電影上,這個“逼真”的視頻轟動一時。
隨後,有關人士將Deepfake的開源代碼發佈在Github上,其較低的技術門檻讓非專業人士也能快速掌握Deepfake。
2019年8月31日,國內軟件ZAO憑藉著“僅需一張照片,出演天下好戲”口號迅速在網絡走紅,短短三天后佔據了蘋果應用商店免費排行榜的第一名。但由於其用戶條款違法、非法收集用戶生物信息、侵權等問題,ZAO於9月3日迅速下架。
Deepfake的出現,儘管會在聲音合成、視影音領域的修復上有所幫助,但具有較大的安全隱患。一段子虛烏有的視頻不但會讓有關人士名譽權受損,而且還會引起市場動盪,甚至威脅國家安全。
2019年11月,我國發布了《網絡音視頻信息服務管理規定》,該規定明確指出:網絡音視頻信息服務提供者應當部署違法違規音視頻以及非真實音視頻鑑別的相關技術方案。
同時,全球各地也都開始了抵制Deepfake的“戰鬥”。
2019年9月,Facebook宣布了全球Deepfake檢測挑戰賽,旨在號召研究人員尋找“打假”的有效方法,提升鑑別假視頻的技術,維護和諧的網絡環境。
隨後,Google AI 開源Deepfake 視頻檢測數據集,希望能幫助研究者找到更好的鑑別假視頻的方法。
美國加州隨後也頒布相關條令,禁止發布、傳播Deepfake類視頻;禁止在大選期間,使用競選者圖像製造Deepfake類的假視頻。
儘管各方動作不斷,但事實上,由Deepfake製造的假視頻仍在各平台屢禁不止,給人們帶來困擾。
與Deepfake的戰鬥,還一直在繼續。
三、虛擬人物迭代3.0, 市場總額高達2000億元
據愛奇藝發布了《2019虛擬偶像觀察報告》顯示,中國二次元用戶規模達到4.9億,有3.9億人走在關注虛擬偶像的路上,2020年中國虛擬偶像市場總產量達到2000億元。
最早的虛擬人物通過歌唱軟件與機器人系統疊加形成能“唱歌的機器人”,從而衍生出電子音樂、鬼畜文化等多元文化。
隨後,2.0虛擬偶像文化全面爆發,洛天依、初音未來等通過合成軟件聲源和擬人化形象的虛擬偶像在二次元形成“現象級”出圈,開始以虛擬偶像的身份參與各類商業活動。虛擬人物行業初具規模。
▲來源於B站2020初音未來:未來有你線上AR演唱會
目前,虛擬偶像迎來3.0時代,通過人物3D建模、AI合成技術,虛擬偶像們脫離之前的動漫人物、軟萌的卡通類的外表,逐漸像一個真正的“人”,Eternity正是如此。
此外,虛擬人物在其他領域也具有各展身手。
今年兩會期間,央視網的數字虛擬小編小C在兩會節目中作為記者,與梁倩娟、馬慧娟等全國人大代表進行獨家對話。
▲圖為虛擬小編“小C”,來源百度AI
虛擬小編的背後是百度智能雲為其提供技術支持,百度智能雲將數字人技術與雲計算技術相結合,支持“小C”在AI驅動和人工監管雙重模式,希望給數字人賦予“人類溫度”。同時,百度利用其強大的數據庫作為支撐,第一次使用了4D掃描技術來進行高精度面部數據採集,並運用AI技術定進行了反复的迭代調優,讓“小C”能夠更加活靈活現地與人交流。
三星在2020年也推出了虛擬人項目。該團隊通過Core R3技術,創造了Neon。項目負責人普脈·米斯特里(Pranav Mistry)發推文說,Core R3技術“現在可以自主創建新的表情,新的動作,新的對話,與原始數據完全不同。”
而其中最具特色的虛擬人物,莫過於6月1日在智源大會出現的中國首位原創虛擬學生“華智冰”。
“華智冰”是智源“悟道2.0”模型、小冰AI完全框架、智譜AI數據與知識雙驅動的AI框架三方聯手打造的虛擬人物。“她”拜清華⼤學教授唐杰為師,進入清華實驗室學習。具有思考和回答複雜問題的能力,能將新知識融合到自己的模型中去,從而不斷地提升自己的學習能力,建立自己的知識庫。
與多數主打外貌的虛擬偶像不同,“華智冰”作為虛擬學生,更重視虛擬人物的“內在”,注重AI的學習能力和可成長性。(內在美更重要!)
▲圖為“華智冰”,中國首位虛擬學生,來自B站“清華大學”賬號
儘管人們對虛擬數字人技術一直抱有較高的期待,但目前的虛擬數字人仍有一定的不足之處。
目前,虛擬人物產業投入成本高,收入低,並且在技術、內容等問題上都不夠成熟,目前大多數公司對虛擬人物投入,都難以盈利。
虛擬人物的時代還尚未完全到來。
結語:通過虛擬人物看“元宇宙”,虛擬和現實如何“和諧”相融
虛擬偶像、虛擬主播、虛擬數字人隨著科技的進步逐一呈現在我們面前。如今,虛擬世界已經擁有了虛擬人物的“入駐”。“元宇宙”世界似乎通過這些虛擬人物構建了一個基本框架,向我們展開了一個全新的世界。
隨著AI和VR技術的不斷提升,真與假之間界限已經逐漸模糊。許多軟件都非常希望收集各類人體生物數據,但卻難以保證用戶隱私安全。Deepfake的出現正是一個“警鐘”——無論是怎樣的世界,秩序安全都是必不可少的。
如果像Deepfake這般的深度偽造技術,人們都難以尋找到有效的方法解決。那麼,虛擬世界與現實世界的快速相融則會帶來更多的困境,讓人們逐漸失去對現實世界的信任感,從而進一步加劇社會孤獨。
如何在現有體系里平衡虛擬人物和真實人物的關係,把握好現實和虛擬的界限,我們還有待探尋。
編譯| 徐珊
編輯| 雲鵬