65歲日本藝術家用Luma「復活」已故11年的妻子
一位65歲的日本藝術家在社群平台上,發布了一個用Luma的Dream Machine製作的影片。影片中,他將自己已逝去11年的妻子,在影片中重新復刻,把冰冷的照片變成了鮮活的影像。影片一經發布,這些溫情瞬間觸動了無數網友的心弦,不少網友在留言區留言,表示感動到熱淚盈眶。
圖片來源:X
Koya Matsuo(松尾公也)是一位65歲的日本AI藝術家、IT編輯和音樂人,為了紀念他逝去了11年的妻子小鳥醬(Tori-chan),他用Luma的AI視頻Dream Machine製作了一段視頻,並發佈在了社交媒體上。
圖片來源:X
這段影片引發了許多網友的關注,播放量超過了40萬次,不少網友稱,「這簡直就像是《哈利波特》裡的魔法」。影片內容如下:
圖片來源:X
有網友在這段影片下留言,表示AI技術的進步在這些地方得以體現,不禁讓人淚目。
圖片來源:X
據外媒報道,2013年6月25日,松尾公也的妻子小鳥醬因乳癌不幸過世。此後,松尾公也陷入對妻子的巨大思念中。
每當AI影片和音樂生成工具面世,65歲的松尾就開始瘋狂學習,想法設法用它們「復活」妻子。
這次Dream Machine爆火,松尾公也在第一時間試用。
圖片來源:Technoedge
他在發表於TECHNOEDGE的文章裡表示:「我使用它的目的並不是為了電影等影片製作,而是用於靜態影像,尤其是讓人物動起來。更具體地說,是為了看到11年前去世的妻子的動態身影。
松尾公也用1978至1987年間拍攝的膠片照片,透過Remini技術進行高清化處理,再利用Luma Dream Machine轉換成視頻,實現了讓妻子在視頻中「復活」的願望。
圖片來源:X
據他本人介紹,他把妻子高中時的一張照片(拍攝於1978 年)上傳到Dream Machine,然後輸入提示詞:“a girl is talking with her friend on a moving train(在移動的火車上,一個女孩正在與她朋友交談)”,從而生成視頻。
照片中的人隨著火車的震動而搖晃,窗外的陰影變化也被反映出來了。
圖片來源:X
他還找出妻子的數張照片,先用SD產生影像,然後使用Dream Machine將這些靜態畫面轉化為動態影片。
在嘗試過程中,松尾公也發現,如果動作太大,例如回頭或站起來,影片中的臉部往往會與本人不符。他推測這可能是因為AI的訓練資料偏向歐美人。為了解決這個問題,他嘗試使用“… is looking at me(某某正在看著我)”或“… is staring at the viewer(某某正凝視著觀眾)”等提示詞,成功生成了視線始終朝向他的影片。
這是1985年他們在筑波博覽會拍攝的照片。
圖片來源:X
松尾給的提示詞是:“a girl is looking at me(一個女孩正在看著我)”,然後,Dream Machine生成了讓他每看一次都會心動的視頻。
圖片來源:X
為了讓作品更完整,他把妻子保留下來的聲音進行取樣,並利用Suno的Voiceflex功能作詞作曲,最後為妻子產生一條音樂MV:《Can Dream Machine Dream? 》,完成了一次跨越時空的音樂與影像的融合。
圖片來源:X
有網友表示:“AI沒有溫度,但用AI的人有。”