FB的Habitat生成逼真的虛擬住宅教AI agents用於真實世界的導航技能
據外媒Techspot報導,無論你喜歡與否,機器人正變得越來越普遍,未來它們可能成為家庭中的標準裝置-至少Facebook正在押注這些裝置。這家社交媒體巨頭的人工智能研究部正在使用人工智能Habitat創造逼真的虛擬住宅,用於為家庭設計的機器人。
Facebook研究人員於4月份與康奈爾大學合作發表了一篇論文。Facebook AI團隊發博文對這項研究進行解釋。
“在將學到的技能轉化為現實之前,AI Habitat可以在高度逼真和高效的3D模擬器中訓練體現AI agents(虛擬機器人)。這使得從基於靜態數據集(例如,ImageNet,COCO, VQA)的“互聯網AI”到AI agents的範式轉變,其中AI agents在現實環境中行動,帶來積極的感知、長期規劃,從交互中學習,以及基於環境“進行對話”。
使用機器學習訓練機器人在物理住宅中導航和執行任務可能需要數年時間。然而,正如我們已經看到的OpenAI等其他人工智能係統,能通過快速運行模擬,可以在幾天內獲得數百年的經驗。Habitat本身不是一個模擬世界。相反,它是一種可以託管虛擬環境的平台。根據研究人員的說法,Habitat已經與幾個3D數據集兼容,包括MatterPort3D,Gibson和SUNCG。它經過優化,因此其他研究人員可以比現實世界快數百倍地運行模擬世界。
為了使環境更加真實,Facebook為Habitat創建了一個名為“Replica”的數據庫。它是一組逼真房間的照片,使用實際住宅的攝影和深度貼圖創建。從起居室到浴室的所有東西都被重新創建為3D模塊,可以組合成任意數量的配置,每個配置都有適當的家具。
所有對像都在語義上標記,因此AI可以知道某些內容是“在…之上”,“旁邊”或是“藍色”等。每個語義都有自己的顏色,結果看起來像AI上面的圖片。這使得其能夠遵循複雜的命令,例如“去臥室並告訴我梳妝台上的盒子是什麼顏色的”。研究人員發布了一個視頻,展示了經過培訓的AI agents可以完成的事情。