DeepMind明年搬11層新總部盤點這家頂尖AI科研機構的高光時刻
DeepMind,這家全球數一數二的頂尖AI 研發機構,即將在2020 年搬到新的總部大樓——這棟樓將配有一個雙螺旋樓梯直通圖書館、一個屋頂花園、一個演講廳以及一組由數據與AI 相關藝術組成的大廳藝術品。不出意外,明年上半年便能投入使用。
Deepmind目前的總部位於倫敦國王十字區(London’s Kings Cross)新址附近的谷歌大樓,此外在巴黎、艾伯塔省、蒙特利爾以及加利福尼亞州的山景城均設有小型辦事處。一旦11 層高的DeepMind 新總部建成(倫敦谷歌大樓也是11 層高),將進一步提升倫敦國王十字區的聲譽,成為倫敦所謂的“知識片區”——在這之前,谷歌、Facebook 和三星分別拿下了周邊的辦公位置。
“我希望新的總部有助於團隊蓄能、提高思考以及合作能力,這些恰恰是開拓科學研究不可或缺的養分。”DeepMind 創始人兼CEO Demis Hassabis 如此說道。他補充,建立新總部的想法其實從2015 年就開始有了,目的是為了創造有助於前沿研究、激發協同工作潛能的環境。
至於為何堅持留在倫敦?DeepMind 顯然有自己的考量。
目前了解到的是,儘管英國的經濟普遍放緩,然而科技界卻依然蓬勃發展——據倫敦國際推廣機構London & Partners 和PitchBook 的數據顯示,英國的人工智能公司在2018 年獲得的投資高達7.36億英鎊,比起2017 年的4.99 億英鎊,增幅將近47%。“倫敦是歐洲的人工智能之都,其資本規模是周邊競爭對手巴黎和柏林的兩倍多。” London & Partners 首席執行官 Laura Citron 如此說道。
更重要的是,DeepMind 是一個典型“倫敦成功故事”,這個世界領先的人工智能團隊利用倫敦的資源創造瞭如今的成就。據了解,被谷歌收購那會,DeepMind 曾面臨是否遷往矽谷的壓力,後來創始人成功說服谷歌,表示DeepMind 留在倫敦的話將有機會吸納來自倫敦周邊的高水平人才(如牛津大學、劍橋大學等),最終才被同意繼續留守倫敦。
雖然紮根在倫敦, DeepMind 卻未因而固步自封,而是頻繁走出海外, 與更多優秀人才一起推進AI 前沿研究的發展。
DeepMind 近年的海外佈局
DeepMind 的海外辦事處最早可追溯至2016 年,自2014 年被谷歌以4億英鎊收購以來,DeepMind 與穀歌總部之間一直缺少一個聯繫紐帶,最終決定在美國山景城成立一個由十幾名軟件工程師與研究科學家組成(2016年底數據)的工作點,以加強和谷歌總部之間的聯繫。
而DeepMind 對外大張旗鼓公開宣傳的,都是與一些海外大學共同成立的實驗室/辦事處,其中加拿大佔了2 所,巴黎1 所:
2017 年7 月,DeepMind 宣布與阿爾伯塔大學聯手,在加拿大埃德蒙頓建立國際化的AI 研究實驗室。加盟實驗室的成員包括來自阿爾伯塔大學的多名計算科學教授與人工智能研究員,如Rich Sutton、Michael Bowling,、Patrick Pilarski等,此外尚有Adam White 以及2017 年初發布DeepStack 算法的6 名研究員。據介紹,DeepMind Alberta 實驗室將主要進行核心科學(core scientific)方面的研究。DeepMind Alberta 實驗室的首席研究員Richard Sutton 教授被認為是現代計算的強化學習創立者之一。
2017 年10月,即埃德蒙頓實驗室成立3 個月後,DeepMind 又宣布與麥吉爾大學合作,在蒙特利爾設立 DeepMind Montreal。負責領導 DeepMind Montreal 的是麥吉爾大學的計算機科學系副教授 Doina Precup ——她同時還是加拿大高級研究院高級研究員以及MILA 成員,擅長領域在強化學習,這正好也是DeepMind 的專長之一。
2018 年8 月,DeepMind 通過推特和官方博客宣佈在法國巴黎設立一個新的人工智能實驗室。負責領導該實驗室的是 DeepMind 的主要研究科學家、前巴黎理工大學教授的 Remi Munos 。DeepMind 的巴黎實驗室將重點關注基礎AI 研究,同時在Remi 之前的科研成果之上繼續發展,其中包括能夠讓單個AI 系統學會執行多種不同任務的先進方法以及類似分佈式機器學習的基礎算法突破。
值得一提的是,加盟DeepMind實驗室的成員一般都將保留自身在原來大學/組織的教職,同時DeepMind 也將委派制定成員前往協助組織的協調& 管理事宜。此外,DeepMind 也會拿出真金白銀,投入到合作院校的具體AI 研究項目中,可說是相當豪氣。
DeepMind 那些叫人驚豔的出品
AlphaGo
DeepMind 一鳴驚人之作。2016 年, AlphaGo 在古老的圍棋比賽中以4:1 的高分擊敗了世界大師級冠軍李世石,從此一炮而紅,並且二度登上《Nature》雜誌封面。許多專家認為,人類至少提前十年實現了這一壯舉。對於 DeepMind 以及世界圍棋界而言,最激動人心的是AlphaGo 在博弈過程中所表現出來的創造力,甚至有時候它的招數對古老的圍棋智慧都造成了挑戰。要知道,一直以來圍棋都被認為是最需要人類深思熟慮的遊戲之一, AlphaGO 的勝利彰顯了人工智能的巨大可能性。此外,DeepMind 表示 2017 年也將帶來更多機器參與人類游戲的研究。
可微分計算機DNC
2016 年,DeepMind 在存儲(memory)領域也取得了不小的進步,尤其是在解決如何將神經網絡的智能決策和復雜結構化數據的存儲、推理能力結合起來的難題。實驗室團隊提出了可微分神經計算機的神經網絡模型(Differentiable Neural Computer,簡稱DNC)。這種新型模型將神經網絡與可讀寫的外部存儲器結合,既能像神經網絡那樣通過試錯和样本訓練進行深度學習,又能像傳統計算機一樣處理數據。目前,這些模型已經學會回答有關數據結構(從家譜到地鐵交通地圖)的問題。DeepMind 表示,這讓人類距離使用人工智能在復雜數據組中進行科學發現又近了一步。
WaveNet
研發團隊在發表了圖像生成 PixelCNN 論文之後,又發布了最新原始音頻波形深度生成模型音頻 WaveNet 的研究論文。WaveNets 是一種卷積神經網絡,能夠模擬任意一種人類聲音,生成的語音聽起來比現存的最優文本(語音系統)更為自然,將模擬生成的語音與人類聲音之間的差異降低了50 % 以上。這種深度生成模型能夠模仿人類的聲音,生成的原始音頻質量優於目前Google 採用的兩種最優文本——語音模型Parameric TTS 與Concatenative TTS 。由於 WaveNet 不是將錄下的語音樣本拼接起來,而是創造出的新的音頻波形,所以它很有可能會實現世界上最動聽的語音合成。
目前,DeepMind 正計劃將這一成果融入谷歌產品中,藉此提升數百萬用戶的產品體驗。
AlphaStar
AlphaStar 是一個把遊戲看作長序列建模學習任務的強化學習智能體,它的模型設計也就以長序列建模為能力為核心。模型從遊戲接口接收的數據是單位列表和這些單位的屬性,經過神經網絡計算後輸出在遊戲中執行的指令。這個神經網絡的基礎是 Transformer 網絡,並且結合了一個深度 LSTM 網絡核心、一個帶有指針網絡的自動回歸策略頭,以及一個中心化的評分基準。這樣的網絡架構是DeepMind 對複雜序列建模任務的最新思考結果,他們也相信這樣的先進模型可以在其他需要長序列建模、有很大行動空間的機器學習任務(比如機器翻譯、語言建模和視覺表示)中同樣發揮出優秀的表現。
AlphaStar 使用神族(Protoss),在2018 年12 月10 日以5:0 戰績打敗了Team Liquid 的職業星際2 選手TLO,然後經過更多訓練後,在12 月19 日再次以5:0 的完胜戰績打敗了來自同一個戰隊的職業選手MaNa 。
AlphaFold
蛋白質的3D形態取決於它所含氨基酸的數量和類型。蛋白質的結構也決定了它在機體中的作用。生命體的功能基本是由正確折疊的蛋白質來執行的。蛋白質的錯誤折疊不僅會使其失去原有生物學功能,也會引起一系列重大疾病,如阿爾茨海默病、帕金森病等神經退行性疾病。了解蛋白質的3D結構可以為人類理解這些疾病提供重要的基礎,進而幫助科學家設計出新的蛋白質來對抗疾病。
為了構建AlphaFold,DeepMind在數千種已知蛋白質上訓練了一個神經網絡,直到它可以通過氨基酸預測蛋白質3D結構。鑑於要預測新的蛋白質,AlphaFold使用神經網絡預測氨基酸對之間的距離,以及連接它們的化學鍵之間的角度。然後,AlphaFold調整初步結構以找到能效最高排列方式。此外,DeepMind 還訓練了另一個獨立的神經網絡,該網絡能利用集群中的所有距離來估計預測結構與實際結構間的差距。DeepMind將AlphaFold提交到了國際蛋白質結構預測競賽(CASP),第一輪比賽於98名參賽者中排名第一,從43個蛋白質中預測了25個蛋白質的精確結構。
DeepMind 的未來?
根據公開年報顯示,DeepMind 在2017 年的稅前虧損金額高達 3.68 億美元,在2016 年,這個金額則是1.64 億美元。可以明確的是,錢大部分都貢獻給了旗下員工,其中DeepMind 在2017 年的員工成本開支高達2.6 億美元,與2016 年的1.36 億美元相比,增幅高達91 %。此外,正如上文提及的,DeepMind 還會把錢投入到院校的具體AI 研究項目當中,這個金額在2017 年高達1067萬美元,而2016 年時這個金額卻只有40.8萬美元(與2017 年DeepMind 在加拿大開設了2 個合作實驗室有一定關係)。
由於AI 研究通常比較前沿,很難迅速為實驗室帶來創收,此外還得為了科研成果不停“燒錢”,因此過去不停有人揣測DeepMind 與穀歌之間的關係。比如 Facebook 首席AI 科學家Yann LeCun 就曾經公開質疑其過於“孤立”,同時一直未能向谷歌證明其價值。
不過隨著11 層新總部大樓的官宣,從側面表明谷歌依然願意為 DeepMind 的價值買單,兩者的微妙關係估計並未向惡發展。而作為AI 界的一員,我們也期待搬了新大樓的DeepMind,能夠繼續為我們帶來更多突破性的研究成果。
最後,為大家附上 DeepMind 創始人的介紹。
DeepMind 創始人 Demis Hassabis 簡介
出生於1976年7月27日,是著名人工智能實驗室DeepMind 的聯合創始人,被全球公認為是該領域最聰明的思想家之一,《衛報》也授予其“人工智能超級英雄”的稱號。
Hassabis從4歲就開始學下國際象棋,並很快成為了當地小有名氣的天才棋手。17歲時,Hassabis負責了經典模擬遊戲《主題公園》的開發,這款遊戲一經發布就大受歡迎,除了取得數百萬套銷量的好成績之外,這款遊戲還贏得了當年的金控制桿獎(Golden Joystick Awards)。受到這款遊戲的影響,以全校第一的成績從劍橋大學計算機學院畢業後,Hassabis開始自己創業做遊戲開發,並且取得了成功。30歲的Hassabis又回到倫敦大學,開始攻讀認知神經學的博士學位,真正研究人腦解決問題的工作機制。2010年,成功拿到博士學位後的Hassabis和友人一起創辦了DeepMind公司,開始從事人工智能相關算法的研究,並於2014年被谷歌以6.5億美金的價格收購。