微軟、OpenAI又搞大動作:斥資1000億美元開發AI超算“星際之門”
根據Information 消息,微軟和OpenAI 正在計劃一個資料中心項目,該項目將包含一個擁有數百萬專用伺服器晶片的超級計算機,以支援OpenAI 的人工智慧技術。另外,專案成本可能高達1000 億美元,包括一個名為Stargate (「星際之門」)的人工智慧超級計算機,預計將於2028 年啟動。微軟很可能負責資助這個計畫。
不過該項目尚未獲得正式批准,未來或許還有變化。一位知情人士表示,微軟是否願意繼續實施Stargate 計劃,在某種程度上取決於OpenAI 提升其人工智慧能力的有效性。因為OpenAI 去年未能交付其向微軟承諾的新模型。然而,OpenAI 執行長Sam Altman 公開表示,阻礙更好人工智慧發展的主要瓶頸是缺乏足夠的伺服器。如果Stargate 計劃得以實施,它將產生的運算能力將比微軟目前從鳳凰城等地的資料中心提供給OpenAI 的運算能力大幾個數量級。據這些人士稱,擬議中的超級電腦還將至少需要幾吉瓦的電力—— 相當於至少運行幾個大型數據中心今天所需的電力,項目的大部分成本將用於採購晶片。Stargate 最早在2028 年啟動,2030 年完成擴展,最後階段可能需要多達5 吉瓦的電力。這不禁讓我們想起了前段時間網路上一直盛傳的Altman 籌集7 兆美元造晶片廠的事(Altman 對此否認過),不過本著看熱鬧不嫌事大的網友調侃道「Sama 不知怎麼說服了微軟再花1000 億美元,不過,他仍需要6.9 兆美元。”Altman 和微軟將這些超級電腦視為五個階段完成,其中第五階段為Stargate。據兩位知情人士透露,微軟正在為OpenAI 開發一款規模更小的第四階段超級計算機,計劃在2026 年左右推出。現在,微軟和OpenAI 正處於第三階段的中期。
第四、第五階段需要採購大量的AI 晶片,成本約佔目前正在建造的資料中心初始總成本的一半左右。總而言之,擬議的項目可能花費超過1,150 億美元,是微軟去年在伺服器和其他設備上支出的三倍多。微軟發言人Frank Shaw 並未對超級電腦專案發表評論,但在一份聲明中表示:我們始終在規劃下一代基礎設施創新,這些創新是繼續推動人工智慧能力前沿所必需的。 OpenAI 的發言人對此並沒有發表評論。Altman 曾私下表示,作為OpenAI 的最大競爭對手之一,Google在短期內將擁有比OpenAI 更多的運算能力,並且他公開抱怨AI 伺服器晶片沒有達到他的預期。根據參與討論的人士表示,Stargate 旨在讓微軟和OpenAI 可以選擇使用Advanced Micro Devices 等英偉達以外公司生產的GPU,甚至是微軟最近推出的一款人工智慧伺服器晶片。除了算力,微軟還必須克服技術挑戰。例如,目前提出的設計要求在單一機架上放置比微軟習慣的更多的GPU,以提高晶片的效率和效能。由於GPU 的密度更高,微軟還需要想出一個防止晶片過熱的方法。OpenAI 總裁Greg Brockman(左)和微軟技術長Kevin Scott。對於上述種種問題,微軟和OpenAI 仍在敲定幾個關鍵細節,可能不會很快有結論。對於OpenAI 來說,證明其下一代大語言模型(LLM)比今天最先進的GPT-4 有顯著優勢至關重要。 OpenAI 一年前發布了GPT-4,同時,Google也發布了一個類似的模型試圖趕上。據一位了解此過程的人士說,OpenAI 計劃在明年初之前發布其下一代LLM 的重大升級。在此之前,OpenAI 可能會發布更多LLM 的漸進式改進。隨著更多伺服器的可用,OpenAI 可以利用其現有的AI 和最近的技術突破如Q*,以在用盡人類生成的資料後訓練更好的模型。這些模型也可能會發現像GPT-4 這樣的現有模型的缺陷,並建議技術改進—— 換句話說,實現自我改進的AI 或許快來了。