Skip to content
WONGCW 網誌
  • 首頁
  • 論壇
  • 微博
  • 壁紙下載
  • 免費圖床
  • 視頻下載
  • 聊天室
  • SEO工具
  • 支援中心
  • 表格製作
  • More
    • 在線名片
    • 網頁搜索
    • 天氣預報
    • 二維碼生成器
    • WordPress 插件及主題下載
  • Search Icon

WONGCW 網誌

記錄生活經驗與點滴

微軟將數万顆芯片串聯成一台價格不菲的超級計算機用於OpenAI

微軟將數万顆芯片串聯成一台價格不菲的超級計算機用於OpenAI

2023-03-14 Comments 0 Comment

當微軟公司於2019年向OpenAI投資10億美元時,它同意為這家人工智能研究初創公司建造一台大規模的尖端超級計算機。唯一的問題是:微軟沒有像OpenAI所需要的設施,也不完全確定它能在其Azure雲服務中建造這麼大的東西而不至於導致整體崩潰。

1000x-1.jpg

OpenAI試圖訓練一套越來越大的被稱為模型的人工智能程序,這些程序正在吸收更多的數據,並學習越來越多的參數,即人工智能係統通過訓練和再訓練而發現的變量。這意味著OpenAI需要長期使用強大的雲計算服務。

為了應對這一挑戰,微軟不得不想方設法將數以萬計的英偉達的A100圖形芯片–訓練人工智能模型的主力–串聯起來,並改變其在機架上放置服務器的方式以防止斷電。負責雲計算和人工智能的微軟執行副總裁Scott Guthrie不願透露該項目的具體成本,但他說”可能會大於”幾億美元。

這項技術讓OpenAI發布了ChatGPT,這一具有強大語言天賦的聊天機器人在11月上市後幾天內就吸引了100多萬用戶,現在正被拉入其他公司的商業模式,從億萬富翁對沖基金創始人Ken Griffin經營的公司到食品配送服務Instacart Inc. 隨著ChatGPT等生成型人工智能工具獲得企業和消費者的興趣,微軟、亞馬遜公司和Alphabet公司旗下的Google等雲服務提供商將面臨更多壓力,以確保其數據中心能夠提供所需的巨大計算能力。

現在,微軟使用它為OpenAI建立的同一套資源來訓練和運行自己的大型人工智能模型,包括上個月推出的新的Bing搜索機器人。它還將該系統出售給其他客戶。這家軟件巨頭已經開始著手開發下一代人工智能超級計算機,這是微軟與OpenAI擴大交易的一部分,微軟在其中增加了100億美元的投資。

訓練一個大規模的人工智能模型需要像微軟組裝的人工智能超級計算機那樣,在一個地方有一個大型的連接圖形處理單元池。一旦一個模型投入使用,回答用戶提出的所有查詢–稱為推理–需要一個稍微不同的設置。微軟也部署了用於推理的圖形芯片,但這些處理器–數十萬個–在地理上分散在該公司60多個地區的數據中心中。現在,該公司正在為人工智能工作負載添加最新的NVIDIA圖形芯片–H100–和NVIDIA最新版本的Infiniband網絡技術,以更快地分享數據,微軟週一在一篇博文中說。

新的必應仍處於預覽階段,微軟正在逐步從等待名單中增加更多的用戶。微軟的AI團隊每天與大約二十幾名員工舉行會議,他們被稱為”維修人員”,因為他們是在比賽中調整賽車的機械師。該小組的工作是弄清楚如何快速上線更多的計算能力,以及解決出現的問題。

雲服務依賴於數以千計的不同部件和物品–服務器、管道、建築物的混凝土、不同的金屬和礦物等各個部分–任何一個部件的延遲或短缺,無論多麼微小,都會使一切都中斷。最近,維修人員不得不處理電纜托架的短缺問題–這種籃子一樣的裝置用來放置機器上的電纜。所以他們設計了一種新的電纜盤,微軟可以自己生產或找地方購買。他們還在研究如何在世界各地現有的數據中心中盡可能多地壓縮服務器,這樣他們就不必等待新的建築完工。

當OpenAI或微軟正在訓練一個大型的人工智能模型時,工作在一個時間段內發生,它被分到所有的GPU上,在某些時候,這些單元之間需要相互交談,以分享它們所做的工作。對於人工智能超級計算機,微軟必須確保處理所有芯片之間通信的網絡設備能夠處理這種負載,而且它必須開發軟件,使GPU和網絡設備得到最佳利用。該公司現在已經提出了一個軟件,可以讓它訓練具有幾十萬億個參數的模型。

因為所有的機器都是一次性啟動的,所以微軟必須考慮到它們的放置位置和電源的位置,否則你就會出現像在廚房裡同時打開微波爐、烤麵包機和吸塵器一樣的過載問題。

Azure全球基礎設施總監Alistair Speirs說,該公司還必須確保它能夠冷卻所有這些機器和芯片,在較涼爽的氣候下使用外部空氣,在炎熱的氣候下使用更高技術的冷卻裝置。

微軟將繼續研究定制的服務器和芯片設計以及優化其供應鏈的方法,以獲得任何速度上的提高、效率和成本上的節省。

分享此文:

  • 分享到 Twitter(在新視窗中開啟)
  • 按一下以分享至 Facebook(在新視窗中開啟)
  • 分享到 WhatsApp(在新視窗中開啟)
  • 按一下以分享到 Telegram(在新視窗中開啟)
  • 分享到 Pinterest(在新視窗中開啟)
  • 分享到 Reddit(在新視窗中開啟)
  • 按一下即可分享至 Skype(在新視窗中開啟)
  • 按一下即可以電子郵件傳送連結給朋友(在新視窗中開啟)
  • 點這裡列印(在新視窗中開啟)

相關


網絡資訊

Post navigation

PREVIOUS
DXO公佈iPhone 14前攝得分:144分全球排名第四
NEXT
高通第二項反壟斷上訴今日開庭欲推翻歐盟2.58億美元的罰款

發表迴響 取消回覆

這個網站採用 Akismet 服務減少垃圾留言。進一步了解 Akismet 如何處理網站訪客的留言資料。

More results...

Generic filters
Exact matches only
Search in title
Search in content
Search in excerpt
Filter by 分類
網站公告
Featured
限時免費
ESET NOD32
WINDOWS 10 &11 INSIDER PREVIEW
Windows 軟件下載
系統軟件
辦公軟件
圖像處理
影音媒體
網絡軟件
應用軟件
Mac 軟件下載
安卓軟件下載
網絡資訊
Mac資訊
Linux資訊
VPS資訊
NASA資訊
金融資訊
WhatsApp Stickers教學
WordPress資訊
WeChat資訊
PHP資訊
Plesk資訊
TensorFlow
教學資源
開源程序
網頁工具
SEO工具
醫療健康
旅遊及消閒
其他資訊
Content from
Content to
2023 年 3 月
一 二 三 四 五 六 日
 12345
6789101112
13141516171819
20212223242526
2728293031  
« 2 月    

分類

  • 網站公告
  • 限時免費
  • ESET NOD32
  • WINDOWS 10 &11 INSIDER PREVIEW
  • Windows 軟件下載
  • 系統軟件
  • 辦公軟件
  • 圖像處理
  • 影音媒體
  • 網絡軟件
  • 應用軟件
  • Mac 軟件下載
  • 安卓軟件下載
  • 網絡資訊
  • Mac資訊
  • Linux資訊
  • VPS資訊
  • NASA資訊
  • WhatsApp Stickers教學
  • WordPress資訊
  • WeChat資訊
  • PHP資訊
  • Plesk資訊
  • TensorFlow
  • 教學資源
  • 開源程序
  • 網頁工具
  • SEO工具
  • 醫療健康
  • 旅遊及消閒
  • 其他資訊

彙整

近期文章

  • 高盛:ChatGPT式的人工智能或影響3億員工使全球GDP增加7% 2023-03-28
  • 馬斯克再次呼籲巴菲特購買特斯拉股票高盛前首席投資官:這不可能 2023-03-28
  • 軟銀本月底終止服務“小靈通”將基本退出日本市場 2023-03-28
  • GPT-4老闆:AI可能會殺死人類已經出現我們無法解釋的推理能力 2023-03-28
  • 微軟政府事務團隊展開反擊: “索尼的反競爭策略值得討論” 2023-03-28
  • 中國首例取締日本向動畫盜版站日本用戶佔95%比例 2023-03-28
  • 馬斯克遭員工報復?推特源代碼據稱已“裸奔”好幾個月 2023-03-28
  • 網友拍到Tim Cook坐S65L到北京東四吃頂級日料 2023-03-28
  • 200多萬份文件都未找到證據谷歌要求法官駁回美司法部反壟斷訴訟 2023-03-28
  • 南極”末日冰川”的主冰流拓寬過程將加速冰的流失 2023-03-28

熱門文章與頁面︰

  • DP vs HDMI 誰才是遊戲玩家最佳選擇?
  • Explorer Patcher:讓Windows 11恢復Windows 10的行為特徵
  • 世界上有多少個國家
  • 打車叫到特斯拉不會開門很尷尬?官方介紹開關門方法
  • ESET NOD32 LICENSE KEY (UPDATED 2023-01-17)
  • NVIDIA H100 Hopper加速計算卡上市:配備80GB顯存價格超24萬元
  • Windows及OFFICE激活密鑰+電話激活教程–自用
  • 貝貝BiliBili – 在線一鍵下載B站視頻,可解析播放!
  • 網友發現《侏羅紀世界3》反派和蘋果CEO超像:基地也神似Apple Park
  • Autodesk AutoCAD 2021 正式版註冊版-簡體/繁體中文/英文版

投遞稿件

歡迎各界人士投遞稿件到admin@wongcw.com

請提供以下資料:

1.你的名字

2.你的電郵

3.分類目錄

4.文章標題

5.文章摘要

6.文章內容

7.文章來源

 

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

快帆

MALUS

極度掃描

DMCA.com Protection Status

WONGCW 網誌

  • 免責聲明
  • 捐助我們
  • ThemeNcode PDF Viewer
  • ThemeNcode PDF Viewer SC
  • Events

服務器提供

本站使用之服務器由ikoula提供。

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

© 2023   All Rights Reserved.