Skip to content
WONGCW 網誌
  • 首頁
  • 論壇
  • 微博
  • 壁紙下載
  • 免費圖床
  • 視頻下載
  • 聊天室
  • SEO工具
  • 支援中心
  • 表格製作
  • More
    • 在線名片
    • 網頁搜索
    • 天氣預報
    • 二維碼生成器
  • Search Icon

WONGCW 網誌

記錄生活經驗與點滴

繞過CPU:英偉達與IBM致力推動GPU直連SSD以大幅提升性能

繞過CPU:英偉達與IBM致力推動GPU直連SSD以大幅提升性能

2022-03-17 Comments 0 Comment

通過與幾所大學的合作,英偉達和IBM 打造了一套新架構,致力於為GPU 加速應用程序,提供對大量數據存儲的快速“細粒度訪問”。所謂的“大加速器內存”(Big Accelerator Memory)旨在擴展GPU 顯存容量、有效提升存儲訪問帶寬,同時為GPU 線程提供高級抽象層,以便輕鬆按需、細粒度地訪問擴展內存層次中的海量數據結構。

1.jpg

以CPU 為中心的傳統模型示例

顯然,這項技術將使人工智能、分析和機器學習訓練等領域更加受益。而作為BaM 團隊中的重量級選手,英偉達將為創新項目傾注自身的廣泛資源。

比如允許NVIDIA GPU 直接獲取數據,而無需依賴於CPU 來執行虛擬地址轉換、基於頁面的按需數據加載、以及其它針對內存和外存的大量數據管理工作。

對於普通用戶來說,我們只需看到BaM 的兩大優勢。其一是基於軟件管理的GPU 緩存,數據存儲和顯卡之間的信息傳輸分配工作,都將交給GPU 核心上的線程來管理。

通過使用RDMA、PCI Express 接口、以及自定義的Linux 內核驅動程序,BaM 可允許GPU 直接打通SSD數據讀寫。

2.jpg

BaM 模型示例

其次,通過打通NVMe SSD 的數據通信請求,BaM 只會在特定數據不在軟件管理的緩存區域時,才讓GPU 線程做好參考執行驅動程序命令的準備。

基於此,在圖形處理器上運行繁重工作負載的算法,將能夠通過針對特定數據的訪問例程優化,從而實現針對重要信息的高效訪問。

顯然,以CPU 為中心的策略,會導致過多的CPU-GPU 同步開銷(以及I/O 流量放大),從而拖累了具有細粒度的數據相關訪問模式—— 比如圖形與數據分析、推薦系統和圖形神經網絡等新興應用程序的存儲網絡帶寬效率。

為此,研究人員在BaM 模型的GPU 內存中,提供了一個基於高並發NVMe 的提交/ 完成隊列的用戶級庫,使得未從軟件緩存中丟失的GPU 線程,能夠以高吞吐量的方式來高效訪問存儲。

3.jpg

BaM 設計的邏輯視圖

更棒的是,該方案在每次存儲訪問時的軟件開銷都極低,並且支持高度並發的線程。而在基於BaM 設計+ 標準GPU + NVMe SSD 的Linux 原型測試平台上開展的相關實驗,也交出了相當喜人的成績。

作为当前基于 CPU 统管一切事务的传统解决方案的一个可行替代,研究表明存储访问可同时工作、消除了同步限制,并且 I/O 带宽效率的显著提升,也让应用程序的性能不可同日而语。

此外NVIDIA 首席科學家、曾帶領斯坦福大學計算機科學系的Bill Dally 指出:得益於軟件緩存,BaM 不依賴於虛擬內存地址轉換,因而天生就免疫於TLB 未命中等序列化事件。

最後,三方將開源BaM 設計的新細節,以期更多企業能夠投入到軟硬件的優化、並自行創建類似的設計。有趣的是,將閃存放在GPU 一旁的AMD Radeon 固態顯卡,也運用了類似的功能設計理念。

分享此文:

  • 按一下即可分享至 X(在新視窗中開啟) X
  • 按一下以分享至 Facebook(在新視窗中開啟) Facebook
  • 分享到 WhatsApp(在新視窗中開啟) WhatsApp
  • 按一下以分享到 Telegram(在新視窗中開啟) Telegram
  • 分享到 Pinterest(在新視窗中開啟) Pinterest
  • 分享到 Reddit(在新視窗中開啟) Reddit
  • 按一下即可以電子郵件傳送連結給朋友(在新視窗中開啟) 電子郵件
  • 點這裡列印(在新視窗中開啟) 列印

相關


網絡資訊

Post navigation

PREVIOUS
瘋狂英語創始人李陽起訴前妻:要求前妻賠償損失1020萬元
NEXT
新研究表明mRNA新冠疫苗對免疫力受損患者是安全的

發表迴響取消回覆

這個網站採用 Akismet 服務減少垃圾留言。進一步了解 Akismet 如何處理網站訪客的留言資料。

More results...

Generic filters
Exact matches only
Search in title
Search in content
Search in excerpt
Filter by 分類
網站公告
Featured
限時免費
Windows 軟件下載
系統軟件
辦公軟件
圖像處理
影音媒體
網絡軟件
應用軟件
Mac 軟件下載
安卓軟件下載
網絡資訊
Mac資訊
Linux資訊
VPS資訊
NASA資訊
WordPress資訊
WeChat資訊
PHP資訊
教學資源
開源程序
網頁工具
SEO工具
醫療健康
其他資訊
Content from
Content to
2022 年 3 月
一 二 三 四 五 六 日
 123456
78910111213
14151617181920
21222324252627
28293031  
« 2 月   4 月 »

分類

  • 網站公告
  • 限時免費
  • Windows 軟件下載
  • 系統軟件
  • 辦公軟件
  • 圖像處理
  • 影音媒體
  • 網絡軟件
  • 應用軟件
  • Mac 軟件下載
  • 安卓軟件下載
  • 網絡資訊
  • Mac資訊
  • Linux資訊
  • VPS資訊
  • NASA資訊
  • WordPress資訊
  • WeChat資訊
  • PHP資訊
  • 教學資源
  • 開源程序
  • 網頁工具
  • SEO工具
  • 醫療健康
  • 其他資訊

彙整

近期文章

  • 全面推動「凋零骷髏塔」標準化建設的網路大狂歡是怎麼開啟的? 2025-05-23
  • Windows記事本不再「簡單」 微軟為其新增AI寫作功能 2025-05-23
  • 基於Sora的微軟新工具Bing Video Creator挑戰Veo 各平台均可免費用 2025-05-23
  • 科學家發明結合紅外線和可見光的夜視鏡片 2025-05-23
  • Bluesky 將開始驗證「知名」用戶 2025-05-23
  • Anthropic CEO稱人工智慧模式產生的幻覺其實比人類少 2025-05-23
  • 這些韓國老年海女已擁有基因層面的“超能力” 2025-05-23
  • 防止顯示卡接口燒熔玩家給RTX 4090電源線裝上保險絲還有更狠的 2025-05-23
  • BMWSpeedtop概念車官圖發表售價超過400萬的雙門獵裝轎跑 2025-05-23
  • 馬雲上榜《時代》全球百大慈善人物榜單 2025-05-23

熱門文章與頁面︰

  • 微軟員工再次擾亂Satya Nadella 的主題演講
  • 您可以在Windows 11 24H2 中找回WordPad
  • z-sms – 在線免費云短信臨時手機號接碼平台網頁版
  • ROG NUC 2025迷你遊戲PC上市:Ultra 9 275HX+RTX 5080首發24999元
  • 打車叫到特斯拉不會開門很尷尬?官方介紹開關門方法
  • 索泰展示全球最小RTX 5060 Ti 16GB主機機箱容量僅2.65公升
  • 一汽豐田開卷電動車全新bZ5開啟預售:入門版價格不超13萬
  • 彩虹-YH1000無人物流機首飛成功一口氣能飛1500公里
  • 蘋果iPhone 16 和iPhone 16 Pro Max 原版桌布現已下載
  • 電影《尋秦記》宣布2025賀歲檔上映古天樂等原班人馬回歸

投遞稿件

歡迎各界人士投遞稿件到admin@wongcw.com

請提供以下資料:

1.你的名字

2.你的電郵

3.分類目錄

4.文章標題

5.文章摘要

6.文章內容

7.文章來源

 

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

快帆

MALUS

極度掃描

DMCA.com Protection Status

WONGCW 網誌

  • 免責聲明
  • 捐助我們
  • ThemeNcode PDF Viewer
  • ThemeNcode PDF Viewer SC
  • Events

服務器提供

本站使用之服務器由ikoula提供。

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

© 2025   All Rights Reserved.