清華類腦互補視覺晶片突破再登《自然》封面
近日,清華大學精密儀器系類腦運算研究團隊研發出世界首款類腦互補視覺晶片「天眸芯」。成果刊登於5月30日《自然》雜誌封面。這是團隊繼異構融合類腦運算「天機芯」後,第二次登上《自然》雜誌封面,標誌著我國在類腦運算和類腦感知兩個重要方向上均取得基礎性突破。
2024年5月30日《自然》雜誌封面。圖片來源:《自然》雜誌網站
研究團隊聚焦類腦視覺感知晶片技術,提出一種基於視覺原語的互補雙通路類腦視覺感知新範式——借鑒人類視覺系統的基本原理,將開放世界的視覺訊息拆解為基於視覺原語的訊息表示,並透過有機組合這些原語,模仿人視覺系統的特徵,形成兩個優勢互補、資訊完整的視覺感知路徑。
在此基礎上,團隊發展出世界首款類腦互補視覺晶片“天眸芯”,在極低的頻寬(降低90%)和功耗代價下,實現每秒10000幀的高速、10bit的高精度、130dB的高動態範圍的視覺資訊收集,不僅突破傳統視覺感知範式的效能瓶頸,而且能夠高效應對各種極端場景,確保系統的穩定性和安全性。
類腦互補視覺晶片「天眸芯」。圖片來源:清華大學
基於“天眸芯”,團隊還自主研發高性能軟體和演算法,並在開放環境車載平台上進行效能驗證。在多種極端場景下,該系統實現低延遲、高效能的即時感知推理,展現其在智慧無人系統領域的巨大應用潛力。