業(yè)內(nèi)消息,近日英偉達在超級計算大會上發(fā)布了全新一代號稱全球最強的人工智能(AI)芯片 H200 及相應的產(chǎn)品線。該芯片將被用于數(shù)據(jù)中心和超級計算機,處理諸如天氣和氣候預測、藥物發(fā)現(xiàn)、量子計算等任務。
此次發(fā)布的關鍵產(chǎn)品是基于英偉達的 “Hopper” 架構的 HGX H200 GPU,是 H100 GPU 的繼任者,也是該公司第一款使用 HBM3e 內(nèi)存的芯片,這種內(nèi)存速度更快、容量更大,因此更適合大型語言模型。
該芯片相較于上一代有了質的飛躍,比 H100/H200 的性能直接提升了 60%-90%。英偉達表示,H200 憑借 HBM3e 以每秒 4.8 TB 的速度提供 141GB 的內(nèi)存,容量幾乎是 A100 的兩倍,帶寬則增加了 2.4 倍。
英偉達表示,HGX H200 在 Llama 2(700 億參數(shù) LLM)上的推理速度比 H100 快了一倍。HGX H200 將以 4 路和 8 路的配置提供,與 H100 系統(tǒng)中的軟件和硬件兼容。此外,還適用于各種數(shù)據(jù)中心(本地、云、混合云和邊緣),將于明年二季度推出。
英偉達此次發(fā)布的另一個關鍵產(chǎn)品是 GH200 Grace Hopper “超級芯片(superchip)”,其將 HGX H200 GPU 和基于 Arm 的英偉達 Grace CPU 通過該公司的 NVLink-C2C 互連結合起來,官方稱其專為超級計算機設計。
GH200 將被用于“全球研究中心、系統(tǒng)制造商和云提供商的 40 多臺 AI 超級計算機”,其中包括戴爾、Eviden、惠普企業(yè)(HPE)、聯(lián)想、QCT 和 Supermicro。其中值得注意的是,HPE 的 Cray EX2500 超級計算機將使用四路 GH200,可擴展到數(shù)萬個 Grace Hopper 超級芯片節(jié)點。
值得一提的是,德國 Jülich 工廠的 JUPITER 明年將安裝世界上最強大的 AI 系統(tǒng)(Grace Hopper 超級計算機),因為其使用了液冷架構,其增強模塊由近 24000 個英偉達 GH200 超級芯片組成,這些芯片通過英偉達 Quantum-2 InfiniBand 網(wǎng)絡平臺互連。