英偉達(dá)發(fā)布全球最強(qiáng) AI 芯片 H200

時(shí)間：2023-11-15 11:16:38

關(guān)鍵字：英偉達(dá) AI 芯片 H200

手機(jī)看文章

掃描二維碼
隨時(shí)隨地手機(jī)看文章

[導(dǎo)讀]業(yè)內(nèi)消息，近日英偉達(dá)在超級(jí)計(jì)算大會(huì)上發(fā)布了全新一代號(hào)稱全球最強(qiáng)的人工智能（AI）芯片 H200 及相應(yīng)的產(chǎn)品線。該芯片將被用于數(shù)據(jù)中心和超級(jí)計(jì)算機(jī)，處理諸如天氣和氣候預(yù)測(cè)、藥物發(fā)現(xiàn)、量子計(jì)算等任務(wù)。

業(yè)內(nèi)消息，近日英偉達(dá)在超級(jí)計(jì)算大會(huì)上發(fā)布了全新一代號(hào)稱全球最強(qiáng)的人工智能（AI）芯片 H200 及相應(yīng)的產(chǎn)品線。該芯片將被用于數(shù)據(jù)中心和超級(jí)計(jì)算機(jī)，處理諸如天氣和氣候預(yù)測(cè)、藥物發(fā)現(xiàn)、量子計(jì)算等任務(wù)。

此次發(fā)布的關(guān)鍵產(chǎn)品是基于英偉達(dá)的 “Hopper” 架構(gòu)的 HGX H200 GPU，是 H100 GPU 的繼任者，也是該公司第一款使用 HBM3e 內(nèi)存的芯片，這種內(nèi)存速度更快、容量更大，因此更適合大型語(yǔ)言模型。

該芯片相較于上一代有了質(zhì)的飛躍，比 H100/H200 的性能直接提升了 60%-90%。英偉達(dá)表示，H200 憑借 HBM3e 以每秒 4.8 TB 的速度提供 141GB 的內(nèi)存，容量幾乎是 A100 的兩倍，帶寬則增加了 2.4 倍。

英偉達(dá)表示，HGX H200 在 Llama 2（700 億參數(shù) LLM）上的推理速度比 H100 快了一倍。HGX H200 將以 4 路和 8 路的配置提供，與 H100 系統(tǒng)中的軟件和硬件兼容。此外，還適用于各種數(shù)據(jù)中心（本地、云、混合云和邊緣），將于明年二季度推出。

英偉達(dá)此次發(fā)布的另一個(gè)關(guān)鍵產(chǎn)品是 GH200 Grace Hopper “超級(jí)芯片（superchip）”，其將 HGX H200 GPU 和基于 Arm 的英偉達(dá) Grace CPU 通過(guò)該公司的 NVLink-C2C 互連結(jié)合起來(lái)，官方稱其專為超級(jí)計(jì)算機(jī)設(shè)計(jì)。

GH200 將被用于“全球研究中心、系統(tǒng)制造商和云提供商的 40 多臺(tái) AI 超級(jí)計(jì)算機(jī)”，其中包括戴爾、Eviden、惠普企業(yè)（HPE）、聯(lián)想、QCT 和 Supermicro。其中值得注意的是，HPE 的 Cray EX2500 超級(jí)計(jì)算機(jī)將使用四路 GH200，可擴(kuò)展到數(shù)萬(wàn)個(gè) Grace Hopper 超級(jí)芯片節(jié)點(diǎn)。

值得一提的是，德國(guó) Jülich 工廠的 JUPITER 明年將安裝世界上最強(qiáng)大的 AI 系統(tǒng)（Grace Hopper 超級(jí)計(jì)算機(jī)），因?yàn)槠涫褂昧艘豪浼軜?gòu)，其增強(qiáng)模塊由近 24000 個(gè)英偉達(dá) GH200 超級(jí)芯片組成，這些芯片通過(guò)英偉達(dá) Quantum-2 InfiniBand 網(wǎng)絡(luò)平臺(tái)互連。