老黃深夜炸場！英偉達發(fā)布全球最強 AI 芯片 H200：性能飆升 90%，Llama 2 推理速度翻倍

IT之家 11 月 13 日消息，英偉達今日發(fā)布了下一代人工智能超級計算機芯片，這些芯片將在深度學習和大型語言模型（LLM）方面發(fā)揮重要作用，比如 OpenAI 的 GPT-4。新芯片相比上一代有了顯著的飛躍，將被用于數(shù)據(jù)中心和超級計算機，處理諸如天氣和氣候預測、藥物發(fā)現(xiàn)、量子計算等任務。

此次發(fā)布的關鍵產(chǎn)品是基于英偉達的“Hopper”架構的 HGX H200 GPU，是 H100 GPU 的繼任者，也是該公司第一款使用 HBM3e 內(nèi)存的芯片，這種內(nèi)存速度更快，容量更大，因此更適合大型語言模型。英偉達稱：“借助 HBM3e，英偉達 H200 以每秒 4.8 TB 的速度提供 141GB 的內(nèi)存，與 A100 相比，容量幾乎是其兩倍，帶寬增加了 2.4 倍?！?/p>

在人工智能方面，英偉達表示，HGX H200 在 Llama 2（700 億參數(shù) LLM）上的推理速度比 H100 快了一倍。HGX H200 將以 4 路和 8 路的配置提供，與 H100 系統(tǒng)中的軟件和硬件兼容。它將適用于每一種類型的數(shù)據(jù)中心（本地、云、混合云和邊緣），并由 Amazon Web Services、Google Cloud、Microsoft Azure 和 Oracle Cloud Infrastructure 等部署，將于 2024 年第二季度推出。

英偉達此次發(fā)布的另一個關鍵產(chǎn)品是 GH200 Grace Hopper“超級芯片（superchip）”，其將 HGX H200 GPU 和基于 Arm 的英偉達 Grace CPU 通過該公司的 NVLink-C2C 互連結合起來，官方稱其專為超級計算機設計，讓“科學家和研究人員能夠通過加速運行 TB 級數(shù)據(jù)的復雜 AI 和 HPC 應用程序，來解決世界上最具挑戰(zhàn)性的問題”。

GH200 將被用于“全球研究中心、系統(tǒng)制造商和云提供商的 40 多臺 AI 超級計算機”，其中包括戴爾、Eviden、惠普企業(yè)（HPE）、聯(lián)想、QCT 和 Supermicro。其中值得注意的是，HPE 的 Cray EX2500 超級計算機將使用四路 GH200，可擴展到數(shù)萬個 Grace Hopper 超級芯片節(jié)點。

也許最大的 Grace Hopper 超級計算機是位于德國 Jülich 工廠的 JUPITER，在 2024 年安裝后將成為“世界上最強大的 AI 系統(tǒng)”。其使用了液冷架構，其增強模塊由近 24000 個英偉達 GH200 超級芯片組成，這些芯片通過英偉達 Quantum-2 InfiniBand 網(wǎng)絡平臺互連。

英偉達表示，JUPITER 將有助于在多個領域取得科學突破，包括氣候和天氣預測，生成高分辨率的氣候和天氣模擬，并進行交互式可視化。它還將被用于藥物發(fā)現(xiàn)、量子計算和工業(yè)工程，其中許多領域使用定制的英偉達軟件解決方案，這些解決方案簡化了開發(fā)，但也使超級計算團隊依賴于英偉達硬件。

IT之家注意到，上個季度，英偉達僅在 AI 和數(shù)據(jù)中心領域就實現(xiàn)了創(chuàng)紀錄的 103.2 億美元的收入（總收入為 135.1 億美元），比一年前增長了 171%，英偉達無疑希望新的 GPU 和超級芯片能夠幫助其繼續(xù)這一趨勢。