NVIDIA攜手微軟打造大規模雲端AI超級電腦

NVIDIA攜手微軟打造大規模雲端AI超級電腦

NVIDIA (輝達) 今天宣布與微軟展開多年的合作計畫,共同打造全球最強大的人工智慧 (AI) 超級電腦之一,結合 Microsoft Azure 的先進超級運算基礎設施,以及 NVIDIA 的 GPU、網路技術和完整的 AI 軟體堆疊支援這台 AI 超級電腦,協助企業訓練、部署和擴展 AI,其中包括最先進的大型模型。

Azure 的雲端 AI 超級電腦包括功能強大且具擴充性的 ND 系列及 NC 系列虛擬機器,這些虛擬機器經過最佳化調整,適用於執行 AI 分散式訓練和推論作業。Azure 是第一個整合 NVIDIA 先進 AI 堆疊的公有雲,在其平台上加入上萬個 NVIDIA A100 和 H100 GPU、NVIDIA Quantum-2 400Gb/s InfiniBand 網路技術與 NVIDIA AI Enterprise 軟體套件。

NVIDIA 將在本次的合作中運用 Azure 具擴充性的虛擬機器執行個體,推動研究並進一步加快推動生成式 AI (generative AI) 的進展。生成式 AI 是迅速崛起的 AI 領域,其中像是 Megatron Turing NLG 530B 這樣的基礎模型,是無監督、自我學習演算法的基礎,用於創造新的文字、程式碼、數位影像、影片或音訊。

雙方亦合作將微軟的 DeepSpeed 深度學習最佳化軟體調整到最佳狀態。NVIDIA 專為 Azure 進行最佳化調整的全堆疊AI 工作流程和軟體開發套件,將提供 Azure 的企業客戶使用。

微軟的 DeepSpeed 將利用 NVIDIA H100 Transformer 引擎加快執行採用 Transformer 模型的速度,用於大型語言模型、生成式 AI 和電腦程式碼編寫等廣泛應用。這項技術將 8 位元浮點精度功能用於 DeepSpeed,以大幅加快採用 Transformer 模型的 AI 運算速度,其傳輸量是 16 位元運算的兩倍。

Microsoft Azure 上針對 AI 進行最佳化調整的虛擬機器執行個體建構於 NVIDIA 最先進的資料中心 GPU,是第一個採用 NVIDIA Quantum-2 400Gb/s InfiniBand 網路技術的公有雲執行個體。客戶可以在單一叢集中部署數千個 GPU,訓練最龐大的大型語言模型、大規模建立最複雜的推薦系統,以及大規模運用生成式 AI。

NVIDIA 企業運算部門副總裁 Manuvir Das 表示:「AI 技術的進步加上產業採用的腳步不斷加快。基礎模型的突破性發展促進研究潮、培育出更多新創公司,並開發出新的企業應用。我們與微軟的合作將為研究人員及企業提供最先進的 AI 基礎設施和軟體,善加利用 AI 蘊含的顛覆性力量。」

 

Hsuann
作者

T客邦特約編輯 ,負責產業即時報導、資訊整理

使用 Facebook 留言
發表回應
謹慎發言,尊重彼此。按此展開留言規則