NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

科技評論144閱讀模式

黃仁勛終于公布了NVIDIA新一代架構與核心,當然這次是面向HPC高性能計算、AI人工智能的“Hopper”,對應核心編號“GH100”,同時發布的還有基于新核心的加速計算卡“H100”、AI計算系統“DGX H100”。

與傳聞不同,GH100核心采用的其實是臺積電目前最先進的4nm工藝,而且是定制版,CoWoS 2.5D晶圓級封裝,單芯片設計,集成多達800億個晶體管,號稱世界上最先進的芯片。

完整版有8組GPC(圖形處理器集群)、72組TPC(紋理處理器集群)、144組SM(流式多處理器單元),而每組SM有128個FP32 CUDA核心,總計18432個。

顯存支持六顆HBM3或者HBM2e,控制器是12組512-bit,總計位寬6144-bit。

Tensor張量核心來到第四代,共有576個,另有60MB二級緩存。

擴展互連支持PCIe 5.0、NVLink第四代,后者帶寬提升至900GB/s,七倍于PCIe 5.0,相比A100也多了一半。整卡對外總帶寬4.9TB/s。

性能方面,FP64/FP32 60TFlops(每秒60萬億次),FP16 2000TFlops(每秒2000萬億次),TF32 1000TFlops(每秒1000萬億次),都三倍于A100,FP8 4000TFlops(每秒4000萬億次),六倍于A100。

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗-圖片1

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

H100計算卡采用SXM、PCIe 5.0兩種形態,其中后者功耗高達史無前例的700W,相比A100多了整整300W。

按慣例也不是滿血,GPC雖然還是8組,但是SXM5版本只開啟了62組TPC(魅族GPC屏蔽一組TPC)、128組SM,總計有15872個CUDA核心、528個Tensor核心、50MB二級緩存。

PCIe 5.0版本更是只有57組TPC,SM雖然還是128組,但是CUDA核心只有14952個,Tensor核心只有456個。

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗-圖片2

DGX H100系統集成八顆H100芯片、搭配兩顆PCIe 5.0 CPU處理器(Intel Sapphire Rapids四代可擴展至器?),擁有總計6400億個晶體管、640GB HBM3顯存、24TB/s顯存帶寬。

性能方面,AI算力32PFlops(每秒3.2億億次),浮點算力FP64 480TFlops(每秒480萬億次),FP16 1.6PFlops(每秒1.6千萬億次),FP8 3.2PFlops(每秒3.2千億次),分別是上代DGX A100的3倍、3倍、6倍,而且新增支持網絡內計算,性能3.6TFlops。

PCIe 5.0版本的性能基本都再下降20%。

同時配備Connect TX-7網絡互連芯片,臺積電7nm工藝,800億個晶體管,400G GPUDirect吞吐量,400G加密加速,4.05億/秒信息率。

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗-圖片3

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

DGX H100是最小的計算單元,為了擴展,這一次NVIDIA還設計了全新的VNLink Swtich互連系統,可以連接最多32個節點,也就是256顆H100芯片,稱之為“DGX POD”。

這么一套系統內,還有20.5TB HBM3內存,總帶寬768TB/s,AI性能高達顛覆性的1EFlops(100億億億次每秒),實現百億億次計算。

系統合作伙伴包括Atos、思科、戴爾、富士通、技嘉、新華三、慧與、浪潮、聯想、寧暢、超威。

云服務合作伙伴包括阿里云、亞馬遜云、百度云、Google云、微軟Azure、甲骨文云、騰訊云。

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗-圖片4

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

NVIDIA發布新一代H100 GPU核心:4nm工藝、1.8萬核心、700W功耗

 
  • 本文由 米粒 發表于 2022年3月23日12:15:45
  • 轉載請務必保留本文鏈接:http://m.bjmhhq.com/124183.html
科技

毒性堪比眼鏡蛇 亂摸水母會出人命!

抖音之前很流行的“水母手勢舞”你會嗎?張開手掌再捏住手指向后拉,收回手指,張開手指,你就可以得到一只簡略版的水母~ 然而不是所有的水母都這般可愛無害,比如今天的主角&mdash...

發表評論

匿名網友
:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen:
確定

拖動滑塊以完成驗證