首页 专题 财经 查看内容

英伟达针对AI市场推出双GPU产品H100NVL,最高使用188GBHB

2023-03-22 13:21| 发布者: 顾晓芸| 查看: 42100| 评论: 0|来自: IT之家   阅读量:4739   

摘要:,英伟达在GTCSpring2023主题演讲中,针对不断增长的AI市场,推出了全新的双GPU产品H100NVL。H100NVL在顶部配备了3个NVLink连接器,使用两个相邻的PCIe显卡插槽。 英伟达表示在运行大型语...

,英伟达在 GTC Spring 2023 主题演讲中,针对不断增长的 AI 市场,推出了全新的双 GPU 产品 H100 NVL。H100 NVL 在顶部配备了 3 个 NVLink 连接器,使用两个相邻的 PCIe 显卡插槽。

英伟达表示在运行大型语言模型时,常规显卡的显存无法驾驭庞大的数据流。因此本次推出的 H100 NVL 最高可以提供 188GB HBM3 显存,单卡显存容量 94GB。

H100 NVL 的功耗略高于 H100 PCIe,每个 GPU 为 350-400 瓦,增加了 50W。IT之家从报道中获悉,总性能实际上是 H100 SXM 的两倍:FP64 为 134 teraflops,TF32 为 1979 teraflops,FP8 为 7916 teraflops,INT8 为 7916 teraops。

内存带宽也比 H100 PCIe 高很多,每个 GPU 为 3.9 TB / s,总和为 7.8 TB / s。

郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。

分享至:
| 收藏

观察家网© 2012-