通信事件点评:英伟达发布H200,面向生成式AI推理场景持续升级

阅读 121 下载 22 格式 pdf 大小 522.95 KB 共6页2023-11-28 23:50:23发布于浙江
证英伟达发布H200,面向生成式AI推理券场景持续升级研究[◼Tabl主e_要Su观mm点ary]报[Table增_R持at(ing维]持)事件描述告[行Ta业bl:e_Indu通st信ry]近日,NVIDIA宣布推出NVIDIAHGXH200。NVIDIAHGXH200基于NVIDIAHopper架构,配备NVIDIAH200TensorCoreGPU和HBM3e日期:s20h2z3q年da1t1e月m1a5r日k显存,能够更好地支持处理生成式AI和高性能计算场景下的工作负载。NVIDIAH200所配备的141GBHBM3e显存拥有4.8TB/s的带宽,[T分ab析le师_A:utho刘r]京昭与NVIDIAH100相比,显存增加76%,带宽增加43%。以Llama2-70B模型为例,NVIDIAH200的推理速度是NVIDIAH100的1.9倍,大幅提SAC编号:S0870523040005高了对生成式AI推理场景的支持能力。[最Ta近bl一e_年Qu行o业teP指ic数]与沪深300比较通信沪深300分析和判断38%31%我们认...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。
3、如文档内容存在违规,或者侵犯商业秘密、侵犯著作权等,请点击“违规举报”。

碎片内容

发表评论取消回复

参与评论可获取积分奖励  
嘿牛投研
结合工作实务分享各行业优质研报,一起洞见研报里的趋势、机会和热点。

文档

65320

收藏

12

店铺

企业店铺
广告位不存在!
确认删除?
VIP会员服务
限时9折优惠