性能暴涨4.5倍!NVIDIA H100计算卡强势垄断AI:对手?不存在
AI世界如今最大的贏家是誰?
毫無疑問是黃仁勛的NVIDIA,布局早,技術(shù)強(qiáng),根本找不到對(duì)手,“躺著”就可以掙大錢了。
現(xiàn)在,NVIDIA又公布了最新一代Hopper H100計(jì)算卡在MLPerf AI測試中創(chuàng)造的新紀(jì)錄。
Hopper H100早在2022年3月就發(fā)布了,GH100 GPU核心,臺(tái)積電4nm工藝,800億晶體管,814平方毫米面積。
它集成18432個(gè)CUDA核心、576個(gè)Tensor核心、60MB二級(jí)緩存,搭配6144-bit位寬的六顆HBM3/HBM2e高帶寬內(nèi)存,支持第四代NVLink、PCIe 5.0總線。
不過直到最近,H100才開始大規(guī)模量產(chǎn),微軟、谷歌、甲骨文等云計(jì)算服務(wù)已開始批量部署。
MLPerf Inference是測試AI推理性能的行業(yè)通行標(biāo)準(zhǔn),最新版本v3.0,也是這個(gè)工具誕生以來的第七個(gè)大版本更新。
其中,DLRM、BERT訓(xùn)練模型的提升最為顯著。
NVIDIA還頗為羞辱性地列上了Intel最新數(shù)據(jù)中心處理器旗艦至強(qiáng)鉑金8480+的成績,雖然有56個(gè)核心,但畢竟術(shù)業(yè)有專攻,讓通用處理器跑AI訓(xùn)練實(shí)在有點(diǎn)為難,可憐的分?jǐn)?shù)不值一提,BERT 99.9%甚至都無法運(yùn)行,而這正是NVIDIA H100的最強(qiáng)項(xiàng)。
此外,NVIDIA還第一次公布了L4 GPU的性能。
它基于最新的Ada架構(gòu),只有Tensor張量核心,支持FP8浮點(diǎn)計(jì)算,主要用于AI推理,也支持AI視頻編碼加速。
幾乎所有的大型云服務(wù)供應(yīng)商都部署了T4,升級(jí)到L4只是時(shí)間問題,Google就已經(jīng)開始內(nèi)測。
總結(jié)
以上是生活随笔為你收集整理的性能暴涨4.5倍!NVIDIA H100计算卡强势垄断AI:对手?不存在的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: SAP CRM, C4C和Hybris的
- 下一篇: SAP CRM WebClient UI