Nvidia表示,已通過今年早些時候推出的A100 GPU芯片,擴大了在MLPerf Benchmark上進行AI推理的領(lǐng)先優(yōu)勢。Nvidia在第二版MLPerf Inference中贏得了針對數(shù)據(jù)中心和邊緣計算系統(tǒng)的六個應(yīng)用程序測試中的每一個。這些測試是對最初的兩個計算機視覺基準測試的擴展-AI測試現(xiàn)在包括推薦系統(tǒng),自然語言理解,語音識別和醫(yī)學(xué)成像。
行業(yè)觀察家Moor Insights&Strategy的HPC和機器學(xué)習高級分析師Karl Freund評論說,與Nvidia的展示一樣令人印象深刻,還應(yīng)該注意,某些原本有望參加MLPerf競賽的公司卻沒有參加。。
弗洛伊德說:“英偉達在競爭激烈的競爭者中表現(xiàn)出色。” 與(Nvidia)V100(GPU)相比,他們的A100效果驚人,證明了其增強的Tensor核心架構(gòu)的價值。我贊揚MLPerf添加了新的基準,這些基準越來越代表快速增長的推理機會,例如推薦引擎。
Freund說:“話說回來,競爭要么是因為客戶項目太忙,要么是他們的芯片還沒有準備好。” “例如,SambaNova(人工智能系統(tǒng)平臺)宣布與LLNL建立新的合作伙伴關(guān)系,而英特爾Habana(可編程深度學(xué)習加速器)仍在醞釀中。如果我仍在芯片創(chuàng)業(yè)公司,我將等待運行MLPerf(一個昂貴的項目),直到我已經(jīng)獲得了一些燈塔客戶。
英偉達在其結(jié)果公告中表示,其A100的AI推理速度比CPU快237倍。
Nvidia加速計算部總經(jīng)理兼副總裁Ian Buck表示:“每個行業(yè)都在尋求更好的方式來應(yīng)用AI提供新服務(wù)和發(fā)展業(yè)務(wù),這是我們的轉(zhuǎn)折點。” “我們?yōu)樵贛LPerf上實現(xiàn)這些結(jié)果而進行的工作使公司的AI性能達到了新的水平,從而改善了我們的日常生活。”
Nvidia表示,該公司及其合作伙伴使用Nvidia的加速平臺(包括Nvidia數(shù)據(jù)中心GPU,Edge AI加速器和Nvidia優(yōu)化的軟件)提交了MLPerf 0.7結(jié)果。Nvidia A100于今年早些時候推出,具有第三代Tensor內(nèi)核和多實例GPU技術(shù),在ResNet-50測試中的領(lǐng)先優(yōu)勢得到了提高,比上一輪的CPU高出30倍,是6倍。該公司補充說,它的GPU在公共云中的AI推理能力首次超過了CPU,并表示Nvidia GPU上的云AI推理總能力每兩年增長約10倍。
責任編輯:lq
-
NVIDIA
+關(guān)注
關(guān)注
14文章
5238瀏覽量
105766 -
機器學(xué)習
+關(guān)注
關(guān)注
66文章
8490瀏覽量
134080 -
GPU芯片
+關(guān)注
關(guān)注
1文章
305瀏覽量
6120 -
MLPerf
+關(guān)注
關(guān)注
0文章
36瀏覽量
777
發(fā)布評論請先 登錄
華為AI WAN在智算邊緣推理網(wǎng)絡(luò)中的關(guān)鍵優(yōu)勢
英偉達GTC2025亮點:Oracle與NVIDIA合作助力企業(yè)加速代理式AI推理

英偉達GTC2025亮點:NVIDIA與行業(yè)領(lǐng)先存儲企業(yè)共同推出面向AI時代的新型企業(yè)基礎(chǔ)設(shè)施
英偉達GTC25亮點:NVIDIA Blackwell Ultra 開啟 AI 推理新時代
英偉達GTC25亮點:NVIDIA Dynamo開源庫加速并擴展AI推理模型
Oracle 與 NVIDIA 合作助力企業(yè)加速代理式 AI 推理

NVIDIA 與行業(yè)領(lǐng)先的存儲企業(yè)共同推出面向 AI 時代的新型企業(yè)基礎(chǔ)設(shè)施

NVIDIA 推出開放推理 AI 模型系列,助力開發(fā)者和企業(yè)構(gòu)建代理式 AI 平臺

無法在GPU上運行ONNX模型的Benchmark_app怎么解決?
NVIDIA與合作伙伴推出代理式AI Blueprint
FPGA和ASIC在大模型推理加速中的應(yīng)用

NVIDIA助力麗蟾科技打造AI訓(xùn)練與推理加速解決方案

評論