色婷婷AⅤ一区二区三区|亚洲精品第一国产综合亚AV|久久精品官方网视频|日本28视频香蕉

          "); //-->

          博客專欄

          EEPW首頁 > 博客 > 英特爾中國“特供版”AI芯片Gaudi 2 供不應(yīng)求

          英特爾中國“特供版”AI芯片Gaudi 2 供不應(yīng)求

          發(fā)布人:芯智訊 時間:2023-09-22 來源:工程師 發(fā)布文章

          image.png

          9月19日消息,據(jù)Digitimes 援引供應(yīng)鏈人士的話報道稱,英特爾面向中國市場推出的“特供版”AI 處理器Gaudi 2 訂單快速增長,使得英特爾向臺積電大舉追加訂單。

          自今年以來,隨著以ChatGPT為代表的生成式AI的持續(xù)火爆,帶動了對于AI加速芯片的需求的暴漲,其中英偉達(NVIDIA)A100及H100系列更是成為了搶手貨,特別是在臺積電 CoWos 先進封裝產(chǎn)能不足的情況下,英偉達的A100及H100持續(xù)短缺,即便是面向中國市場特供的A800 與 H800也是供不應(yīng)求。

          同樣,目前AMD MI300 系列暫未大規(guī)模上市,主要也是受制于臺積電的產(chǎn)能。供應(yīng)鏈人士還透露,Meta、微軟、谷歌、AWS 北美四大云服務(wù)商(CSP)相當(dāng)期待的 AMD MI300 系列也因為臺積電產(chǎn)能問題大受影響。

          在此背景之下,能夠在一定程度上替代英偉達AI加速卡的英特爾Gaudi 2自然也受到了市場的追捧。

          供應(yīng)鏈人士稱,Gaudi 2 訂單能見度已經(jīng)到了 2024 年年中,而下一代采用臺積電 5/4 nm制程的 Gaudi 3 也正在加速上市進程,預(yù)計 2024 年面世。

          資料顯示,Gaudi 2是英特爾在2022年5月發(fā)布的新一代的高性能深度學(xué)習(xí)AI訓(xùn)練處理器,采用7nm制程工藝制造,擁有24個可編程Tensor處理器核心(TPCs),96GB HBM2e 內(nèi)存和 24 個 100GbE 端口。根據(jù)英特爾展示的性能對比數(shù)據(jù)來看,Habana Gaudi2在RestNet50 Training Throughput和BERT Tralning Throughput等視頻及自然語言處理的模型測試中,性能都達到了NVIDIA A100的2倍左右。

          image.png

          根據(jù)第三方機構(gòu)MLPerf于今年6月發(fā)布的MLCommons MLPerf 基準(zhǔn)測試數(shù)據(jù)顯示,Gaudi 2在GPT-3模型、計算機視覺模型ResNet-50(使用8個加速器)、Unet3D(使用8個加速器),以及自然語言處理模型BERT(使用8個和64個加速器)上均取得了優(yōu)異的訓(xùn)練結(jié)果。與市場上其他面向大規(guī)模生成式AI和大語言模型的產(chǎn)品相比,Gaudi2擁有卓越的性能與領(lǐng)先的性價比優(yōu)勢。比如,在計算機視覺(ResNet-50)和自然語言處理(BERT微調(diào))方面的表現(xiàn)優(yōu)于英偉達A100,在計算機視覺方面幾乎與H100不分伯仲。

          此外,Gaudi2可為大規(guī)模的多模態(tài)和語言模型提供出色的推理性能。在最近的Hugging Face評估中,其在大規(guī)模推理方面的表現(xiàn),包括在運行Stable Diffusion2(另一個用于從文本生成圖像的最先進生成式AI模型之一)、70億以及1760億參數(shù)BLOOMz3模型時,在行業(yè)內(nèi)保持領(lǐng)先。

          2023年7月11日,英特爾在北京召開發(fā)布會,正式面向中國市場推出“定制版”的Gaudi 2芯片,可不受美國出口管制限制(應(yīng)該是將I/O速度限制到了600GB/s以下)。目前,這款芯片已獲得浪潮、新華三、超聚變等服務(wù)器巨頭采用。

          編輯:芯智訊-浪客劍


          *博客內(nèi)容為網(wǎng)友個人發(fā)布,僅代表博主個人觀點,如有侵權(quán)請聯(lián)系工作人員刪除。



          關(guān)鍵詞: 芯片

          相關(guān)推薦

          技術(shù)專區(qū)

          關(guān)閉