博客專欄

        EEPW首頁 > 博客 > 英特爾中國“特供版”AI芯片Gaudi 2 供不應求

        英特爾中國“特供版”AI芯片Gaudi 2 供不應求

        發布人:芯智訊 時間:2023-09-22 來源:工程師 發布文章

        image.png

        9月19日消息,據Digitimes 援引供應鏈人士的話報道稱,英特爾面向中國市場推出的“特供版”AI 處理器Gaudi 2 訂單快速增長,使得英特爾向臺積電大舉追加訂單。

        自今年以來,隨著以ChatGPT為代表的生成式AI的持續火爆,帶動了對于AI加速芯片的需求的暴漲,其中英偉達(NVIDIA)A100及H100系列更是成為了搶手貨,特別是在臺積電 CoWos 先進封裝產能不足的情況下,英偉達的A100及H100持續短缺,即便是面向中國市場特供的A800 與 H800也是供不應求。

        同樣,目前AMD MI300 系列暫未大規模上市,主要也是受制于臺積電的產能。供應鏈人士還透露,Meta、微軟、谷歌、AWS 北美四大云服務商(CSP)相當期待的 AMD MI300 系列也因為臺積電產能問題大受影響。

        在此背景之下,能夠在一定程度上替代英偉達AI加速卡的英特爾Gaudi 2自然也受到了市場的追捧。

        供應鏈人士稱,Gaudi 2 訂單能見度已經到了 2024 年年中,而下一代采用臺積電 5/4 nm制程的 Gaudi 3 也正在加速上市進程,預計 2024 年面世。

        資料顯示,Gaudi 2是英特爾在2022年5月發布的新一代的高性能深度學習AI訓練處理器,采用7nm制程工藝制造,擁有24個可編程Tensor處理器核心(TPCs),96GB HBM2e 內存和 24 個 100GbE 端口。根據英特爾展示的性能對比數據來看,Habana Gaudi2在RestNet50 Training Throughput和BERT Tralning Throughput等視頻及自然語言處理的模型測試中,性能都達到了NVIDIA A100的2倍左右。

        image.png

        根據第三方機構MLPerf于今年6月發布的MLCommons MLPerf 基準測試數據顯示,Gaudi 2在GPT-3模型、計算機視覺模型ResNet-50(使用8個加速器)、Unet3D(使用8個加速器),以及自然語言處理模型BERT(使用8個和64個加速器)上均取得了優異的訓練結果。與市場上其他面向大規模生成式AI和大語言模型的產品相比,Gaudi2擁有卓越的性能與領先的性價比優勢。比如,在計算機視覺(ResNet-50)和自然語言處理(BERT微調)方面的表現優于英偉達A100,在計算機視覺方面幾乎與H100不分伯仲。

        此外,Gaudi2可為大規模的多模態和語言模型提供出色的推理性能。在最近的Hugging Face評估中,其在大規模推理方面的表現,包括在運行Stable Diffusion2(另一個用于從文本生成圖像的最先進生成式AI模型之一)、70億以及1760億參數BLOOMz3模型時,在行業內保持領先。

        2023年7月11日,英特爾在北京召開發布會,正式面向中國市場推出“定制版”的Gaudi 2芯片,可不受美國出口管制限制(應該是將I/O速度限制到了600GB/s以下)。目前,這款芯片已獲得浪潮、新華三、超聚變等服務器巨頭采用。

        編輯:芯智訊-浪客劍


        *博客內容為網友個人發布,僅代表博主個人觀點,如有侵權請聯系工作人員刪除。



        關鍵詞: 芯片

        相關推薦

        技術專區

        關閉
        主站蜘蛛池模板: 绩溪县| 文水县| 定边县| 甘南县| 静海县| 湖北省| 大城县| 余江县| 铁岭县| 金川县| 千阳县| 河西区| 海安县| 丰县| 深泽县| 莆田市| 山阴县| 扎赉特旗| 文水县| 都兰县| 仁寿县| 东安县| 昆山市| 乌恰县| 大理市| 齐齐哈尔市| 于田县| 遂平县| 辽源市| 溆浦县| 论坛| 崇义县| 康定县| 阳泉市| 炎陵县| 上思县| 望谟县| 大同市| 乌海市| 锡林浩特市| 鄱阳县|