精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

英特爾推出AI加速器性價比產品Gaudi2

IT葡萄皮 ? 來源:IT葡萄皮 ? 2023-07-14 16:42 ? 次閱讀

日前,英特爾面向中國市場發布了HabanaGaudi2深度學習加速卡器。

新的Gaudi2直接給到了24個Tensor處理核心(TPC),是上代產品的三倍;而在對大模型應用至關重要的顯存方面,Gaudi2也大方的配置了96GBHBM2e,顯存帶寬直接達到了2.4TB/s。而在連接方式上,Gaudi2則采用了OCPOAM接口形式,可擴展出21個100G以太網連接,并支持RoCE(RDMAover Converged Ethernet)v2。同時,Gaudi2還集成了多媒體處理器引擎和48MB片上SRAM作為高速緩存。

在系統層面,英特爾則提供能夠同時安裝8塊Gaudi2的夾層基板,同樣遵循OCP標準,可擴展出24個100GRoCE網絡接口。

性能更好的新選擇

Gaudi2搭載的96GBHBM顯存的確令人眼前一亮,但真正能夠影響用戶購買行為的仍舊似乎加速卡本身的計算性能。

在HuggingFace工程師RégisPierrard去年底進行的Gaudi2測試中,Gaudi2不僅在與前代產品的對比中表現出了近乎線性的性能提升,更大幅超越了對標的A100加速卡。

5261f29a-2220-11ee-962d-dac502259ad0.png

BERT預訓練,8卡

Gaudi2使用bf16/fp32混合精度,A100使用fp16精度

526f3b26-2220-11ee-962d-dac502259ad0.png

StableDiffusion測試,單卡

從RégisPierrard使用IntelDeveloper Cloud進行的兩輪測試中我們不難發現,無論是在BERT這樣的大模型應用中,還是在StableDiffusion這樣的“傳統”AIGC應用中,Gaudi2的性能表現均相當亮眼;相對于前代產品展現出了至少3倍的性能優勢(Gaudi2的TPC數量是前代的3倍),且比對標的A100產品更具性能優勢。

在兩項測試中,Gaudi2均使用了英特爾推出的SynapseAI1.10套件和OptimumHabana1.6;其中前者是面向Gaudi系列加速卡的SDK開發套件,能夠對TensorFlow和Pytorch等流行框架提供支持,而后者則是專門面向Transformers和Diffusers優化的運行庫。

同時,在發布會的現場演示環節,英特爾工作人員展示了StableDiffusion應用中1至64張卡的計算性能,并實現了99%的近線性性能擴展。換而言之,在更大規模的業務部署當中,Gaudi2也能通過集群橫向擴展獲得更加線性的性能增長。

目前,Gaudi系列AI加速器已經在AWS的EC2DL1主機中進行了實際的商業部署。AWS表示,相對于傳統GPU,Gaudi能夠在深度學習應用中帶來40%的性價比提升。

在走量的市場做走心的產品

誠然,Gaudi2的競品并非性能無兩的H100,更無法對即將面市的H100NVL構成性能威脅。但對于更加“走量”的A100而言,Gaudi2所展現出的性價比則對大多數用戶而言更有價值。

近兩年,“從中端入局”似乎已經成為英特爾的慣用手段,消費級的Arc770顯卡和如今的Gaudi2均如此。

走量的中端市場對英特爾有足夠的吸引力,也更容易幫助英特爾用一兩款產品就建立口碑、站穩腳跟;同時,能在中端市場為用戶提供先進技術和優勢性價比也證明英特爾對目標用戶足夠走心,愿意把真正的實惠帶給最廣闊的用戶市場。

在走量的市場做走心的產品,這樣的英特爾令人喜聞樂見。

為Ai加速器市場打開一扇窗

近兩年,以AIGC為代表的AI應用快速崛起,吸引了科技圈和投資界的廣泛關注,其中的語言類大模型更有望大幅降低企業在營銷、客服和售后方面的成本,實現生產效率的大幅提升。

在科技企業爭相進行大模型“軍備競賽”的背后,GPU的需求也水漲船高。在GPU市場格局高度固化的當下,這一現象很容易帶來終端市場的價格起伏,導致GPU價格畸高,進而推高企業投身AI業務的成本并導致基礎架構被綁定。

而英特爾Gaudi2加速卡的出現則意味著企業有了全新選擇。一方面,Gaudi2在絕對性能、顯存容量、集群性能等方面都比對標產品有優勢,能夠承接現有的市場需求;另一方面,伴隨oneAPI等算力調用工具的不斷成熟和完善,用戶也能在開發和應用層面實現基礎架構的透明化,更輕松的調用多元算力,繼而獲得算力和基礎架構層面的靈活性。

528258aa-2220-11ee-962d-dac502259ad0.png

作為AI加速器市場的“追趕者”,Gaudi2證明英特爾能夠為用戶提供有競爭力的先進產品。當然,這還僅是在“獨立AI加速器”這一條賽道中。

在更廣闊的數據中心賽道中,英特爾還有并行的DataCenter Max和DataCenterFlex兩條產品線,以及更加獨立的FPGA賽道。此外,英特爾也在積極推動AI能力與傳統CPU的結合。從最初的AVX-512指令集和DLBoost到如今AMX-512指令集,英特爾正在為用戶構建一條“用CPU靈活處理AI推理業務”的全新路徑。

很顯然,在英特爾的眼中,用戶在未來應該針對不同場景和不同業務負載來規劃不同的基礎架構,用不同算力來滿足業務需求。而伴隨oneAPI的逐步成熟,底層算力的區別將被抹除,模型訓練和多端部署不再需要特別調優就能實現無縫遷移和高效調優。

在產品層面,英特爾最新推出的Gaudi2對用戶而言有足夠的吸引力;在戰略層面,Gaud2則是英特爾站穩獨立AI加速器市場并構筑多元算力體系的重要一步。而在AI研究快速推進,技術落地如火如荼的當下,Gaudi2的出現無疑為用戶帶來了全新選擇;而奮力前行的英特爾更有望為市場帶來AI與算力需求之間的全新平衡。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    60

    文章

    9886

    瀏覽量

    171524
  • 加速器
    +關注

    關注

    2

    文章

    795

    瀏覽量

    37761
  • AI
    AI
    +關注

    關注

    87

    文章

    30146

    瀏覽量

    268417
  • Gaudi2
    +關注

    關注

    0

    文章

    13

    瀏覽量

    99

原文標題:先得走心,才能走量!英特爾推出AI加速器性價比產品Gaudi2

文章出處:【微信號:IT葡萄皮,微信公眾號:IT葡萄皮】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    Inflection AI轉向英特爾Gaudi 3,放棄英偉達GPU

    近日,人工智能技術公司Inflection AI宣布了一項重要決策,其最新的企業平臺將放棄采用英偉達(Nvidia)的GPU,轉而選擇英特爾Gaudi 3加速器
    的頭像 發表于 10-10 17:21 ?440次閱讀

    Inflection AI攜手英特爾推出企業級AI系統

    近日,AI初創企業Inflection AI英特爾聯合宣布了一項重大合作——推出基于英特爾Gaudi
    的頭像 發表于 10-09 16:40 ?385次閱讀

    英特爾發布Gaudi3 AI加速器,押注低成本優勢挑戰市場

    英特爾近期震撼發布了專為AI工作負載設計的Gaudi3加速器,這款新芯片雖在速度上不及英偉達熱門型號H100與H200 GPU,但英特爾巧妙
    的頭像 發表于 09-26 16:16 ?766次閱讀

    IBM Cloud將部署英特爾Gaudi 3 AI芯片

    近日,科技巨頭IBM與英特爾宣布了一項重大合作計劃,雙方將共同在IBM Cloud平臺上部署英特爾最新的Gaudi 3 AI芯片,預計該服務將于2025年初正式上線。此次合作標志著兩家
    的頭像 發表于 09-03 15:52 ?355次閱讀

    從運動員到開發者: 英特爾以開放式AI系統應對多重挑戰

    打造的生成式AI(GenAI)檢索增強生成(RAG)解決方案。該成果深度展示了英特爾如何通過基于英特爾?至強?處理英特爾??
    的頭像 發表于 07-25 09:28 ?250次閱讀
    從運動員到開發者: <b class='flag-5'>英特爾</b>以開放式<b class='flag-5'>AI</b>系統應對多重挑戰

    英特爾發布新一代Lunar Lake處理

    在近期舉辦的中國臺北國際電腦展(Computex)上,英特爾CEO蓋爾辛格向全球展示了其最新的技術成果。他發布了第六代至強處理,并重點強調了Gaudi AI
    的頭像 發表于 06-05 11:23 ?878次閱讀

    英特爾確認Ponte Vecchio GPU將以云服務形式推出

    英特爾在公告中強調,隨著AI技術需求的不斷增加,公司重點利用Gaudi AI加速器的性能優勢及有競爭力的價格,實現其迅速拓展。同時,至強系列
    的頭像 發表于 05-18 17:14 ?1023次閱讀

    英特爾推出中國市場“特供版芯片”Gaudi 3

    英特爾計劃在中國市場推出“特供版”Gaudi 3 AI芯片,這一決策主要是基于美國對于AI芯片的出口管制政策。
    的頭像 發表于 04-16 14:48 ?532次閱讀

    英特爾公布Gaudi 3 AI加速器中國特供版計劃

    這兩款專供版加速卡,分別被命名為HL-328和HL-388,它們代表了英特爾AI加速領域的最新技術成果。
    的頭像 發表于 04-15 15:19 ?696次閱讀

    Intel Vision 2024大會: 英特爾發布全新軟硬件平臺,全速助力企業推進AI創新

    的下一代英特爾?至強?6處理的全新品牌。 ?推出英特爾?Gaudi 3 AI
    的頭像 發表于 04-12 14:52 ?495次閱讀
    Intel Vision 2024大會: <b class='flag-5'>英特爾</b>發布全新軟硬件平臺,全速助力企業推進<b class='flag-5'>AI</b>創新

    英特爾進軍AI芯片市場:推出Gaudi 3 AI加速卡與Xeon 6處理

    Gaudi 3作為英特爾AI領域的最新力作,旨在與英偉達等市場領導者展開競爭。據英特爾透露,這款芯片在能效和AI模型運行速度方面均表現出色
    的頭像 發表于 04-10 15:37 ?759次閱讀

    英特爾專家為您揭秘第五代英特爾? 至強? 可擴展處理如何為AI加速

    % 1 ,AI 推理性能提升42% 2 。 這一系列性能提升的背后,存在著怎樣的創新與突破?第五代英特爾 至強 可擴展處理為什么要強調為AI
    的頭像 發表于 12-23 12:20 ?708次閱讀

    英特爾Gaudi2C處理或為Gaudi2的簡化版,Gaudi3預計2024年面世

    對于Gaudi2C和Gaudi2之間的差別,有推測認為它可能是“部分”改動后的產品,針對中國市場專門定制。Tomshardware則猜測可能是Gaudi2的簡化版。
    的頭像 發表于 12-20 13:44 ?1088次閱讀

    英特爾推出新一代強大產品加速實現 “AI 無處不在 ”

    英特爾? 酷睿? Ultra 和第五代英特爾? 至強? 可擴展處理豐富了英特爾出色的AI產品
    發表于 12-16 16:27 ?428次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>推出</b>新一代強大<b class='flag-5'>產品</b>, <b class='flag-5'>加速</b>實現 “<b class='flag-5'>AI</b> 無處不在 ”

    英特爾Gaudi 3系列AI加速器明年上市

    英特爾總裁帕特·基辛格(Pat Gelsinger)認為,鑒于英特爾Gaudi3具備的持續加強的性能優勢和極具競爭性的TCO及定價機制,預測該產品有望在2024年憑借領先的
    的頭像 發表于 12-15 11:07 ?771次閱讀