精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

英特爾Gaudi 3 AI芯片:5nm工藝設計,訓練推理皆強

微云疏影 ? 來源:綜合整理 ? 作者:綜合整理 ? 2024-04-10 11:10 ? 次閱讀

4 月 9 日,英特爾在 Vision 2024 大會上公布最新一代 Gaudi 3 AI 芯片并宣布將于同年第三季度批量上市。相較于英偉達 H100,Gaudi 3 訓練性能提升 170%,推理能力增幅 50%,效率提升 40%,而成本顯著降低。

此外,英特爾在發布會上還宣布更改旗下數據中心CPU產品名稱:原“Granite Rapids”和“Sierra Forest”將更名為“Xeon 6”系列。新品預計今年發售,并支持性能提升后的標準化 MXFP4 數據格式。

除此之外,英特爾正研發適用于以太網的 AI NIC ASIC 及 AI NIC 小芯片。這兩款產品尤其適合于其未來的 XPU 和 Gaudi 3 處理器,有望通過英特爾代工廠對外銷售。有關網絡產品的詳細信息尚未公開。

據悉,Gaudi 3 采用 5nm 制程,FP8性能較前代翻番,BF16性能增大至四倍,網絡帶寬增加一倍,內存帶寬擴大約 1.5 倍,能夠提供Mezz卡、板載以及PCIe三種形式。

Gaudi 3擁有64個第五代張量處理核心和8個矩陣計算引擎,并配備128GBHBM內存和96MBSRAM。設計有24條200GBERoCE標準以太網總線和最多16條PCIe5.0總線。

在板載版,聚類產品型號為HLB-325。由八塊Gaudi 3 Mezz卡組成的模塊提供約14.6PFLOPS的FP8性能,極大的帶寬速率達29.6TB/s的HBM2e內存,64個線性計算引擎,192條200GBE網絡總線和上述所有。

在PCIe版本,型號為HL-338的卡具有單卡達1835TFLOPS的FP8峰值性能,128GBHBM2e內存,8個線性計算引擎,24條200GBE網絡總線,功率消耗600W,占兩卡槽的整體空間高度。

一個由8個Gaudi 3 AI加速器構成的節點可提供14.7PF FP8計算性能,128GB的內存,8.4TB/s的網絡讀寫速度,而64個節點的集群(512個AI加速器)能提供的最大計算性能為7.52EF FP8,525.3TB的內存和614TB/s的網絡讀寫速度。更高的,1024個節點的集群可以達到15EF FP8的計算性能,1PB的內存和1,229PB每秒的網絡讀寫速度。

在實際測試中,與英偉達的主流產品H100比較,Gaudi 3在相同節點數時的平均訓練時間要高出約1.7倍,LLAMA2 70億的模型參數的情況下超過了H100的1.5倍,對于LLAMA2 130億參數的模型,Gaudi 3在最高時也超過了H100的1.7倍,同樣,GPT 3已達到1750億參數,且Gaudi 3在推理速度和能效表現上均優

英特爾近日發布了其下一代 GPU 路線規劃——Gaudi 3,包括風冷和液冷版本,計劃于明年三至四季度相繼批量交付。Gaudi 3 由戴爾、惠普、聯想及超微等眾多合作伙伴負責生產和銷售,據稱下半年有望登陸英特爾自家的云服務——Developer Cloud。除了 Gaudi 3,英特爾還向我們展示了公司在各層面的 AI 產品線的最新進展。

為了更好地優化 AI 的表現,英特爾發布了全新的 Xeon 6 處理器,主要用于大模型的訓練。Xeon 6 采用了高效能的 E-core 核心和高性能的 P-core 核心,其中 E-core 核心代號為 Sierra Forest,能效較前一代提升了整整兩倍半,而 P-core 則代號為 Granite Rapids,支持 MXFP4。值得一提的是,比起前一代 Xeon 處理器,Xeon 6 的機身架構擴展了整整 2.7 倍,已經開始被許多用戶用來升級老舊設備,以此達到節能減排的目的。

值得一提的還有物聯網的應用。今年,英特爾預計將共售出超過 4000 萬臺基于酷睿 Ultra 處理器的 AI PC,除了消費級市場,AI 也正逐漸走進人們生活的方方面面,如工業制造、醫療健康等領域。據悉,該公司將于年內發布一系列新的邊緣芯片,這些產品將涵蓋酷睿 Ultra、酷睿、凌動處理器和 Arc GPU,旨在覆蓋多個不同行業的應用需求。

另外,英特爾還透露計劃此次與Ultra Ethernet Consortium合作,推出一種名為 AI Ethernet 的網絡解決方案,專門解決海量數據遷移中的網絡擁堵問題。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 英特爾
    +關注

    關注

    60

    文章

    9880

    瀏覽量

    171501
  • cpu
    cpu
    +關注

    關注

    68

    文章

    10825

    瀏覽量

    211146
  • 數據中心
    +關注

    關注

    16

    文章

    4683

    瀏覽量

    71954
收藏 人收藏

    評論

    相關推薦

    Inflection AI轉向英特爾Gaudi 3,放棄英偉達GPU

    近日,人工智能技術公司Inflection AI宣布了一項重要決策,其最新的企業平臺將放棄采用英偉達(Nvidia)的GPU,轉而選擇英特爾Gaudi 3加速器。
    的頭像 發表于 10-10 17:21 ?440次閱讀

    Inflection AI攜手英特爾推出企業級AI系統

    近日,AI初創企業Inflection AI英特爾聯合宣布了一項重大合作——推出基于英特爾Gaudi
    的頭像 發表于 10-09 16:40 ?384次閱讀

    英特爾調降明年AI服務器芯片出貨目標

    近日,有消息稱英特爾為應對內部策略調整及終端需求變化,已對其旗下AI服務器芯片Gaudi 3的明年出貨目標進行了大幅調整。
    的頭像 發表于 10-08 15:38 ?233次閱讀

    英特爾發布Gaudi3 AI加速器,押注低成本優勢挑戰市場

    英特爾近期震撼發布了專為AI工作負載設計的Gaudi3加速器,這款新芯片雖在速度上不及英偉達熱門型號H100與H200 GPU,但英特爾巧妙
    的頭像 發表于 09-26 16:16 ?766次閱讀

    IBM Cloud將部署英特爾Gaudi 3 AI芯片

    近日,科技巨頭IBM與英特爾宣布了一項重大合作計劃,雙方將共同在IBM Cloud平臺上部署英特爾最新的Gaudi 3 AI
    的頭像 發表于 09-03 15:52 ?355次閱讀

    英特爾3nm制程工藝“Intel 3”投入大批量生產

    據外媒最新報道,全球知名的處理器大廠英特爾在周三宣布了一個重要的里程碑:其先進的3nm級制程工藝技術“Intel 3”已在兩個工廠正式投入大批量生產。這一技術的突破,無疑將為
    的頭像 發表于 06-21 09:31 ?489次閱讀

    英特爾助力京東云用CPU加速AI推理,以大模型構建數智化供應鏈

    英特爾助力京東云用CPU加速AI推理,以大模型構建數智化供應鏈
    的頭像 發表于 05-27 11:50 ?500次閱讀
    <b class='flag-5'>英特爾</b>助力京東云用CPU加速<b class='flag-5'>AI</b><b class='flag-5'>推理</b>,以大模型構建數智化供應鏈

    英特爾特供芯片性能暴降92%!

    英特爾針對中國市場推出的特供版Gaudi 3芯片在性能上確實存在大幅下降的情況,這主要是由于美國對于AI
    的頭像 發表于 04-17 16:57 ?761次閱讀

    英特爾擬推出中國市場“特供版芯片Gaudi 3

    英特爾計劃在中國市場推出“特供版”Gaudi 3 AI芯片,這一決策主要是基于美國對于AI
    的頭像 發表于 04-16 14:48 ?532次閱讀

    英特爾的最強AI芯片要來了,聲稱性能完勝英偉達H100

    美國東部時間4月9日凌晨,英特爾發布了其最新的人工智能芯片Gaudi3,預計將在第三季度大范圍上市。 在當天舉辦的Intel Vision 2024大會上,英特爾CEO帕特·基辛格(P
    的頭像 發表于 04-11 23:36 ?425次閱讀

    英特爾進軍AI芯片市場:推出Gaudi 3 AI加速卡與Xeon 6處理器

    Gaudi 3作為英特爾AI領域的最新力作,旨在與英偉達等市場領導者展開競爭。據英特爾透露,這款芯片
    的頭像 發表于 04-10 15:37 ?758次閱讀

    英特爾發布人工智能芯片新版,對標Nvidia

    為應對AI行業對高性能芯片的巨大需求,英特爾推出了全新Gaudi 3芯片,據稱這一款
    的頭像 發表于 04-10 09:26 ?336次閱讀

    英特爾:讓我們一起消滅CUDA

    基爾辛格認為:"由于推理的發生,一旦你訓練了模型......就不會依賴CUDA。"關鍵在于,你能否很好地運行該模型?他表示,英特爾將利用今日首次在舞臺上展示的 Gaudi3 迎接挑戰,
    的頭像 發表于 12-15 17:12 ?967次閱讀

    英特爾Gaudi 3系列AI加速器明年上市

    英特爾總裁帕特·基辛格(Pat Gelsinger)認為,鑒于英特爾Gaudi3具備的持續加強的性能優勢和極具競爭性的TCO及定價機制,預測該產品有望在2024年憑借領先的AI加速器套
    的頭像 發表于 12-15 11:07 ?771次閱讀

    英特爾新處理器,掀AI PC戰火

    隨著ai時代的到來,英特爾正在構想新的酷睿Ultra處理器(代號Meteor Lake),這是英特爾的第一個基于npu的處理器,旨在在pc上應用ai加速和邊緣
    的頭像 發表于 12-11 11:26 ?934次閱讀