精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

Arm平臺助力應對AI能源需求

Arm社區 ? 來源:Arm社區 ? 2024-09-24 15:52 ? 次閱讀

作者:Arm 首席執行官 Rene Haas

人工智能 (AI) 具有超越過去一個世紀所發生的所有變革性創新的潛力,它在醫療保健、生產力、教育等領域為社會帶來的益處將超乎我們的想象。為了運行這些復雜的 AI 工作負載,全球數據中心所需的計算量需要以指數級規模進行擴展。然而,這種對計算無止盡的需求也揭示了一個嚴峻的挑戰:數據中心需要龐大的電力來驅動AI這一突破性技術。

當今的數據中心已經消耗了大量的電力 —— 全球每年需要 460 太瓦時 (TWh) 電力進行支持,這個數字等同于整個德國的用電量。而 AI 的興起預計將在 2030 年把該數字提高三倍,意味著將超過印度這一世界上人口最多國家的總耗電量。

未來的 AI 模型將持續變得更大、更智能,在帶動對更多計算能力的需求的同時,對電力的需求也會增加,從而成為良性循環的一部分。而找到降低這些大型數據中心電力需求的方法對于實現社會性突破和兌現 AI 的承諾至關重要。

換言之,沒有電力就無法實現 AI,企業需要重新思考如何應對能效問題的方方面面。

重新構思 AI 的未來

一個由 Arm 平臺驅動的未來

Arm 最初的產品就是為使用電池的設備而設計的,并推動了移動電話的變革。因此,深植于 Arm 的能效 DNA 能使業界重新思考應如何構建芯片來滿足 AI 日益增長的需求。

在典型的服務器機架中,僅計算芯片就可以消耗超過 50% 的電力預算。工程團隊正在尋找各種可以降低該數字的方法,每一瓦特的減少都至關重要。

正因為此,全球最大的 AI 頭部云服務提供商們轉而采用 Arm 技術來降低功耗。與同行業中的其他產品相比,Arm 最新的 Arm Neoverse CPU 是面向云數據中心,性能最高、最節能的處理器。Neoverse 為頭部云服務提供商提供了定制芯片的靈活性,以優化其苛刻的工作負載,同時提供領先的性能和能效。每一瓦特的節省都可以用來實現更多的計算。這也正是為什么亞馬遜云服務 (AWS)、微軟、Google 和甲骨文 (Oracle) 現在都通過 Neoverse 技術,處理其通用計算和基于 CPU 的 AI 推理和訓練。Neoverse 平臺正在成為云數據中心領域的事實標準。

從近期的行業內的發布來看:

基于 Arm 架構的 AWS Graviton:與其他同行業產品相比,Amazon Sagemaker 的 AI 推理性能提高了 25%,Web 應用程序提高了 30%,數據庫提高了 40%,效率則提升了 60%。

基于 Arm 架構的 Google Cloud Axion:與傳統架構相比,其性能和能效分別提高了 50% 和 60%,可為基于 CPU 的 AI 推理和訓練、YouTube、Google 地球等服務提供支持。

基于 Arm 架構的 Microsoft Azure Cobalt:性能高出同類產品 40%,并為 Microsoft Teams 等服務提供支持,與 Maia 加速器的耦合驅動 Azure 的端到端 AI 架構。

Oracle Cloud 采用基于 Arm 架構的 Ampere Altra Max:與傳統同類產品相比,每機架服務器的性能提高 2.5 倍,能耗降低 2.8 倍,并用于生成式 AI 推理模型,諸如摘要、大語言模型訓練的數據的標記化,以及批量推理用例。

顯然,Neoverse 極大地提升了云端通用計算的性能和能效。此外,合作伙伴也發現在加速計算方面,Neoverse 也能帶來同樣的益處。大規模 AI 訓練需要獨特的加速計算架構,例如,NVIDIA Grace Blackwell 平臺 (GB200) 結合了 NVIDIA 的 Blackwell GPU 架構與基于 Arm 架構的 Grace CPU。這種基于 Arm 技術的計算架構可實現系統級設計優化,與面向大語言模型的 NVIDIA H100 GPU 相比,可帶來 25 倍的能耗降低,并將每個 GPU 的性能提高 30 倍。這些優化能夠帶來顛覆性的性能和節能效果,而這一切都得益于 Neoverse 所帶來的前所未有的芯片定制靈活性。

隨著基于 Arm 架構的部署持續擴大,這些企業將可以節省高達 15% 的數據中心總能耗。這些巨幅的節省可以用來在相同的功率范圍內驅動額外的 AI 運算,而不會增加能源負擔。換言之,這些節能相當于可以額外運行 20 億次 ChatGPT 查詢,驅動四分之一的日常網絡搜索流量,為 20% 的美國家庭提供照明,或為與哥斯達黎加面積相仿的國家進行供電。這對改善能源消耗和環境可持續性產生了驚人的影響。

Arm CPU 正在從根本上推動 AI 變革,并造福地球。Arm 架構是未來 AI 計算的基石。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • ARM
    ARM
    +關注

    關注

    134

    文章

    9046

    瀏覽量

    366817
  • 電力
    +關注

    關注

    7

    文章

    2119

    瀏覽量

    50109
  • AI
    AI
    +關注

    關注

    87

    文章

    30146

    瀏覽量

    268421
  • 人工智能
    +關注

    關注

    1791

    文章

    46859

    瀏覽量

    237579

原文標題:Arm 的使命是助力應對 AI 無止盡的能源需求

文章出處:【微信號:Arm社區,微信公眾號:Arm社區】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    安科瑞智慧能源管理平臺助力虛擬電廠快速發展

    安科瑞智慧能源管理平臺助力虛擬電廠快速發展 安科瑞智慧能源管理平臺 AcrelEMS 智慧能源
    的頭像 發表于 11-05 10:25 ?184次閱讀
    安科瑞智慧<b class='flag-5'>能源</b>管理<b class='flag-5'>平臺</b><b class='flag-5'>助力</b>虛擬電廠快速發展

    Arm推出GitHub平臺AI工具

    專為 GitHub Copilot 設計的 Arm 擴展程序,可加速從云到邊緣側基于 Arm 平臺的開發。
    的頭像 發表于 11-01 13:50 ?225次閱讀

    Arm推出GitHub平臺AI工具,簡化開發者AI應用開發部署流程

    專為 GitHub Copilot 設計的 Arm 擴展程序,可加速從云到邊緣側基于 Arm 平臺的開發。 Arm 原生運行器為部署云原生、Windows on
    的頭像 發表于 10-31 18:51 ?1204次閱讀

    能源管理平臺:功能特點與效益深度剖析

    隨著全球能源需求的持續增長及環境保護意識的日益增強,企業和社會對能源的高效管理和利用提出了更高要求。能源管理平臺(Energy Management System, EMS)應運而生,
    的頭像 發表于 10-21 14:33 ?181次閱讀

    Arm全面設計助力Arm架構生態發展

    ,通過該生態項目,Arm、三星晶圓代工廠 (Samsung Foundry)、ADTechnology 和 Rebellions 正在聯手向市場推出人工智能 (AI) CPU 芯粒 (chiplet) 平臺,面向云、高性能計算
    的頭像 發表于 10-21 09:58 ?319次閱讀

    AI for Science:人工智能驅動科學創新》第6章人AI能源科學讀后感

    幸得一好書,特此來分享。感謝平臺,感謝作者。受益匪淺。 在閱讀《AI for Science:人工智能驅動科學創新》的第6章后,我深刻感受到人工智能在能源科學領域中的巨大潛力和廣泛應用。這一章詳細
    發表于 10-14 09:27

    Arm如何賦能無處不在的AI

    作為人工智能 (AI) 的創新基礎,眾多企業都在使用通用且應用廣泛的 Arm 計算平臺。迄今為止,合作伙伴基于 Arm 架構的芯片出貨量已逾 2,800 億顆。如今,
    的頭像 發表于 09-14 09:38 ?477次閱讀

    節能降耗 企業能源管理平臺解決方案

    等各類能源的消耗情況,通過數據分析、挖掘和趨勢分析,幫助企業針對各種能源需求及用能情況、能源質量、產品能源單耗、各工序能耗、重大能耗設備的能源
    的頭像 發表于 08-21 09:07 ?142次閱讀
    節能降耗 企業<b class='flag-5'>能源</b>管理<b class='flag-5'>平臺</b>解決方案

    使用AmpereOne遏制快速增長的能源需求

    在 Ampere 2024 年度戰略和路線圖更新視頻中,CEO Renée James 和 CPO Jeff Wittich 強調 Ampere 如何通過 AmpereOne 的設計來遏制快速增長的能源需求
    的頭像 發表于 07-15 09:50 ?297次閱讀
    使用AmpereOne遏制快速增長的<b class='flag-5'>能源需求</b>

    軟銀斥資百億美元押注AI能源項目

    能源需求。隨著生成式人工智能技術的不斷突破,數據中心的建設和運營成本急劇上升,對清潔能源和高效電力的需求也隨之激增。
    的頭像 發表于 07-05 16:09 ?415次閱讀

    利用AI技術滿足能源需求并推動脫碳

    近日,在舉世矚目的巴庫能源周開幕式上,COP28主席Sultan Al Jaber博士發表了振奮人心的演講。他深入探討了人工智能、能源轉型以及全球南方國家增長對于推動氣候可持續發展的重要性,并為此提出了一系列前瞻性的觀點和建議。
    的頭像 發表于 06-06 15:33 ?502次閱讀

    英飛凌為AI數據中心提供先進的高能效電源裝置產品路線圖

    英飛凌科技股份公司已翻開AI系統能源供應領域的新篇章,發布了電源裝置(PSU)產品路線圖。該路線圖在優先考慮能源效率前提下,專為滿足AI數據中心當前和未來的
    發表于 06-03 18:24 ?549次閱讀
    英飛凌為<b class='flag-5'>AI</b>數據中心提供先進的高能效電源裝置產品路線圖

    分布式能源是什么意思?分布式能源有什么優勢?

    分布式能源指的是在用戶端或靠近用戶端的小型能源供應系統,它能夠直接滿足用戶的多種能源需求,如電力、熱能和冷能。
    的頭像 發表于 04-29 17:26 ?2079次閱讀

    Arm 的使命是助力應對 AI 無止盡的能源需求

    AI 數據中心工作負載供電的挑戰(與機遇) 作者:Arm 首席執行官 Rene Haas 人工智能 (AI) 具有超越過去一個世紀所發生的所有變革性創新的潛力,它在醫療保健、生產力、教育等領域為
    的頭像 發表于 04-26 11:28 ?368次閱讀

    Arm 的使命是助力應對 AI 無止盡的能源需求

    這些復雜的 AI 工作負載,全球數據中心所需的計算量需要以指數級規模進行擴展。然而,這種對計算無止盡的需求也揭示了一個嚴峻的挑戰:數據中心需要龐大的電力來驅動AI這一突破性技術。 ? 當今的數據中心已經消耗了大量的電力——全球每
    發表于 04-23 13:35 ?181次閱讀