精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

首個采用NVIDIA M2050 GPU的實例 開啟GPU云計算下個十年

454398 ? 來源:人工智能學習網 ? 作者:云水禪心 ? 2021-02-24 12:08 ? 次閱讀

十年前,AWS(Amazon Web Services)發布了首個采用 NVIDIA M2050 GPU 的實例。當時,基于 CUDA 的應用主要專注于加速科學模擬AI深度學習還遙遙無期。

自那時起,AW 就不斷擴充云端 GPU 實例陣容,包括 K80(p2)、K520(g3)、M60(g4)、V100(p3 / p3dn)和 T4(g4)。

現在,已全面上市的全新 AWS P4d 實例采用最新 NVIDIA A100 Tensor Core GPU,開啟了加速計算的下一個十年。

全新的 P4d 實例,為機器學習訓練和高性能計算應用提供 AWS 上性能與成本效益最高的 GPU 平臺。與默認的 FP32 精度相比,全新實例將 FP16 機器學習模型的訓練時間減少多達 3 倍,將 TF32 機器學習模型的訓練的時間減少多達 6 倍。

這些實例還提供出色的推理性能。NVIDIA A100 GPU 在最近的 MLPerf Inference 基準測試中一騎絕塵,實現了比 CPU 快 237 倍的性能。

pIYBAF-ha8qAbYI-AACa8sem2nU309.png

每個 P4d 實例均內置八個 NVIDIA A100 GPU,通過 AWS UltraClusters,客戶可以利用 AWS 的 Elastic Fabric Adapter(EFA)和 Amazon FSx 提供的可擴展高性能存儲,按需、可擴展地同時訪問多達 4,000 多個 GPU。P4d 提供 400Gbps 網絡,通過使用 NVLink、NVSwitch、NCCL 和 GPUDirect RDMA 等 NVIDIA 技術,進一步加速深度學習訓練的工作負載。EFA 上的 NVIDIA GPUDirect RDMA 在服務器之間可通過 GPU 傳輸數據,無需通過 CPU 和系統內存,從而確保網絡的低延遲。

此外,許多 AWS 服務都支持 P4d 實例,包括 Amazon Elastic Container Services、Amazon Elastic Kubernetes Service、AWS ParallelCluster 和 Amazon SageMaker。P4d 還可使用所有 NGC 提供的經過優化的容器化軟件,包括 HPC 應用、AI 框架、預訓練模型、Helm 圖表以及 TensorRT 和 Triton Inference Server 等推理軟件。

目前,P4d 實例已在美國東部和西部上市,并將很快擴展到其他地區。用戶可以通過按需實例(On-Demand)、Savings Plans、預留實例(Reserved Instances)或競價型實例(Spot Instances)幾種不同的方式進行購買。

GPU 云計算發展最初的十年,已為市場帶來超過 100 exaflops 的 AI 計算。隨著基于 NVIDIA A100 GPU 的 Amazon EC2 P4d 實例的問世,GPU 云計算的下一個十年將迎來一個美好的開端。

NVIDIA 和 AWS 不斷幫助各種應用突破 AI 的界限,以便了解客戶將如何運用 AI 強大的性能。

編輯:hfy

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • NVIDIA
    +關注

    關注

    14

    文章

    4946

    瀏覽量

    102821
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4702

    瀏覽量

    128712
  • AI
    AI
    +關注

    關注

    87

    文章

    30199

    瀏覽量

    268447
  • 機器學習
    +關注

    關注

    66

    文章

    8381

    瀏覽量

    132428
  • AWS
    AWS
    +關注

    關注

    0

    文章

    427

    瀏覽量

    24315
收藏 人收藏

    評論

    相關推薦

    如何構建及優化GPU網絡

    并從計算節點成本優化、集群網絡與拓撲的選擇等方面論述如何構建及優化GPU網絡。
    的頭像 發表于 11-06 16:03 ?252次閱讀
    如何構建及優化<b class='flag-5'>GPU</b><b class='flag-5'>云</b>網絡

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構分析」閱讀體驗】--了解算力芯片GPU

    本篇閱讀學習第七、八章,了解GPU架構演進及CPGPU存儲體系與線程管理 █從圖形到計算GPU架構演進 GPU圖像計算發展 ●從三角形開始
    發表于 11-03 12:55

    AMD與NVIDIA GPU優缺點

    在圖形處理單元(GPU)市場,AMD和NVIDIA是兩大主要的競爭者,它們各自推出的產品在性能、功耗、價格等方面都有著不同的特點和優勢。 一、性能 GPU的性能是用戶最關心的指標之一。在高端市場
    的頭像 發表于 10-27 11:15 ?467次閱讀

    GPU加速計算平臺是什么

    GPU加速計算平臺,簡而言之,是利用圖形處理器(GPU)的強大并行計算能力來加速科學計算、數據分析、機器學習等復雜
    的頭像 發表于 10-25 09:23 ?218次閱讀

    亞馬遜科技宣布Amazon EC2 P5e實例正式可用 由英偉達H200 GPU提供支持

    北京20249月18日?/美通社/ -- 亞馬遜科技宣布由英偉達H200 GPU提供支持的 Amazon Elastic Compute Cloud P5e(Amazon EC2 P5e)
    的頭像 發表于 09-19 16:16 ?422次閱讀

    GPU服務器架構解析及應用優勢

    GPU服務器作為一種高性能計算資源,近年來在人工智能、大數據分析、圖形渲染等領域得到了廣泛應用。它結合了計算的靈活性與
    的頭像 發表于 08-14 09:43 ?331次閱讀

    暴漲預警!NVIDIA GPU供應大跳水

    gpu
    jf_02331860
    發布于 :2024年07月26日 09:41:42

    NVIDIA全面轉向開源GPU內核模塊

    借助 R515 驅動程序,NVIDIA 于 2022 5 月發布了一套開源的 Linux GPU 內核模塊,該模塊采用雙許可證,即 GPL 和 MIT 許可。初始版本主要面向數據中
    的頭像 發表于 07-25 09:56 ?378次閱讀
    <b class='flag-5'>NVIDIA</b>全面轉向開源<b class='flag-5'>GPU</b>內核模塊

    恒訊科技的GPU解決方案有什么特點和優勢?

    GPU解決方案通常指的是服務提供商提供的、基于圖形處理單元(GPU)的計算服務。這些服務利用GPU
    的頭像 發表于 06-12 17:24 ?375次閱讀

    新手小白怎么學GPU服務器跑深度學習?

    新手小白想用GPU服務器跑深度學習應該怎么做? 用個人主機通常pytorch可以跑但是LexNet,AlexNet可能就直接就跑不動,如何實現更經濟便捷的實現GPU服務器深度學習?
    發表于 06-11 17:09

    RTX 5880 Ada Generation GPU與RTX? A6000 GPU對比

    NVIDIA RTX? 5880 Ada Generation GPU 是目前國內重量級 GPU,基于全新 NVIDIA Ada Lovelace 架構構建,
    的頭像 發表于 04-19 10:20 ?1624次閱讀
    RTX 5880 Ada Generation <b class='flag-5'>GPU</b>與RTX? A6000 <b class='flag-5'>GPU</b>對比

    GPU:量化理論計算的新引擎

    在過去的幾十年里,量化理論計算一直是化學研究的關鍵工具。密度泛函理論(DFT)、分子力學(MM)、耦合簇(CC)等方法在預測分子結構、能量、光譜性質等方面具有重要意義。然而,這些計算通常需要大量
    的頭像 發表于 04-16 08:27 ?418次閱讀
    <b class='flag-5'>GPU</b>:量化理論<b class='flag-5'>計算</b>的新引擎

    FPGA在深度學習應用中或將取代GPU

    現場可編程門陣列 (FPGA) 解決了 GPU 在運行深度學習模型時面臨的許多問題 在過去的十年里,人工智能的再一次興起使顯卡行業受益匪淺。英偉達 (Nvidia) 和 AMD 等公司的股價也大幅
    發表于 03-21 15:19

    NVIDIA 發布全新交換機,全面優化萬億參數級 GPU 計算和 AI 基礎設施

    NVIDIA 軟件實現了跨 ?Blackwell GPU、新交換機和 BlueField-3 SuperNIC 的分布式計算,大幅提升了 AI、數據處理、高性能計算
    發表于 03-19 10:05 ?318次閱讀
    <b class='flag-5'>NVIDIA</b> 發布全新交換機,全面優化萬億參數級 <b class='flag-5'>GPU</b> <b class='flag-5'>計算</b>和 AI 基礎設施

    亞馬遜科技與 NVIDIA 宣布開展戰略合作,為生成式 AI 提供全新超級計算基礎架構、軟件和服務

    亞馬遜科技將提供首款搭載 NVIDIA Grace Hopper 超級芯片 和亞馬遜科技可擴展性 UltraCluster 的? AI 超級
    的頭像 發表于 11-29 21:00 ?616次閱讀
    亞馬遜<b class='flag-5'>云</b>科技與 <b class='flag-5'>NVIDIA</b> 宣布開展戰略合作,為生成式 AI 提供全新超級<b class='flag-5'>計算</b>基礎架構、軟件和服務