精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

實測 | 海納百川,華為OceanStor Pacific分布式存儲為多元算力應用帶來更優選擇

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2022-12-22 20:33 ? 次閱讀

被稱為開眼看世界的林則徐,在自己的書房中寫了這樣一副對聯,以做自勉:海納百川,有容乃大,壁立千仞,無欲則剛。

包容的胸懷是我們做成很多事情的根基,也是一項產業戰略、科技事業發展的關鍵。近幾年,數據基礎設施國產化,在科技自立的大背景下如火如荼。比如,以計算和存儲為主要構成的HPC/AI數據基礎設施事關國計民生,在以科技創新和基礎科研為代表的關鍵領域均扮演著重要角色。但很多科技科研場景的HPC/AI數據基礎設施當前都依托X86 CPU+GPU+Lustre存儲+IB交換機這個大一統的抱團生態體系,且已成為業界公認的HPC/AI設施最佳性能組合之一。如何兼顧科技科研領域的效率成果與自立自強,為HPC/AI等多樣性算力應用關鍵場景,提供最適合業務的數據底座,成為一個關鍵問題。

這種情況下,“海納百川,有容乃大”的意義就凸顯了出來。不久之前,在深圳一所國家重點實驗室,華為OceanStor Pacific分布式存儲與早期依托X86 CPU+GPU+Lustre存儲+IB交換機組網構建的某大科學裝置AI集群進行了綜合的POC測試。其結果顯示,華為OceanStor Pacific分布式存儲完美兼容匹配該大科學裝置的AI集群生態環境,更重要的是通過實測,其多項指標性能和功能均優于現有系統。華為與該國家重點實驗室聯合操作的這項POC測試意義極其深遠重大,遠超于一款產品或解決方案發布:它代表了一種實事求是,兼容并蓄的發展策略;是一塊國產先進存儲面向全球的敲門磚,一艘中國科技與全球化間的破冰船;對于科學研究,乃至更多領域的數字化、智能化進程來說,這是十分幸運的。

數據之潮,時代之需:科研場景的存儲挑戰

X86+GPU主導的大一統生態技術體系經過了數十年發展和構建,其大樹根基在全球和中國已經十分深遠。大量國際國內的數字化工具和軟件應用,數字化成果都捆綁X86+GPU。這在某種程度上來說是種無奈,但也是客觀存在不可回避的現實。

尤其在科研領域,HPC/AI正在全球各個學科的研究中扮演重要角色,X86+GPU算力平臺可以更方便教授學者與科研從業人員接觸全球最新學術動態和驗證科研成果。這種強慣性的作用下,短時間內強行脫離X86生態是不現實的。因此,早期甚至當前新建的很多HPC/AI基礎設施,選擇建立在X86+GPU體系上。

隨著HPDA的整體發展,從業務負載上而言需要考慮HPC/AI、大數據以及AI的混合疊加,需要支持應用驅動的科學計算工作流,進而推動負載以數據為中心,從計算科學發現轉向數據科學發現轉變。

科技科研的突破速度取決于數據基礎設施的性能,特別是對數據存儲性能帶來極致挑戰。第一個挑戰是應用的數據量級從PB級正在加速走向EB級;第二個挑戰是應用的負載從單一走向多樣化,也就是常說的混合負載;最后一個挑戰是應用類型的變化,從簡單走向復雜。核心是數據與業務的耦合度在增加,數據計算需要參與整個業務流程的多個環節,且環環相扣,缺一不可。

在當前推進科技科研自立自強的大時代背景下,面對這些數據中心存儲挑戰和需求,以及面對X86+GPU體系暫不可完全替代,國內業界都希望看到先進的國產存儲兼容X86+GPU環境的下的HPC/AI應用,也可以提供媲美Lustre存儲的性能和功能。

更佳性能,更優選擇:華為分布式存儲的價值呈現

不久之前,華為OceanStor Pacific分布式存儲與在深圳某國家重點實驗室依托X86 CPU+GPU+Lustre存儲+IB交換機組網構建的大科學裝置AI集群進行了POC測試。從測試結果上看,整體兼容效果良好,沒有出現任何兼容問題,并且使用了華為OceanStor Pacific分布式存儲之后,存儲在功能、性能上優于現有系統,融入計算集群的效果也更加良好。

這次測試對接的成功,表明華為在技術創新、產品兼容上的進取姿態,也表明其為科研創新,乃至更廣闊計算、存儲領域做出貢獻的決心。科研教育與國家實驗性,在一個國家的計算基礎設施中具有代表性意義。與該大科學裝置AI集群的成功對接,可以看作華為OceanStor Pacific分布式存儲敲開了國產存儲為HPC/AI提供更優選擇的大門。HPC/AI應用場景下,Lustre不再獨領風騷。

一般來說,多元算力包括x86、ARM、AI、GPU計算等多種計算生態,存儲需要根據不同的計算場景與計算設施,為用戶提供最佳體驗。華為分布式存儲的價值與優勢,釋放到HPC/AI場景,可以有效滿足科研等場景中的存儲需求。

具體而言,華為OceanStor Pacific分布式存儲通過這樣幾個角度,破除HPC/AI場景的存儲困局。

首先解決海量數據高性價比存儲的問題:我們知道隨著HPC/AI業務量的不斷增長,往往最先遇到的是機房空間不足和存儲成本高昂的問題。為此,華為推出了 華為OceanStor Pacific分布式存儲高密專用硬件,基于全新的高密架構設計,并提供更高的容量利用率,在有限的機房空間里存下更多數據,更好地滿足海量數據增長的需要。疊加華為OceanStor Pacific分布式存儲的智能分級存儲技術,對域內熱、溫、冷數據進行統一管理,數據能夠在熱、溫、冷層系統間自動遷移,無需管理員手動干預,靈活有效地管理數據全生命周期,同時有效解決海量數據的運維管理難題。

其次,提供面向混合負載的高性能:HPC/AI應用計算所涉及的數據越來越多、類型越來越豐富、任務并發性也越來越高,因此需要性能更加均衡的存儲。華為OceanStor Pacific分布式存儲采用OceanFS新一代并行文件系統,結合獨特的大小I/O自適應數據流技術,一套存儲即可同時滿足極致帶寬、極致IOPS和極致時延的混合負載要求。通過與分布式并行客戶端(DPC)的密切配合,打破單流和單客戶端的性能瓶頸,幫助企業有效應對混合工作負載的挑戰。

最后,多個不同業務環節數據的高效安全流動:由于數據量的增大、數據應用的復雜化,數據在不同環節、不同系統間高效流動是HPC/AI業務面臨的一個主要挑戰。華為OceanStor Pacific分布式存儲擁有業界領先的多協議互通能力。多個存儲服務同時訪問一份數據,支持 NFS、CIFS、HDFS 和 S3 等協議的按需部署,通過其中一種協議寫入的數據,無需遷移即可被其他協議讀取,提高跨環節、跨系統的數據分析效率。

此次面向多元算力,釋放多元算力價值的全面啟航,展現了華為的包容與兼顧,也展現了華為OceanStor Pacific分布式存儲乃至華為存儲,邁向科研+HPC/AI場景的發展方向。

面向未來,有容乃大:數據基礎設施再啟航

在成功完成兼容測試后,華為在市場與受眾的層面獲得了更廣泛的認可。但華為OceanStor Pacific分布式存儲與深圳知名的國家重點實驗室大科學裝置X86 AI集群進行的POC測試,更廣泛的價值在于面向科研領域、ICT領域,展現了一種關于有容乃大的智慧。

這次測試成功,對于多方面來說都有其意義。

對于科研機構來說,X86環境的HPC/AI可以很快獲得更好的存儲支持,即使不在短期進行國產化計算替換,也可以實現數據可控、可信的數字化戰略,從而獲得更穩健、開放的科研環境。

對于HPC/AI相關項目與數據中心來說,華為OceanStor Pacific分布式存儲兼容多元算力意味著更多選擇,更廣闊的解決方案構建空間,確保計算基礎設施真正實現多樣性。對于計算國產化趨勢來說,我們不搞封閉和孤立,而是在開放、包容的態勢中走向科技自立自強。

華為分布式存儲支持多元化算力,意味著是一個真正開放兼容、自主創新的高可靠存儲數據底座正在建立,具備傳統超算、大數據分析及AI分析能力,應用驅動統一數據源支持全流程科學計算服務,在為科研及商業提供多樣性算力同時,能夠基于數據知識累積,提供高階數據價值服務。華為OceanStor Pacific分布式存儲的兼容性提升,既是一次新的啟航,也是一個明確的指向:它向世界展示了中國ICT產業海納百川的胸懷,包容萬物的決心。

審核編輯 黃昊宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4263

    瀏覽量

    85675
  • 分布式
    +關注

    關注

    1

    文章

    879

    瀏覽量

    74467
收藏 人收藏

    評論

    相關推薦

    分布式光伏企業帶來哪些便捷!

    光伏開發試點方案的通知》中指出:“加快推進屋頂分布式光伏發展,擬在全國組織開展整縣(市、區)推進屋頂分布式光伏開發試點工作”? 一,行業痛點: 1,監管困難:分布式光伏地域較為遼闊,
    的頭像 發表于 11-18 15:34 ?147次閱讀
    <b class='flag-5'>分布式</b>光伏<b class='flag-5'>為</b>企業<b class='flag-5'>帶來</b>哪些便捷!

    百川智能發布一站大模型商業化解決方案

    近日,百川智能正式推出了一站大模型商業化解決方案,旨在為企業提供更加全面、高效的大模型應用服務。該解決方案以1+3產品矩陣核心,包括全鏈路優質通用訓練數據、Baichuan4-Turbo和Baichuan4-Air兩款模型,
    的頭像 發表于 11-01 18:01 ?724次閱讀

    分布式存儲費用高嗎?大概需要多少錢

    分布式存儲的費用是否高,取決于多個因素,包括存儲容量、性能要求、服務提供商、計費模式等。因此,無法簡單地給出一個“高”或“不高”的答案。通常分布式
    的頭像 發表于 09-24 10:41 ?224次閱讀

    大模型廠商“輸血”不斷,百川智能完成50億元A輪融資!

    有重磅消息曝出:知名大模型公司百川智能已經成功收獲了價值50億元的A輪融資。由此,我們不禁感嘆,大模型廠商們的“輸血”和“續命”之戰,還在激烈的上演著。
    的頭像 發表于 07-31 14:47 ?574次閱讀
    大模型廠商“輸血”不斷,<b class='flag-5'>百川</b>智能完成50億元A輪融資!

    百川智能完成50億元A輪融資

    近日,國內領先的醫療AI大模型企業——百川智能,正式宣布完成了高達50億元人民幣的A輪融資,這一里程碑的融資不僅彰顯了市場對其技術實力與未來發展潛力的高度認可,也公司的后續發展奠定了堅實的資金基礎。
    的頭像 發表于 07-26 16:42 ?437次閱讀

    亞馬遜云科技接入百川智能和零一萬物基礎模型

    近日,亞馬遜云科技在中國峰會上宣布,兩大中文基礎模型——百川智能的Baichuan2-7B和零一萬物的Yi-1.5 6B/9B/34B,即將或已正式登陸中國區域的SageMaker JumpStart。這一舉措中國企業提供了豐富的模型
    的頭像 發表于 06-04 11:53 ?560次閱讀

    華為分布式存儲連續三年榮膺2024年Gartner“客戶之選”

    近日,全球權威咨詢與分析機構Gartner發布《2024年Gartner Peer InsightsTM 分布式文件系統與對象存儲“客戶之聲”》報告,華為憑借其OceanStor
    的頭像 發表于 05-24 10:12 ?674次閱讀

    百川智能發布Baichuan 4大模型及首款AI助手“小應”

    百川智能近日發布了其新一代基座大模型Baichuan 4,并同步推出了首款AI助手“小應”。這款AI助手是在Baichuan 4強大能力的基礎上,結合先進的搜索技術精心打造而成。
    的頭像 發表于 05-23 14:15 ?580次閱讀

    有方數據存儲產品服務新疆移動智中心,推動數字生產全面躍升

    近日,有方數據新疆移動智中心項目建設提供了NeoVast 2300分布式海量存儲系統、NeoHyper 2500分布式全閃存
    的頭像 發表于 04-28 14:10 ?521次閱讀

    百川智能與北京大學將共建通用人工智能聯合實驗室

    近日,百川智能與北京大學攜手合作,共同簽署了“北大——百川通用人工智能聯合實驗室”的共建協議,標志著雙方在人工智能領域邁出了堅實的合作步伐。
    的頭像 發表于 03-21 11:45 ?857次閱讀

    曙光存儲推出ParaStor分布式全閃存儲

    曙光存儲推出ParaStor分布式全閃存儲,攜業內首創技術XDS,以訓練加速、穩定性強、性價比高的獨特價值,全維度涵蓋網絡、計算和平臺,千行
    發表于 03-01 11:30 ?554次閱讀

    百川智能發布超千億大模型Baichuan 3

    百川智能近日發布了超千億參數的大語言模型Baichuan 3,引發了業界的廣泛關注。這款模型在多個權威通用能力評測中表現卓越,展現了其強大的語義理解和生成能力。
    的頭像 發表于 01-31 14:58 ?797次閱讀

    搜索出生的百川智能大模型RAG爬坑之路總結

    今天對百川的RAG方法進行解讀,百川智能具有深厚的搜索背景,來看看他們是怎么爬RAG的坑的吧~
    的頭像 發表于 01-05 15:02 ?1430次閱讀
    搜索出生的<b class='flag-5'>百川</b>智能大模型RAG爬坑之路總結

    百川智能發布Baichuan2 Turbo系列API,或將替代行業大模型

    在當天的媒體溝通會上,百川智能創始人、CEO王小百川智能聯合創始人、聯席總裁洪濤,百川智能技術聯創陳煒鵬及百川智能商用業務部總經理李劍共
    的頭像 發表于 12-20 16:54 ?921次閱讀

    資源星羅棋布,看中國移動如何“海納百川”實現共享

    打造全國一張“網”
    的頭像 發表于 12-15 18:56 ?1547次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>資源星羅棋布,看中國移動如何“<b class='flag-5'>海納百川</b>”實現<b class='flag-5'>算</b><b class='flag-5'>力</b>共享