近日,2019年中國國際大數據產業博覽會(簡稱“數博會”)在貴陽舉辦。期間,在領先科技成果發布會上,遼寧移動與華為“基于多租戶模型構建MPP(大規模并行處理)數據庫”聯合創新項目,榮獲“優秀項目”獎,更好地驅動大數據應用。
1
攜手共贏,把握大數據時代商機
數博會不僅是全球首個以大數據為主題的博覽會,更已成為全球大數據發展的風向標和國際性、權威性的成果交流平臺。
大數據時代背景下,數據的分析、組織和調度是信息價值挖掘的重要保障。MPP大規模并行處理架構的數據庫系統因其具備良好的擴展性、高性能、可靠性等特點,正逐漸替代經分系統中傳統數據倉庫系統。
但使用MPP數據庫時也面臨一些問題,其中最為突出的是多租戶同時使用時,如何實現各租戶計算資源和存儲資源的隔離,即當數據庫系統負載較高的時候,任務之間存在資源(CPU、I/O和內存)競爭,以及避免任務之間由于資源競爭導致資源互鎖的一些問題。
本次遼寧移動與華為合作,基于華為的Node Group彈性集群架構在MPP數據庫實現按租戶對系統資源(CPU、內存、IO、存儲)和數據的隔離,確保各應用系統之間無干擾,合理地為各個應用提供資源,保障各應用能夠正常運行。
同時,在用戶資源隔離的基礎上,該項目的MPP數據庫還實現了租戶計算資源的彈性伸縮,可以充分利用其它租戶的空閑資源,不但保障了業務的正常運行,還可實現資源利用率最大化。
例如,地市集市業務系統在9:00~18:00點為業務人員提供交互分析,該業務的訪問量和工作量波動比較大,很難對資源做精準評估。當有業務人員提交比較復雜的關聯查詢時就會造成該資源池的利用率較高,反饋時間過長。而互聯網中心業務分析等業務,其執行的周期和時間段又恰恰和地市集市的業務可以分開執行,因此利用租戶資源的彈性伸縮特性,訪問高峰時完全可以借用互聯網中心業務分析等各業務模塊的空閑資源,提升地市集市的查詢效率,同時提升整體的資源利用率。
遼寧移動采用華為MPP數據庫GaussDB構建統一的大數據系統,逐步替換目前多套多種的數據庫系統,有效解決了傳統應用分類建設造成的整體系統結構復雜、系統利用率低等問題。
系統自2016年上線以來,GaussDB數據庫集群規模已達到80個節點,系統擴容750TB。支持700多個用戶的并行訪問。并逐步遷移多套核心系統至GaussDB數據庫平臺,大幅簡化整個數據平臺的復雜度,降低管理難度。GaussDB數據庫系統最終可以擴展到1024節點、10PB容量,滿足遼寧移動未來業務發展的需求。
同時該系統還支撐了盤錦市智慧城市運行管理平臺,可在旅游、交通、商圈及重點區域等方面有效為政府提供決策依據。在試用期間獲得高度評價。此外手機上網行為分析也支撐了遼寧電視臺春節大數據報告等需求,獲得了良好的社會效益。
2
持續創新,匠心打造
智能數據基礎設施“數據底座”
近年來,華為一直致力于為各行業構建數據基礎設施,加速智能化進程,“數據+智能”正在創造更多的商業價值、產業價值和社會價值,支撐“數據+智能”的數據基礎設施已成為ICT重要組成部分。
華為智能數據與存儲從計算、存儲和數據處理三個領域重定義數據基礎設施。對于計算領域,華為引領多樣性計算,推動計算架構多樣性發展,讓算力更充裕更經濟。其次,在智能存儲領域,為應對存儲效率低、管理復雜的問題,華為重定義存儲架構,推出FusionStorage 8.0智能分布式存儲,可大幅提升效率,引領存儲智能化。同時在數據處理平臺領域,為應對更實時和智能的需求分析,華為重定義數據處理平臺打造全球首款AI-Native數據庫GaussDB,使得數據分析更智能,全面加速實現數據價值。
GaussDB 數據庫是華為大數據解決方案的重要組成,匯聚全球數據庫頂尖專家,從2011年開始研發。大數據是華為ICT戰略的重要支柱,在全球布局8個研究所,持續進行大規模研發投入。GaussDB作為華為研發的一款企業級數據倉庫產品,具備高性能、高可靠、高擴展、高安全、易用特性,兼容標準ANSI SQL 99/2003語法和PostgreSQL生態,為各行業PB級海量大數據分析提供有競爭力的解決方案。
GaussDB在市場上不斷得到客戶的認可,已廣泛應用于國內外金融、交通、運營商、能源、電力、電商等領域的200+客戶,躋身業界一流數據倉庫產品行列,2016年、2017年、2018年連續三年在Gartner魔力象限排名中位列中國廠商第一。展望未來,華為智能數據與存儲將為智能時代構筑數據基礎設施底座,把數字世界帶入每個人、每個家庭、每個組織,構建萬物互聯的智能世界。
-
華為
+關注
關注
215文章
34312瀏覽量
251192 -
中國移動
+關注
關注
22文章
5531瀏覽量
70931 -
MPP
+關注
關注
0文章
24瀏覽量
10582
原文標題:遼寧移動與華為的“數據庫”聯合創新項目,獲獎啦
文章出處:【微信號:gh_6ee649e83ee2,微信公眾號:華為云與計算】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論