11月3日,《IDC MarketScape: 中國大數據管理平臺廠商評估,2020》報告新鮮出爐,這如同中國大數據技術創新與市場競爭格局的晴雨表,從中可以一窺在2020年這樣一個特殊的年份,中國大數據市場的發展與變化。
沒有懸念的是,華為云延續了自2017年以來在IDC MarketScape中國大數據管理平臺廠商評估報告中的優勢地位,在最新的2020年報告中仍舊位居領導者象限的領先位置,并且在“市場份額和技術實力”兩大維度上保持領先。
這份大數據報告中究竟藏著哪些乾坤?讓我們逐一解讀……
大數據市場格局的變與不變
眾所周知,報告主要對活躍在中國市場上的主流大數據廠商從能力、戰略、市場份額三個維度進行全面評估。Y軸體現的是一個廠商的綜合能力,集中表現在企業的產品基本功能、市場表現、團隊技術實力、產品生態等方面;X軸則反應了廠商戰略信息,包括產品戰略、業務戰略等;象限中那些五顏六色的氣泡則直觀地體現了各廠商在大數據市場的份額。
如此一來,整個IDC MarketScape報告各個象限的含義,以及各廠商的位置就一目了然了。相比往年比較分散的市場格局,進入2020年報告的所有廠商都密集分布在“領導者(Leaders)”和“主要玩家(Major Players)”這兩個象限中,而且彼此之間的距離非常接近。這說明,各廠商在大數據產品上都下了大力氣,整體技術水平和創新能力提升較快,市場競爭也越來越激烈。
進入報告的廠商,包括AWS、阿里云、Cloudera、華為云、騰訊云(按字母順序,不分先后)等為代表的廠商在報告中處于靠前的位置,引領著整個大數據市場的持續發展。強者恒強,在2020年的報告中,華為云進一步鞏固了原有的領先地位,是無可爭議的行業領頭羊。但是我們也注意到了今年報告的差異之處,比如,以Cloudera和Kyligence為代表的專業大數據廠商躍升速度很快,比如Kyligence今年首次入榜便一舉進入“主要玩家”象限。這說明在大數據領域,技術和理念創新始終是市場和企業前進最大的動力。
能力、戰略、市場
升維思考,降維做事
在報告中,IDC著重談及了這樣一項深刻洞察:在當前的大數據市場上,技術創新的速度領先于市場需求的速度。具體而言,技術提供商在理念和產品上不斷推陳出新,而行業用戶仍舊在應用分析如何入門的門檻上掙扎。因此造成技術提供能力與用戶需求之間、用戶內部業務部門與IT 部門之間都存在脫節,甚至面臨技術鴻溝。在這樣的背景下,一方面需要理清大數據落地的現狀、挑戰,為行業用戶實現數字化轉型提供參考;另一方面,行業用戶在選擇大數據技術和解決方案供應商時則要更加慎重,兼具領先的技術創新能力和豐富行業實踐的供應商才是理想之選。華為云FusionInsight之所以能夠穩居IDC MarketScape中國大數據管理平臺廠商評估報告的領導者象限并引領大數據發展,就是因為具備了這種能力和積淀。
我們就沿用IDC報告的評估標準,從能力、戰略、市場三個維度為華為大數據的綜合實力畫個像吧。
首先看技術和產品能力。華為云FusionInsight智能數據湖圍繞數據采、存、算、管、用全生命周期管理,是華為云三大使能之數據使能方案的堅實數據底座,其主要包含MRS大數據、DWS數據倉庫、數據湖治理中心等云服務,助力政企客戶實現一企一湖、一城一湖!
在強大技術能力的支撐下,華為云FusionInsight具備3項硬核能力:
1、讓政企客戶在一個大、快、融、穩的數據湖架構下可持續演進:
1) 大:傳統大數據單集群擴容到2000節點就受限,難以突破。華為云FusionInsight MRS支持2萬+大規模單集群,突破擴展性瓶頸!同時還可實現集群聯邦,無限擴容,讓政企客戶在一個架構下持續演進,無需全新重構。大規模特性已在華為內部實踐。華為集團IT OneData一萬節點大集群歷經兩次滾動升級,業務0中斷,已穩定運行六年,華為云FusionInsight使客戶的業務系統穩如磐石,10年無憂!
2) 快:傳統大數據存在分析鏈路長,以T+1事后報表為主。華為云FusionInsight MRS 可以T+0實時增量更新和OLAP分析,讓大數據越用越”快“!
3) 融:傳統大數據分析面臨門檻高、協同難等問題。華為云FusionInsight MRS通過HetuEngine打破地域限制,實現統一SQL,全民BI,讓大數據越用越”容易“!
4) 穩:傳統大數據運維面臨集群多、升級難等問題。華為云FusionInsight MRS可在線滾動升級,無需拆集群、搬應用,業務永不停,技術永最新,服務永在線,讓客戶業務系統穩如磐石!
5) 實時數據湖:傳統數據湖雖可存儲多樣化數據,但仍缺少一些關鍵能力,比如不支持實時增量更新,不支持事務,無法實時OLAP等。華為云FusionInsight支持數據實時批量入湖、實時增量同步,全量數據供應效率實現T+0;支持貼源數據實時多維分析,縮短分析鏈路,走向實時數據湖,讓數據價值近在眼前!
6) 云原生數據湖:具有統一的元數據目錄和存算分離等特性。通過統一數據湖目錄,讓大數據全局可視;通過存算分離,采用企業級EC,最低1.2副本,使TCO降低20%+,讓大數據越用越”省“!通過高帶寬大并發,同成本集群的數據讀寫性能領先業界30%;通過AI容器提升了在科學計算、機器學習和AI推理的資源利用率。
2、DWS數據倉庫:基于分布式架構持續演進,構筑下一代開放的、全場景分析型數據庫,其核心能力如下:
1)大規模擴展性:基于分布式架構,突破大規模分布式場景下集群通信(Multi-Streams)、邏輯集群(Multi-Groups)技術,具備2048節點擴展能力;
2)極致性能:具備多層級全并行計算引擎,可調度海量的算力資源,通過高效的指令效率,實現數據導入快、分析快;
3)穩定可靠:具備硬件和軟件的多層級備份、全方位的故障檢測,實現數據無憂,業務持續可用最后,離線擴容、半在線擴容、在線擴容技術能夠從容應對客戶不同的擴容需求。
3、數據治理:一站式數據湖治理中心,助力企業快速構建從數據接入到數據分析的E2E數據治理體系,消除數據孤島,統一數據標準,加速數據資產化和企業的數字化轉型。
1)通過全域數據視圖統一信息架構,統一數據標準,數據指標,實現數據分層,數據建模;
2)通過一站式全棧平臺實現30+異構數據源的高效數據集成,SQL&Spark&MR等多種數據開發,無需編碼極簡數據開放,一鍵導入導出完整數據模型實現數據資產的快速復制;
3)擁有開放完備的安全體系,數據分級分類,統一安全認證。
截至目前,華為云FusionInsight持續投入,擁有10年+豐富經驗的大數據內核團隊,已獲取專利500+,具有30+PMC&Committer大數據專家,與世界同行,做好數字世界的黑土地。同時堅定開放路線,為開發者、客戶和伙伴開放了CarbonData 和openLooKeng。華為云FusionInsight堅持將好的經驗,持續在華為云大數據社區上為伙伴和客戶開放,共建社區繁榮生態!可見華為云大數據勇攀技術高峰的決心!
其次看市場地位。從每一筆訂單的簽訂到每一個項目的落地,再到每一位客戶的成功,華為云大數據就是在這樣一點一滴的積累中逐步擴大著市場領先優勢。
IDC的統計數據顯示,2020年,中國大數據技術與服務市場收益前三的行業是金融、政府和運營商,三者總和占中國大數據整體市場的50%以上;同樣具有海量數據的互聯網、視頻直播、跨境電商等客戶,也逐漸認可并采購華為云大數據相關產品。華為云大數據落地成功也集中體現在這些領域。舉例來說,在金融行業,中國50%的TOP20金融客戶均已使用華為云FusionInsight構建其大數據平臺,在某行構建金融數據湖,實現一份數據全局可用,免除數據搬遷,提升業務協同效率10倍,存儲周期提升2倍,資源利用率最大可達90%,同時利用大數據+AI實現了金融行業的實時風控功能,從事前風控轉變為事中攔截風險交易,已挽回損失數億元;在政府行業,華為云FusionInsight承載了國內70%的平安城市建設,50%的智慧城市、數字城市建設。由于今年突發疫情,華為云FusionInsight結合行業積累經驗,僅用20+天實現全國陸續上線疫情防控大數據平臺,上線后在某市,從3000萬人口中秒級找到疑似人群,高效的支撐了全國新冠肺炎疫情防控工作;在運營商行業,中國三大運營商均使用華為云FusionInsight構建數據平臺,廣東移動基于華為云FusionInsight,聯合政企客戶共同打造智慧電網、智慧交通、智慧港口、高清視頻等系列標桿應用,打通數據全生命周期鏈路,實現對內業務支撐、對外應用賦能,全面支撐了各類政務、民生等大數據應用服務。同時,華為堅持“自己的降落傘自己先跳”,華為集團IT通過FusionInsight構建OneData大數據集群,實現大數據平臺在大規模場景下的開拓,OneData集群其規模已至1萬+節點;同時,實現了統一的數據管理服務,在菩提海UniDB產品中,通過邏輯統一方式,把50+物理分散的計算集群(Hadoop+MPP),基于五統一(數據安全,元數據目錄,數據集成,數據訪問,任務調度),整合成湖倉一體的架構,支撐上千個企業租戶的PB級數據分析處理需求。華為集團IT OneData大集群歷經兩次滾動升級,業務0中斷,已穩定運行六年。從上面案例可知,華為云FusionInsight將是政企客戶的標準底座,可實現一企一湖、一城一湖,一站式支撐多場景高效分析。
截至2020 年10月底,華為云FusionInsight智能數據湖已服務60+個國家和地區、3000+客戶,覆蓋政府、金融、運營商、電力、傳媒、醫療、教育、交通、油氣、物流、零售、制造、互聯網等諸多行業,助力客戶以數據驅動業務增長和商業成功,使政企客戶可基于華為云FusionInsight實現“一企一湖,一城一湖”!
華為云FusionInsight的產品功能、創新能力、實踐成果、生態體系建設得到了市場層面的充分肯定:華為云FusionInsight MRS把“復雜”留給自己,把“簡單”留給伙伴,共建社區繁榮生態,聯合800+ISV,共創共贏,助力政企數字化轉型成功!2020年,華為云FusionInsight除過在本次穩居IDC MarketScape中國大數據管理平臺領導者象限,其市場份額和技術實力雙領先,華為云FusionInsight還連續四年入圍中國大數據企業50強,并榮獲中國信息通信大數據行業影響力獎、中國大數據平臺類最佳解決方案獎……
最后再來談談戰略。華為云FusionInsight自2009年開始投入研究,并于2014年開始推出商用化產品,堅持技術創新,并始終秉承開源開放的理念,踐行“平臺+生態”戰略,攜手800+合作伙伴,為政企客戶提供“懂行”的大數據解決方案。所謂懂行,一方面要不斷深入理解客戶不斷發展的業務訴求,另一方面,要持續技術創新并引領行業發展,商業訴求+技術創新雙輪驅動行業可持續、高質量發展,“用數”助力客戶商業成功!上面的論述已經充分證明,華為是“懂行”的大數據專家。
進入智能數據時代,隨著大數據技術更加成熟,以及5G、AI、IoT技術的規模化商用,政企客戶在商業訴求與技術創新的雙輪驅動下,不斷深化數字化轉型,并向智能化升級。企業構建技術領先的大數據平臺,應該選擇具有競爭力的數據底座。數據的增長是無限的,小集群總會成長為大集群,一個技術領先、可平滑升級、可持續演進的數據底座非常重要。華為云FusionInsight智能數據湖的愿景就是打造技術領先的大數據底座,助力客戶實現一企一湖一城一湖!
大數據市場拐點將現
IDC預測,中國大數據市場規模將在2020年達到104.2億美元。大數據市場已經熱了多年,市場快速演進、技術持續升級、客戶需求不斷升溫,再加上利好政策的刺激,新的市場拐點可能會很快出現。
2020《政府工作報告》中明確提出要“推進要素市場化配置改革”,以及“培育技術和數據市場,激活各類要素潛能”。數據作為新的市場要素,其重要性和價值得到進一步彰顯。大數據將在企業從數字化轉型到智能化升級的轉變中發揮不可替代的作用,而建設大數據平臺依然是行業用戶的“剛需”,并在新基建、十四五等戰略中持續構筑數據堅實底座,助力政企數字化轉型。IDC預測,2019-2024年,數據的復合增長率將保持在26%,呈幾何級數增長的數據量將給數據的存儲、管理和分析帶來更大的壓力和全新的挑戰。這一方面要求在大數據技術上不斷尋求新的突破和創新,包括湖倉一體、實時數據湖、交互式分析等將成為新的熱點;另一方面,在商業模式上,企業也需要不斷調整、擴展業務邊界,加強生態合作,增強企業與外部間的數據交互,這對數據集成、開發、實時入湖分析等將產生積極的促進作用。
談到未來大數據應用的發展趨勢,IDC概括了兩點:一是主流廠商都在積極拓展大數據解決方案,強化數據治理能力,建立數據服務能力,進一步降低數據分析的復雜性;二是數據管理平臺要進一步簡化和統一,在數據庫、數倉、大數據平臺、數據湖等混合環境中,簡化數據管理、提高用數效率是首要任務。到2020年,大數據技術創新趨勢的焦點已轉向LakeHouse、企業創新焦點已轉向湖倉一體,讓大數據與數倉互聯互通、協同計算,兼顧過去與未來!從華為云的技術創新和行業實踐來看,這兩方面的考慮都已經在落地和不斷推進之中。
責任編輯:gt
-
阿里云
+關注
關注
3文章
941瀏覽量
42967 -
大數據
+關注
關注
64文章
8864瀏覽量
137304 -
華為云
+關注
關注
3文章
2432瀏覽量
17314
發布評論請先 登錄
相關推薦
評論