華為云OBS大數(shù)據(jù)存算分離方案,助力企業(yè)順利實(shí)現(xiàn)數(shù)字化轉(zhuǎn)型!
隨著大數(shù)據(jù)技術(shù)的飛速發(fā)展,人們對數(shù)據(jù)價值的認(rèn)識逐漸加深,進(jìn)而對大數(shù)據(jù)產(chǎn)生了前所未有的重視。當(dāng)下,大數(shù)據(jù)更是憑借著獨(dú)特的優(yōu)勢融入到了各行各業(yè),相關(guān)企業(yè)還針對大數(shù)據(jù)價值的開發(fā)成立了大數(shù)據(jù)分析部門,將大數(shù)據(jù)的使用能力作為了企業(yè)發(fā)展的重要考量。那么,在數(shù)字化極速發(fā)展的當(dāng)下,企業(yè)到底該如何進(jìn)行數(shù)字化的轉(zhuǎn)型升級呢?
眾所周知,當(dāng)下企業(yè)在進(jìn)行數(shù)字化轉(zhuǎn)型升級時,都不同程度的遇到了多集群數(shù)據(jù)共享難的挑戰(zhàn),一般情況下數(shù)據(jù)只能在集群內(nèi)部使用,數(shù)據(jù)共享往往只能通過拷貝實(shí)現(xiàn),而且公共數(shù)據(jù)集多份存儲,容易出現(xiàn)數(shù)據(jù)冗余,給我們帶來不便。同時,大多數(shù)數(shù)據(jù)的計算存儲資源綁定,當(dāng)計算和需求不一致時,只能夠等比擴(kuò)容,容易造成資源浪費(fèi),而且數(shù)據(jù)三副本存儲,利用率低,成本高。
簡而言之,當(dāng)下很多企業(yè)在數(shù)字化轉(zhuǎn)型升級過程中,花了很多錢,但是卻沒有花到點(diǎn)子上,以至于給企業(yè)帶來的效益比并不明顯,故而在進(jìn)行數(shù)字化轉(zhuǎn)型時,越來越多的企業(yè)選擇以華為云為例的云服務(wù)商來幫助自己進(jìn)行數(shù)字化底層基座的搭建與運(yùn)維服務(wù)。比如針對上述企業(yè)數(shù)字化轉(zhuǎn)型中遇到的痛點(diǎn),華為云推出了基于對象存儲服務(wù)OBS作為統(tǒng)一數(shù)據(jù)湖存儲的大數(shù)據(jù)存算分離方案。
據(jù)了解,該方案基于對象存儲服務(wù)OBS的大容量高帶寬能力,以及多協(xié)議共享訪問技術(shù)(HDFS/POSIX/OBS API),實(shí)現(xiàn)了Hadoop生態(tài)多計算引擎(Hive、Spark等)兼容對接。相比傳統(tǒng)企業(yè)在本地IDC機(jī)房部署大數(shù)據(jù)業(yè)務(wù),華為云數(shù)據(jù)存算分離方案能夠通過統(tǒng)一的權(quán)限控制,實(shí)現(xiàn)多集群間的數(shù)據(jù)共享,做到數(shù)據(jù)"0"拷貝,實(shí)現(xiàn)了數(shù)據(jù)的融合高效和協(xié)同分析。同時,它的計算和存儲相互分離,支持獨(dú)立擴(kuò)容或者縮容,計算資源可彈性伸縮,資源利用率得到了提升。此外,對象存儲服務(wù)OBS支持利用率最高的分布式數(shù)據(jù)容錯技術(shù)Erasure code,磁盤利用率大幅提升,數(shù)據(jù)存儲空間需求遠(yuǎn)低于三副本,能夠更好的幫助企業(yè)實(shí)現(xiàn)降本的目的。
另外,對象存儲服務(wù)OBS提供了OBSFileSystem插件(OBSA-HDFS),可與上層大數(shù)據(jù)平臺無縫對接,實(shí)現(xiàn)業(yè)務(wù)零改造。該插件的主要的作用是提供HDFS文件系統(tǒng)相關(guān)接口的實(shí)現(xiàn),讓大數(shù)據(jù)計算引擎可以將OBS作為HDFS協(xié)議的底層存儲,讓企業(yè)能夠更好的利用大數(shù)據(jù)資源。
計費(fèi)方面,對象存儲服務(wù)OBS相對來說也更為經(jīng)濟(jì)劃算。企業(yè)可以根據(jù)自己的使用需求按需擴(kuò)縮,用多少付多少,不用擔(dān)心業(yè)務(wù)少的時候造成資源浪費(fèi),能夠更好的滿足企業(yè)業(yè)務(wù)的靈活訴求,幫助企業(yè)節(jié)省運(yùn)營成本,使企業(yè)有更多的資金去打通從技術(shù)到運(yùn)營的全鏈路。
目前,華為云已經(jīng)在為眾多企業(yè)提供數(shù)字化的轉(zhuǎn)型升級服務(wù),并且在服務(wù)的過程中,憑借著技術(shù)強(qiáng)、資源多、創(chuàng)新快和更可靠的服務(wù),幫助諸多企業(yè)實(shí)現(xiàn)了效益倍增。而華為云對于服務(wù)安全方面的操守,即不碰客戶數(shù)據(jù)、不與客戶搶生意、沒有數(shù)據(jù)變現(xiàn)業(yè)務(wù)等,也讓更多的企業(yè)能夠放心的與華為云進(jìn)行合作。同時,可以預(yù)測的是,通過幫助企業(yè)快速構(gòu)建海量數(shù)據(jù)信息處理系統(tǒng),并對海量信息數(shù)據(jù)實(shí)時與非實(shí)時進(jìn)行分析挖掘,華為云能夠助力更多企業(yè)發(fā)現(xiàn)全新價值點(diǎn)和商機(jī),進(jìn)而在經(jīng)濟(jì)不穩(wěn)定的情況下,獲得更好的發(fā)展。
審核編輯 黃昊宇
-
華為云
+關(guān)注
關(guān)注
3文章
2423瀏覽量
17312 -
存算分離
+關(guān)注
關(guān)注
0文章
6瀏覽量
58
發(fā)布評論請先 登錄
相關(guān)推薦
評論