Spark環(huán)境下并行立方體計(jì)算方法
推薦 + 挑錯(cuò) + 收藏(0) + 用戶(hù)評(píng)論(0)
針對(duì)傳統(tǒng)聯(lián)機(jī)分析處理( OLAP)處理大數(shù)據(jù)時(shí)實(shí)時(shí)響應(yīng)能力差的問(wèn)題,研究基于分布式內(nèi)存計(jì)算框架Spark加速的數(shù)據(jù)立方體計(jì)算方法,設(shè)計(jì)基于Spark內(nèi)存集群的自底向上構(gòu)造(BUC)算法-BUCPark,來(lái)提高BUC的并行度和大數(shù)據(jù)適應(yīng)能力。在此基礎(chǔ)上,為避免內(nèi)存中迭代的立方體單元膨脹,基于內(nèi)存重復(fù)利用和共享的思想設(shè)計(jì)改進(jìn)的BUCPark算法-LBUCPark。實(shí)驗(yàn)結(jié)果表明:LBUCPark算法性能優(yōu)于BUC算法和BUCPark算法,能夠勝任大數(shù)據(jù)背景下的快速數(shù)據(jù)立方體計(jì)算任務(wù)。
非常好我支持^.^
(0) 0%
不好我反對(duì)
(0) 0%
下載地址
Spark環(huán)境下并行立方體計(jì)算方法下載
相關(guān)電子資料下載
- STM32串口通信入門(mén)!附通信編程示例 469
- 天數(shù)智芯主導(dǎo)的DeepSpark開(kāi)源社區(qū)發(fā)布百大應(yīng)用開(kāi)放平臺(tái)24.06版本 436
- spark運(yùn)行的基本流程 91
- Spark基于DPU的Native引擎算子卸載方案 180
- 嘉興海棠電子:環(huán)保與創(chuàng)新并行的網(wǎng)線行業(yè)領(lǐng)軍者 83
- 百度前高管景鯤與朱凱華創(chuàng)立AI搜索公司,Genspark產(chǎn)品驚艷上線 458
- 精益思維賦能可穿戴設(shè)備:創(chuàng)新與效率并行的未來(lái)科技新篇章 122
- 關(guān)于Spark的從0實(shí)現(xiàn)30s內(nèi)實(shí)時(shí)監(jiān)控指標(biāo)計(jì)算 111
- 普渡機(jī)器人入駐宜家 為顧客帶來(lái)科技與舒適并行的購(gòu)物方式 449
- 并行連接的SiC MOSFET可以帶來(lái)更多電力 501