精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

大數(shù)據(jù)Hadoop的優(yōu)點和缺點分別是什么

Wildesbeast ? 來源:未知 ? 作者:四川達(dá)內(nèi) ? 2019-10-04 12:16 ? 次閱讀

Hadoop的優(yōu)點

(1)Hadoop具有按位存儲和處理數(shù)據(jù)能力的高可靠性。

(2)Hadoop通過可用的計算機(jī)集群分配數(shù)據(jù),完成存儲和計算任務(wù),這些集群可以方便地擴(kuò)展到數(shù)以千計的節(jié)點中,具有高擴(kuò)展性。

(3)Hadoop能夠在節(jié)點之間進(jìn)行動態(tài)地移動數(shù)據(jù),并保證各個節(jié)點的動態(tài)平衡,處理速度非常快,具有高效性。

(4)Hadoop能夠自動保存數(shù)據(jù)的多個副本,并且能夠自動將失敗的任務(wù)重新分配,具有高容錯性。

Hadoop的缺點

(1)Hadoop不適用于低延遲數(shù)據(jù)訪問。

(2)Hadoop不能高效存儲大量小文件。

(3)Hadoop不支持多用戶寫入并任意修改文件。

Hadoop的核心組件

Hadoop自誕生以來,主要出現(xiàn)了Hadoop1、Hadoop2、Hadoop3三個系列多個版本。

HDFS和MapReduce是Hadoop1的核心組件,Hadoop生態(tài)圈里的很多組件都是基于HDFS和MapReduce發(fā)展出來的。在繼Hadoop1之后出現(xiàn)了Hadoop2,Hadoop2在Hadoop1的基礎(chǔ)上做了改進(jìn)。

相比Hadoop1,Hadoop2的三大核心組件分別是HDFS、MapReduce、Yarn。目前市面上絕大部分企業(yè)使用的是Hadoop2,本書使用的是Hadoop2.7.3這一版本。

Hadoop2的一個公共模塊和三大核心組件組成了四個模塊,簡介如下。

(1)HadoopCommon:為其他Hadoop模塊提供基礎(chǔ)設(shè)施。

(2)HDFS:具有高可靠性、高吞吐量的分布式文件系統(tǒng)。

(3)MapReduce:基于Yarn系統(tǒng),分布式離線并行計算框架。

(4)Yarn:負(fù)責(zé)作業(yè)調(diào)度與集群資源管理的框架。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
收藏 人收藏

    評論

    相關(guān)推薦

    hadoop hdfs 文件優(yōu)點

    ,但也有優(yōu)于傳統(tǒng)分布式文件系統(tǒng)的優(yōu)點。1. 支持超大文件HDFS分布式文件系統(tǒng)具有很大的數(shù)據(jù)集,可以存儲TB或PB級別的超大數(shù)據(jù)文件,能夠提供比較高的數(shù)據(jù)傳輸帶寬與
    發(fā)表于 03-23 14:22

    hadoop框架結(jié)構(gòu)的說明介紹

    火爆的hadoop、Maperduce和許多Nosql系統(tǒng)。這三大技術(shù)也是整個大數(shù)據(jù)技術(shù)的核心基礎(chǔ)。目前國內(nèi)的hadoop商業(yè)發(fā)行版也是比較多,這些hadoop商業(yè)版大部分都是由國外發(fā)
    發(fā)表于 10-15 15:59

    DKHadoop大數(shù)據(jù)平臺架構(gòu)詳解

    大數(shù)據(jù)的時代已經(jīng)來了,信息的爆炸式增長使得越來越多的行業(yè)面臨這大量數(shù)據(jù)需要存儲和分析的挑戰(zhàn)。Hadoop作為一個開源的分布式并行處理平臺,以其高拓展、高效率、高可靠等優(yōu)點越來越受到歡迎
    發(fā)表于 10-17 15:12

    基于hadoop的免費(fèi)大數(shù)據(jù)平臺有哪些?

    下載的。DKhadoop免費(fèi)版本的沒有安裝過的,我用的是大快的其他版本的。可能是習(xí)慣了吧,所以覺得還是很好用的。其實提供免費(fèi)版試用版本的不是只有大快搜索了,很多做大數(shù)據(jù)hadoop開發(fā)的一般都會提供一些“乞丐版”。但
    發(fā)表于 11-07 14:10

    hadoop和spark的區(qū)別

    什么大的區(qū)別。我記得剛開始接觸大數(shù)據(jù)這方面內(nèi)容的時候,也就這個問題查閱了一些資料,在《FreeRCH大數(shù)據(jù)一體化開發(fā)框架》的這篇說明文檔中有就Hadoop和spark的區(qū)別進(jìn)行了簡單的說明,但我覺得解釋的也
    發(fā)表于 11-30 15:51

    大數(shù)據(jù)hadoop入門之hadoop家族產(chǎn)品詳解

    ` 大數(shù)據(jù)這個詞也許幾年前你聽著還會覺得陌生,但我相信你現(xiàn)在聽到hadoop這個詞的時候你應(yīng)該都會覺得“熟悉”!越來越發(fā)現(xiàn)身邊從事hadoop開發(fā)或者是正在學(xué)習(xí)hadoop的人變多了。
    發(fā)表于 12-26 15:02

    大數(shù)據(jù)的來源分析

    Hadoop教程:大數(shù)據(jù)概述
    發(fā)表于 08-27 10:52

    腳本語言的優(yōu)缺點分別是什么

    什么是腳本語言?腳本語言的特點有哪些?腳本語言的優(yōu)缺點分別是什么?
    發(fā)表于 10-09 09:36

    PBGA封裝的優(yōu)點缺點分別是什么?

    PBGA封裝的優(yōu)點缺點分別是什么? PBGA封裝的優(yōu)
    發(fā)表于 03-04 13:33 ?5452次閱讀

    hadoop大數(shù)據(jù)windows搭建環(huán)境

    hadoop大數(shù)據(jù)windows搭建環(huán)境
    發(fā)表于 09-08 08:52 ?4次下載
    <b class='flag-5'>hadoop</b><b class='flag-5'>大數(shù)據(jù)</b>windows搭建環(huán)境

    hadoop是什么_華為大數(shù)據(jù)平臺hadoop你了解多少

    Hadoop得以在大數(shù)據(jù)處理應(yīng)用中廣泛應(yīng)用得益于其自身在數(shù)據(jù)提取、變形和加載(ETL)方面上的天然優(yōu)勢。Hadoop的分布式架構(gòu),將大數(shù)據(jù)
    發(fā)表于 12-25 16:46 ?2.3w次閱讀
    <b class='flag-5'>hadoop</b>是什么_華為<b class='flag-5'>大數(shù)據(jù)</b>平臺<b class='flag-5'>hadoop</b>你了解多少

    大數(shù)據(jù)的優(yōu)缺點有哪些?

    隨著數(shù)字化時代的到來,大數(shù)據(jù)已經(jīng)成為了各行各業(yè)中不可或缺的一部分。尤其是在企業(yè)中,大數(shù)據(jù)的應(yīng)用已經(jīng)越來越普及。但是,就像所有技術(shù)一樣,大數(shù)據(jù)也有其優(yōu)點
    的頭像 發(fā)表于 03-15 11:17 ?6372次閱讀

    php的優(yōu)點缺點分別是什么

    PHP是一種廣泛應(yīng)用于Web開發(fā)領(lǐng)域的腳本語言,它有著許多獨有的優(yōu)點缺點。 一、PHP的優(yōu)點: 1.易于學(xué)習(xí)和使用:PHP語法簡單易懂,類似于C語言,對于初學(xué)者來說是一門理想的語言。即使對沒有編程
    的頭像 發(fā)表于 12-04 16:16 ?2349次閱讀

    Hadoop是什么?其核心由兩大部分組成,分別是什么?

    了分布式存儲和計算的方式,能夠快速有效地處理大量數(shù)據(jù),并具備良好的擴(kuò)展性和容錯性。 Hadoop的核心由兩大部分組成,分別是Hadoop分布式文件系統(tǒng)(
    的頭像 發(fā)表于 02-05 10:52 ?1681次閱讀

    基于Kepware的Hadoop大數(shù)據(jù)應(yīng)用構(gòu)建-提升數(shù)據(jù)價值利用效能

    處理超大數(shù)據(jù)集。 Hadoop的生態(tài)系統(tǒng)非常豐富,包括許多相關(guān)工具和技術(shù),如Hive、Pig、HBase等,這些工具可以方便地構(gòu)建復(fù)雜的大數(shù)據(jù)應(yīng)用。Hadoop廣泛應(yīng)用于各種場景,包括
    的頭像 發(fā)表于 10-08 15:12 ?127次閱讀
    基于Kepware的<b class='flag-5'>Hadoop</b><b class='flag-5'>大數(shù)據(jù)</b>應(yīng)用構(gòu)建-提升<b class='flag-5'>數(shù)據(jù)</b>價值利用效能