精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

分布式發(fā)布與訂閱系統(tǒng)Apache Kafka在即將發(fā)布的2.8版本

電子工程師 ? 來源:科技社techpub ? 作者:科技社techpub ? 2021-05-31 09:58 ? 次閱讀

分布式發(fā)布與訂閱系統(tǒng)Apache Kafka在即將發(fā)布的2.8版本,使用Kafka內(nèi)部的Quorum控制器來取代ZooKeeper,因此用戶第一次可在完全不需要ZooKeeper的情況下執(zhí)行Kafka,這不只節(jié)省運(yùn)算資源,并且也使得Kafka效能更好,還可支持規(guī)模更大的集群。

過去Apache ZooKeeper是Kafka這類分布式系統(tǒng)的關(guān)鍵,ZooKeeper扮演協(xié)調(diào)代理的角色,所有代理服務(wù)器啟動時,都會連接到Zookeeper進(jìn)行注冊,當(dāng)代理狀態(tài)發(fā)生變化時,Zookeeper也會儲存這些數(shù)據(jù),在過去,ZooKeeper是一個強(qiáng)大的工具,但是畢竟ZooKeeper是一個獨立的軟件,使得Kafka整個系統(tǒng)變得復(fù)雜,因此官方?jīng)Q定使用內(nèi)部Quorum控制器來取代ZooKeeper。

這項工作從去年4月開始,而現(xiàn)在這項工作取得部分成果,用戶將可以在2.8版本,在沒有ZooKeeper的情況下執(zhí)行Kafka,官方稱這項功能為Kafka Raft元數(shù)據(jù)模式(KRaft)。在KRaft模式,過去由Kafka控制器和ZooKeeper所操作的元數(shù)據(jù),將合并到這個新的Quorum控制器,并且在Kafka集群內(nèi)部執(zhí)行,當(dāng)然,如果使用者有特殊使用情境,Quorum控制器也可以在專用的硬件上執(zhí)行。

KRaft協(xié)定使用事件驅(qū)動機(jī)制來追蹤整個集群的元數(shù)據(jù),過去必須依賴RPC來處理的任務(wù),現(xiàn)在受益于事件驅(qū)動以及實際的日志傳輸,這些改變所帶來的好處,便是讓Kafka仍夠支持更多的分割。

過去Kafka因為帶著ZooKeeper,因此被認(rèn)為擁有笨重的基礎(chǔ)設(shè)施,而在移除ZooKeeper之后,Kafka更輕巧更適用于小規(guī)模工作負(fù)載,輕量級單體程序適合用于邊緣以及輕量級硬件解決方案。

值得注意的是,在搶先體驗版中,有部分像是ACL、安全以及交易等功能都尚未支持,而且在KRaft模式下,也還不支持重新分配分割和JBOD,官方提到,這些功能會在今年稍晚的版本中提供,由于很多功能處于測試階段,不建議大家將其用于生產(chǎn)環(huán)境中。

參考:https://www.confluent.io/blog/kafka-without-zookeeper-a-sneak-peek/https://www.ithome.com.tw/news/143569

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 控制器
    +關(guān)注

    關(guān)注

    112

    文章

    16203

    瀏覽量

    177411
  • RPC
    RPC
    +關(guān)注

    關(guān)注

    0

    文章

    111

    瀏覽量

    11512
  • ACL
    ACL
    +關(guān)注

    關(guān)注

    0

    文章

    61

    瀏覽量

    11964
  • zookeeper
    +關(guān)注

    關(guān)注

    0

    文章

    33

    瀏覽量

    3665

原文標(biāo)題:Kafka 2.8獨立運(yùn)行,不再需要ZooKeeper

文章出處:【微信號:AndroidPush,微信公眾號:Android編程精選】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    基于ArkTS語言的OpenHarmony APP應(yīng)用開發(fā):公共事件的訂閱發(fā)布

    1、程序介紹 示例主要展示了公共事件相關(guān)的功能,實現(xiàn)了一個檢測用戶部分行為的應(yīng)用。 具體而言,本案例實現(xiàn)了如下幾個公共事件功能: 通過訂閱系統(tǒng)公共事件,實現(xiàn)對用戶操作行為(亮滅屏、斷聯(lián)網(wǎng))的監(jiān)測
    發(fā)表于 09-18 13:16

    安科瑞分布式光伏系統(tǒng)在某重工企業(yè)18MW分布式光伏中應(yīng)用

    2024年7月16日,江蘇省發(fā)改委發(fā)布《關(guān)于高質(zhì)量做好全省分布式光伏接網(wǎng)消納的通知(征求意見稿)》,計劃大力支持分布式光伏的發(fā)展! 1、未來分布式光伏規(guī)模規(guī)劃 根據(jù)規(guī)劃,2024、20
    的頭像 發(fā)表于 07-19 11:30 ?482次閱讀
    安科瑞<b class='flag-5'>分布式</b>光伏<b class='flag-5'>系統(tǒng)</b>在某重工企業(yè)18MW<b class='flag-5'>分布式</b>光伏中應(yīng)用

    ENV-Windows v2.0.0版本發(fā)布

    ENV-Windows v2.0.0版本發(fā)布
    的頭像 發(fā)表于 06-26 08:35 ?628次閱讀
    ENV-Windows v2.0.0<b class='flag-5'>版本</b><b class='flag-5'>發(fā)布</b>

    鴻蒙開發(fā)接口數(shù)據(jù)管理:【@ohos.data.distributedDataObject (分布式數(shù)據(jù)對象)】

    模塊提供管理基本數(shù)據(jù)對象的相關(guān)能力,包括創(chuàng)建、查詢、刪除、修改、訂閱等;同時支持相同應(yīng)用多設(shè)備間的分布式數(shù)據(jù)對象協(xié)同能力。
    的頭像 發(fā)表于 06-07 17:51 ?1422次閱讀
    鴻蒙開發(fā)接口數(shù)據(jù)管理:【@ohos.data.distributedDataObject (<b class='flag-5'>分布式</b>數(shù)據(jù)對象)】

    分布式SCADA系統(tǒng)的特點的組成

    在工業(yè)自動化和能源管理領(lǐng)域,SCADA(Supervisory Control And Data Acquisition)系統(tǒng)扮演著至關(guān)重要的角色。其中,分布式SCADA系統(tǒng)憑借其獨特的結(jié)構(gòu)和功能
    的頭像 發(fā)表于 06-07 14:43 ?489次閱讀

    浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲AS13000G7-N系列

    近日,浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲AS13000G7-N系列。該系列依托浪潮信息自研分布式文件系統(tǒng),搭載新一代數(shù)據(jù)加速引擎DataTurbo,
    的頭像 發(fā)表于 05-08 09:38 ?510次閱讀
    浪潮信息<b class='flag-5'>發(fā)布</b>為大模型專門優(yōu)化的<b class='flag-5'>分布式</b>全閃存儲AS13000G7-N系列

    HarmonyOS實戰(zhàn)案例:【分布式賬本】

    Demo基于Open Harmony系統(tǒng)使用ETS語言進(jìn)行編寫,Demo主要通過設(shè)備認(rèn)證、分布式拉起、分布式數(shù)據(jù)管理等功能來實現(xiàn)。
    的頭像 發(fā)表于 04-12 16:40 ?1265次閱讀
    HarmonyOS實戰(zhàn)案例:【<b class='flag-5'>分布式</b>賬本】

    法國FEBUS分布式光纖聲波系統(tǒng)發(fā)布A1 v2版本

    法國FEBUS公司是一家專業(yè)從事分布式光纖傳感設(shè)備研發(fā)和制造的法國企業(yè),總部坐落于法國城市PAU,這座城市也是FEBUS公司起步階段強(qiáng)有力支持者國際石油公司道達(dá)爾能源的總部。
    的頭像 發(fā)表于 03-22 14:06 ?889次閱讀
    法國FEBUS<b class='flag-5'>分布式</b>光纖聲波<b class='flag-5'>系統(tǒng)</b><b class='flag-5'>發(fā)布</b>A1 v2<b class='flag-5'>版本</b>

    得瑞領(lǐng)新參編團(tuán)體標(biāo)準(zhǔn)《高性能計算 分布式存儲系統(tǒng)技術(shù)要求》正式發(fā)布

    得瑞領(lǐng)新參編的《高性能計算 分布式存儲系統(tǒng)技術(shù)要求》團(tuán)標(biāo)由中國電子工業(yè)標(biāo)準(zhǔn)化技術(shù)協(xié)會正式發(fā)布,這標(biāo)志著得瑞在高性能計算和分布式存儲領(lǐng)域的技術(shù)實力得到認(rèn)可,同時也展現(xiàn)了公司在行業(yè)標(biāo)準(zhǔn)制定
    的頭像 發(fā)表于 03-01 10:00 ?426次閱讀
    得瑞領(lǐng)新參編團(tuán)體標(biāo)準(zhǔn)《高性能計算 <b class='flag-5'>分布式</b>存儲<b class='flag-5'>系統(tǒng)</b>技術(shù)要求》正式<b class='flag-5'>發(fā)布</b>

    什么是分布式架構(gòu)?

    分布式架構(gòu)是指將一個系統(tǒng)或應(yīng)用拆分成多個獨立的節(jié)點,這些節(jié)點通過網(wǎng)絡(luò)連接進(jìn)行通信和協(xié)作,以實現(xiàn)共同完成任務(wù)的一種架構(gòu)模式。這種架構(gòu)模式旨在提高系統(tǒng)的可擴(kuò)展性、可靠性和性能表現(xiàn)。 一、分布式
    的頭像 發(fā)表于 01-12 15:04 ?1166次閱讀
    什么是<b class='flag-5'>分布式</b>架構(gòu)?

    鴻蒙原生應(yīng)用開發(fā)——分布式數(shù)據(jù)對象

    分布式數(shù)據(jù)對象保存 6、分布式數(shù)據(jù)對象訂閱(數(shù)據(jù)變更,上下線) 7、分布式數(shù)據(jù)對象加入、退出分布式組網(wǎng) 03、前提準(zhǔn)備 1、開發(fā)工具:De
    發(fā)表于 12-08 10:01

    分布式系統(tǒng)硬件資源池原理和接入實踐

    把各個設(shè)備的硬件外設(shè)抽象為外設(shè)信息單元,外設(shè)信息在各個可信設(shè)備之間自動同步,如此,實現(xiàn)了外設(shè)信息的全局可見;結(jié)合分布式硬件虛擬化技術(shù),實現(xiàn)任意設(shè)備之間的硬件外設(shè)能力跨設(shè)備調(diào)用;分布式硬件資源池作為系統(tǒng)
    發(fā)表于 12-06 10:02

    zookeeper和kafka的關(guān)系

    Zookeeper和Kafka是兩個不同的開源軟件,它們可以在分布式系統(tǒng)中發(fā)揮不同的作用。下面我將詳細(xì)說明它們之間的關(guān)系以及它們在分布式系統(tǒng)
    的頭像 發(fā)表于 12-03 16:39 ?1489次閱讀

    zookeeper分布式原理

    Zookeeper是一個開源的分布式協(xié)調(diào)服務(wù),可以用于構(gòu)建高可用、高性能的分布式系統(tǒng)。它提供了一個簡單且高效的層次命名空間,可以用來存儲配置信息、狀態(tài)信息、命名服務(wù)等。Zookeeper的設(shè)計目標(biāo)
    的頭像 發(fā)表于 12-03 16:33 ?620次閱讀

    分布式網(wǎng)絡(luò)分組和通信

    : $ export ROS_DOMAIN_ID= 如果分配的ID不同,則兩者無法實現(xiàn)通信。 話題分布式通信 之前編寫的例程是否可以在不修改任何代碼的情況下,直接使用呢? 以話題通信為例,旭日派作為發(fā)布者,發(fā)布Hello Wor
    的頭像 發(fā)表于 11-27 15:59 ?440次閱讀
    <b class='flag-5'>分布式</b>網(wǎng)絡(luò)分組和通信