精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

分析型數據庫如何創新

OSC開源社區 ? 來源:OSC開源社區 ? 2023-06-02 16:10 ? 次閱讀

在群雄逐鹿的 OLAP 數據庫市場,開源引擎 ClickHouse 憑借其出色的性能成為公認的黑馬。官方稱其性能超過了市場上同類的列式數據庫,每臺服務器每秒可處理數億到超過十億行、體積達數十 GB 的數據,運行速度比傳統數據庫快 100-1000 倍。
高效運行速度的另一面,還隱含著成本、性能、容量等諸多問題,比如不支持事務,不能夠保證數據的一致性和完整性,不存在隔離級別,不支持高并發等等。這導致 2016 年開源的 ClickHouse 難以應對當下更加復雜,數據規模更加巨大的場景需求。

比如在字節內部,從 2018 年引入 ClickHouse,因為業務的發展,要服務于大量的用戶,數據規模變得越來越巨大。由于 ClickHouse 是 Shared-Nothing 的架構,每個節點是獨立的,不會共享存儲資源等,因而計算資源和存儲資源是緊耦合的。這導致擴縮容成本變高,且會涉及到數據遷移,不能實時按需的擴縮容,從而導致資源的浪費。此外,ClickHouse 的緊耦合的架構會導致多租戶在共享集群相互影響,另外由于讀寫在一個節點完成,導致讀寫受到影響,最后 ClickHouse 在復雜查詢上例如多表 join 等的性能支持并不是很好。
字節 ClickHouse 使用情況 為了解決這些痛點,字節在 ClickHouse 架構基礎上進行了升級,于 2020 年在內部啟動了 ByConity 項目,并于 2023 年 1 月發布 Beta 版本,將于 5 月底正式對外開源。

ByConity 是一個開源的云原生數據倉庫,采用存儲 - 計算分離的架構。它支持多個關鍵功能特性,如存儲計算分離、彈性擴縮容、租戶資源隔離和數據讀寫的強一致性等。通過利用主流的 OLAP 引擎優化,如列存儲、向量化執行、MPP 執行、查詢優化等,ByConity 可以提供優異的讀寫性能。

ByConity 的架構分為三層,如下圖所示,服務接入層包含負責客戶端數據和服務的接入,也就是 ByConity Server;計算組為 ByConity 的計算資源層,每個 Virtual Warehouse 是一個計算組;數據存儲層由分布式文件系統,如 HDFS、S3 等構成。
3b7f8892-f653-11ed-90ce-dac502259ad0.jpg ByConity 三層技術架構圖 除了兼備 ClickHouse 的一些優點外,ByConity 還實現了了諸多新的功能。

ByConity 的一個重要優勢是存儲 - 計算分離的架構,它實現了讀寫分離和彈性擴縮容。它的優勢是高彈性和高擴展性。這種架構確保讀操作和寫操作不會相互影響,使得計算資源和存儲資源解耦,兩者可以按需的且獨立的擴縮容,確保資源高效利用。此外,ByConity 支持多租戶資源隔離功能,保證不同租戶之間不會互相影響,使 ByConity 適用于多租戶環境,如圖 2。
3b9776e6-f653-11ed-90ce-dac502259ad0.png ByConity 存儲 - 計算分離,實現多租戶隔離 ByConity 支持?彈性的擴縮容,能夠實時、按需的對計算資源進行擴縮容,保證資源的高效利用。并且它能對不同的租戶進行?資源的隔離,租戶之間不會受到相互影響。其另一個重要功能是?數據讀寫的強一致性?,確保數據始終是最新的,讀寫之間沒有不一致。此外,ByConity 采用了主流的 OLAP 引擎優化,例如列存、向量化執行、MPP 執行、查詢優化等,來保證提供了?優異的讀寫性能。

之所以采用開源的模式,ByConity 項目組是希望能夠把項目回饋給社區,同時也希望通過社區的力量加強和完善 ByConity。接下來,ByConity 在 2023 開源社區發展規劃中,希望增強 ByConity 的功能、性能和易用性,重點關注開發新的存儲引擎、支持更多的數據類型和與其他數據管理工具的集成領域。

責任編輯:彭菁

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 存儲
    +關注

    關注

    13

    文章

    4265

    瀏覽量

    85676
  • 數據庫
    +關注

    關注

    7

    文章

    3766

    瀏覽量

    64278
  • OLAP
    +關注

    關注

    0

    文章

    24

    瀏覽量

    10086

原文標題:分析型數據庫如何創新?

文章出處:【微信號:OSC開源社區,微信公眾號:OSC開源社區】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    關系數據庫與非關系數據庫的區別淺析

    關系數據庫的一個劣勢就是 阻抗失諧(impedance mismatch):關系模型和內存中的數據結構之間存在差異關系數據庫中不可以含有
    發表于 06-03 06:03

    什么是層次數據庫

    什么是層次數據庫 層次數據庫管理系統是緊隨網狀數據庫而出現的。現實世界中很多事物是按層次組織起來的。層次
    發表于 06-17 07:37 ?3097次閱讀

    什么是關系數據庫

    什么是關系數據庫 關系數據庫簡介   關系數據庫以行和列的形式存儲
    發表于 06-17 07:38 ?9120次閱讀

    什么是非關系數據庫

    什么是非關系數據庫 談到非關系數據庫設計的難點,朱海峰說:“我們可以從一些場景來看這個問題。一般數據庫設計人員以前更多的是處理
    發表于 06-17 15:49 ?3128次閱讀

    數據庫教程之如何進行數據庫設計

    本文檔的主要內容詳細介紹的是數據庫教程之如何進行數據庫設計內容包括了:1 數據庫設計概述 ,2 數據庫需求分析 ,3
    發表于 10-19 10:41 ?21次下載
    <b class='flag-5'>數據庫</b>教程之如何進行<b class='flag-5'>數據庫</b>設計

    數據庫不使用外鍵這是為什么?

    當我們想要持久化地存儲數據時,使用關系數據庫往往都是最穩妥的選擇,這不僅因為今天的關系數據庫種類非常豐富并且穩定,還因為不同社區對關系
    的頭像 發表于 09-01 10:00 ?5055次閱讀

    動力環境監控數據庫的簡單分析

    淺析各種數據庫的關系及區別。 數據庫常見和類型有層次式數據庫、網絡式數據庫、關系數據庫。然爾今
    發表于 12-19 20:59 ?404次閱讀

    華為云數據庫\-GaussDB for MySQL數據庫

    華為云數據庫-GaussDB for MySQL數據庫 GaussDB是華為云自主研發的一款高性能關系數據庫,它完全兼容了MySQL,而且它是華為云最新的一代企業級分布式關系
    的頭像 發表于 10-27 14:56 ?1201次閱讀

    數據庫數據恢復】MySQL數據庫Delete誤刪除的數據恢復案例

    MySQL數據庫屬于關系數據庫。SQL是一種用于操作關系數據庫的結構化語言。關系
    的頭像 發表于 12-07 11:49 ?3336次閱讀
    【<b class='flag-5'>數據庫</b><b class='flag-5'>數據</b>恢復】MySQL<b class='flag-5'>數據庫</b>Delete誤刪除的<b class='flag-5'>數據</b>恢復案例

    OpenHarmony關系數據庫概述

    關系數據庫(Relational Database, 以下簡稱RDB)是一種基于關系模型來管理數據數據庫,是在SQLite基礎上提供一套完整的對本地
    的頭像 發表于 03-28 18:08 ?1012次閱讀
    OpenHarmony關系<b class='flag-5'>型</b><b class='flag-5'>數據庫</b>概述

    分析數據庫如何創新?GOTC 2023議題揭秘

    在群雄逐鹿的 OLAP 數據庫市場,開源引擎 ClickHouse 憑借其出色的性能成為公認的黑馬。官方稱其性能超過了市場上同類的列式數據庫,每臺服務器每秒可處理數億到超過十億行、體積達數十 GB
    的頭像 發表于 05-19 09:03 ?404次閱讀
    <b class='flag-5'>分析</b><b class='flag-5'>型</b><b class='flag-5'>數據庫</b>如何<b class='flag-5'>創新</b>?GOTC 2023議題揭秘

    數據庫知識

    數據時代的數據庫 --數據采集、數據清洗和分析數據可視化:提供決策依據 openGaus
    發表于 06-09 16:10 ?0次下載

    關系數據庫的基本原理(什么是關系數據庫

    什么是關系數據庫?關系數據庫,簡稱 RDBMS是由許多數據表(Table)所組成,資料表又是由許多筆記錄(Row 或Record)所組成
    的頭像 發表于 07-10 09:06 ?1376次閱讀

    MySQL數據庫管理與應用

    MySQL數據庫管理與應用 MySQL是一種廣泛使用的關系數據庫管理系統,被認為是最流行和最常見的開源數據庫之一。它可以被用于多種不同的應用程序,包括網站開發、
    的頭像 發表于 08-28 17:15 ?939次閱讀

    NoSQL 數據庫如何選型

    什么是NoSQL數據庫?為什么要使用NoSQL數據庫?鍵值數據庫內存鍵值數據庫文檔數據庫列式數據庫
    的頭像 發表于 11-26 08:05 ?446次閱讀
    NoSQL <b class='flag-5'>數據庫</b>如何選型