資料介紹
軟件簡介
LogDevice 是 Facebook 開源的一個可擴展,具備容錯性的分布式日志系統(tǒng)。
LogDevice 是專為日志設(shè)計的分布式數(shù)據(jù)存儲系統(tǒng)。一般的文件系統(tǒng)會將數(shù)據(jù)儲存為文件,LogDevice 會將數(shù)據(jù)存儲為日志,這些日志可被視為記錄式的,追加式的和可修剪的文件。
-
記錄式的(record-oriented)意味著數(shù)據(jù)作為不可分割的記錄寫入日志,而不是單個字節(jié)。日志實質(zhì)上是問題的最小單元,用戶也一定是讀取整行日志。日志的存儲原則是按照日志序列號(LSN)來存放,且編號不保證是連續(xù)的,可能存在間隙。作者不會事先知道成功寫入后將為其日志分配什么 LSN ,這樣日志系統(tǒng)就可以優(yōu)先高寫入需求,對寫入失敗容錯。
-
日志是追加式的(append-only),不支持修改現(xiàn)有記錄。
-
日志在被刪除之前預(yù)計會存在相對較長一段時間:幾天、幾月甚至幾年。日志的主要空間回收機制是修剪(trimming),根據(jù)基于時間或基于空間的保留策略,刪除最舊的記錄,或響應(yīng)修剪日志的請求。
LogDevice 從頭開始設(shè)計,可提供大規(guī)模、高可靠性和高效率的多種日志類型。它還具備高度可調(diào)性,允許對每個用例進行優(yōu)化,以便在從耐久性到效率性,一致性到可用性中進行恰當(dāng)?shù)臋?quán)衡取舍。
?LogDevice 支持的一些 workload 示例:
-
預(yù)寫式日志
-
在分布式數(shù)據(jù)庫中記錄日志
-
事件日志
-
流處理
-
ML 訓(xùn)練流程
-
復(fù)制狀態(tài)機
-
延期工作項目進度
- 分布式電源對配電系統(tǒng)的影響分析
- 基于Simulink的電子對抗分布式仿真系統(tǒng) 26次下載
- 基于KingSCADA的分布式運動控制監(jiān)測系統(tǒng) 10次下載
- 分布式存儲系統(tǒng)的局部修復(fù)碼分析 19次下載
- 分布式存儲系統(tǒng)中的糾刪碼容錯方法綜述 4次下載
- 一種基于區(qū)塊鏈的日志安全存儲方法 6次下載
- Ceph分布式存儲系統(tǒng)性能優(yōu)化研究綜述 5次下載
- 基于分布式數(shù)據(jù)Cache的實時動態(tài)遷移機制 20次下載
- 一種可行的分布式存儲系統(tǒng)安全構(gòu)造方法 21次下載
- 云存儲中的Ceph分布式文件系統(tǒng)及節(jié)點選擇 13次下載
- 一種面向高性能計算的分布式對象存儲系統(tǒng) 0次下載
- 基于再生碼的分布式存儲節(jié)點修復(fù)優(yōu)化 1次下載
- 基于高清視頻數(shù)據(jù)的高性能分布式存儲系統(tǒng) 1次下載
- 集群環(huán)境下分布式索引的實現(xiàn) 0次下載
- 網(wǎng)絡(luò)取證日志分布式安全管理
- 分布式存儲架構(gòu)面臨的挑戰(zhàn) 1288次閱讀
- 如何使用分布式存儲系統(tǒng)促進AI模型訓(xùn)練 494次閱讀
- 一文參透分布式存儲系統(tǒng)Ceph的架構(gòu)設(shè)計、集群搭建 949次閱讀
- 利用NI VeriStand 2010實現(xiàn)分布式同步系統(tǒng)的設(shè)計 3154次閱讀
- 應(yīng)對海量圖片存儲的分布式存儲解決方案 3672次閱讀
- 關(guān)于騰訊的開源分布式存儲系統(tǒng)DCache 1970次閱讀
- 分布式存儲的系統(tǒng)架構(gòu) 2025次閱讀
- 淺談分布式存儲的六大優(yōu)點 8838次閱讀
- 存儲分布式系統(tǒng)中如何從CAP轉(zhuǎn)到PACELC 2692次閱讀
- 基于單機存儲系統(tǒng)故障恢復(fù) 864次閱讀
- 分布式存儲運維系統(tǒng)構(gòu)架簡析 2611次閱讀
- 淺談分布式塊存儲的元數(shù)據(jù)服務(wù)設(shè)計 4871次閱讀
- 分布式存儲集群設(shè)計,集群網(wǎng)絡(luò)規(guī)劃方案 2814次閱讀
- 深度解讀分布式存儲技術(shù)之分布式剪枝系統(tǒng) 1773次閱讀
- 分布式存儲系統(tǒng)技術(shù)解讀 3769次閱讀
下載排行
本周
- 1山景DSP芯片AP8248A2數(shù)據(jù)手冊
- 1.06 MB | 532次下載 | 免費
- 2RK3399完整板原理圖(支持平板,盒子VR)
- 3.28 MB | 339次下載 | 免費
- 3TC358743XBG評估板參考手冊
- 1.36 MB | 330次下載 | 免費
- 4DFM軟件使用教程
- 0.84 MB | 295次下載 | 免費
- 5元宇宙深度解析—未來的未來-風(fēng)口還是泡沫
- 6.40 MB | 227次下載 | 免費
- 6迪文DGUS開發(fā)指南
- 31.67 MB | 194次下載 | 免費
- 7元宇宙底層硬件系列報告
- 13.42 MB | 182次下載 | 免費
- 8FP5207XR-G1中文應(yīng)用手冊
- 1.09 MB | 178次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 2555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33566次下載 | 免費
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費
- 4開關(guān)電源設(shè)計實例指南
- 未知 | 21549次下載 | 免費
- 5電氣工程師手冊免費下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費
- 6數(shù)字電路基礎(chǔ)pdf(下載)
- 未知 | 13750次下載 | 免費
- 7電子制作實例集錦 下載
- 未知 | 8113次下載 | 免費
- 8《LED驅(qū)動電路設(shè)計》 溫德爾著
- 0.00 MB | 6656次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537798次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420027次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191187次下載 | 免費
- 7十天學(xué)會AVR單片機與C語言視頻教程 下載
- 158M | 183279次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138040次下載 | 免費
評論
查看更多