精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

分布式數據恢復-hbase+hive分布式存儲誤刪除文件的數據恢復方案

Frombyte ? 來源:Frombyte ? 作者:Frombyte ? 2023-11-24 15:55 ? 次閱讀

hbase+hive分布式存儲數據恢復環境:
16臺某品牌R730XD服務器節點,每臺物理服務器節點上有數臺虛擬機,虛擬機上配置的分布式,上層部署hbase數據庫+hive數據倉庫。

hbase+hive分布式存儲故障&初檢:
數據庫文件被誤刪除,數據庫無法使用。
通過現場對該分布式環境的初步檢測,發現虛擬機還可以正常啟動,虛擬機里面的數據庫塊文件丟失。好在塊文件丟失之后沒有對集群環境寫入數據,底層數據損壞可能性比較小。

hbase+hive分布式存儲數據恢復方案:
1、備份。
A、從物理服務器底層做備份,將設備斷電、關機。將所有磁盤編號后從服務器/存儲中取出。
B、從虛擬機層面備份,通過網絡直接備份虛擬機底層磁盤文件。
C、北亞企安數據恢復中心準備一臺服務器以只讀方式掛載服務器硬盤,對所有磁盤進行扇區對扇區的全盤鏡像備份。
D、備份完成后提供詳細報告,內容涉及所有磁盤的健康狀態和存在的壞道列表。
E、將服務器硬盤按照編號還原到原服務器/存儲設備中,之后數據分析和數據恢復操作都基于鏡像文件進行,避免對原始磁盤數據造成二次破壞。

2、基于鏡像文件分析塊文件結構。
A、分析每個虛擬機磁盤的塊文件。
B、分析文件底層的聚合方式。
C、分析磁盤中數據分布情況。

3、分析Block文件key。
A、定位數據庫文件中的key信息
B、提取并解析數據庫文件中key信息。
C、整合數據庫文件key信息。

4、拼接Block文件。
A、根據Block文件的key信息提取文件片段。
B、拼接Block文件的片段。
C、校驗拼接后的Block文件的正確性。

5、導入Block文件。
A、校驗提取出來的Block文件完整性和正確性。
B、把提取出來的Block文件導入到hbase和hive數據倉庫中。

6、驗證數據。
由用戶對數據進行詳細驗證。如果發現問題則重新檢驗上面的恢復流程。

審核編輯 黃宇

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 數據恢復
    +關注

    關注

    10

    文章

    507

    瀏覽量

    17202
  • 分布式
    +關注

    關注

    1

    文章

    824

    瀏覽量

    74396
收藏 人收藏

    評論

    相關推薦

    基于分布式存儲系統醫療影像數據存儲解決方案

    基于分布式存儲系統醫療影像數據存儲解決方案
    的頭像 發表于 09-14 09:53 ?129次閱讀
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存儲</b>系統醫療影像<b class='flag-5'>數據</b><b class='flag-5'>存儲</b>解決<b class='flag-5'>方案</b>

    醫療PACS影像數據的極速分布式存儲解決方案

    醫療PACS影像數據的極速分布式存儲解決方案
    的頭像 發表于 08-23 10:13 ?146次閱讀
    醫療PACS影像<b class='flag-5'>數據</b>的極速<b class='flag-5'>分布式</b>塊<b class='flag-5'>存儲</b>解決<b class='flag-5'>方案</b>

    NetApp數據恢復—NetApp存儲誤刪除數據恢復案例

    某公司一臺NetApp存儲,該存儲中有24塊磁盤。 工作人員誤刪除了NetApp存儲中一個文件夾,文件
    的頭像 發表于 08-12 13:35 ?139次閱讀
    NetApp<b class='flag-5'>數據</b><b class='flag-5'>恢復</b>—NetApp<b class='flag-5'>存儲</b><b class='flag-5'>誤刪除</b>的<b class='flag-5'>數據</b><b class='flag-5'>恢復</b>案例

    Oracle數據恢復—Oracle刪除數據不用怕!這些數據恢復方法了解一下

    相信有很多oracle數據庫用戶都遇到過在操作Oracle數據庫時誤刪除某些重要數據的情況,這個時候如果數據庫沒有備份且
    的頭像 發表于 07-19 16:40 ?321次閱讀

    服務器數據恢復誤刪除KVM虛擬機的數據恢復案例

    1臺服務器,Linux操作系統+EXT4文件系統,部署了數臺KVM虛擬機,每臺虛擬機包含一個qcow2格的磁盤文件,和一個raw格式的磁盤文件。 工作人員操作失
    的頭像 發表于 06-17 15:10 ?235次閱讀
    服務器<b class='flag-5'>數據</b><b class='flag-5'>恢復</b>—<b class='flag-5'>誤刪除</b>KVM虛擬機的<b class='flag-5'>數據</b><b class='flag-5'>恢復</b>案例

    鴻蒙開發接口數據管理:【@ohos.data.distributedData (分布式數據管理)】

    分布式數據管理為應用程序提供不同設備間數據庫的分布式協同能力。通過調用分布式數據各個接口,應用程
    的頭像 發表于 06-07 09:30 ?721次閱讀
    鴻蒙開發接口<b class='flag-5'>數據</b>管理:【@ohos.data.distributedData (<b class='flag-5'>分布式</b><b class='flag-5'>數據</b>管理)】

    分布式存儲與計算:大數據時代的解決方案

    分布式存儲和計算技術應運而生,并迅速成為處理大數據的首選方案。本文將深入探討分布式存儲和計算的概
    的頭像 發表于 03-07 14:42 ?568次閱讀

    【Vsan數據恢復】Vsan分布式存儲虛擬磁盤文件丟失的數據恢復案例

    一套vsan分布式存儲架構有數臺服務器節點,該vsan分布式存儲架構配置了固態硬盤和機械硬盤,固態硬盤作為緩存盤使用,機械硬盤作為容量盤使用。 機房供電異常導致服務器異常關機,工作人
    的頭像 發表于 01-03 16:39 ?498次閱讀

    鴻蒙原生應用開發——分布式數據對象

    分布式數據對象退出 sessionId 后,該對象將檢測不到其他對象的變更。 02、分布式數據對象能力 1、分布式
    發表于 12-08 10:01

    redis分布式鎖可能出現的問題及解決方案

    誤刪鎖 Redis分布式鎖通常使用SETNX命令創建,并使用DEL命令刪除。在高并發情況下,可能會發生誤刪鎖的情況,即一個線程A獲得鎖后,另一個線程B也可以獲得鎖并
    的頭像 發表于 12-04 11:29 ?799次閱讀

    zookeeper分布式原理

    是提供一個高可用的、一致性的機制,用于解決分布式系統中常見的一致性問題,比如Leader選舉、分布式鎖等。在本文中,我們將詳細介紹Zookeeper的原理和工作機制。 數據模型 Zookeeper的
    的頭像 發表于 12-03 16:33 ?519次閱讀

    HarmonyOS分布式文件系統開發指導

    監聽、通過軟總線建立鏈路,并根據分布式的設備安全等級執行不同的數據流轉策略。 ● hmdfs:實現在內核的網絡文件系統,包括緩存管理、文件訪問、元
    發表于 11-14 17:14

    分布式文件系統的設計原理是什么?

    什么是分布式文件系統?分布式文件系統(DFS)是一種計算機文件系統,使用戶能夠從多個分布式位置
    的頭像 發表于 10-17 17:35 ?680次閱讀

    Ceph分布式存儲簡介&amp;Ceph數據恢復流程

    Ceph存儲可分為塊存儲,對象存儲文件存儲。Ceph基于對象存儲,對外提供三種
    的頭像 發表于 09-26 15:41 ?758次閱讀