0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

【分布式存储数据恢复】hbase和hive数据库底层文件误删的恢复案例

Frombyte 来源:Frombyte 作者:Frombyte 2022-12-16 10:40 次阅读

分布式存储数据恢复环境:

16台物理服务器,每台物理服务器上有数台虚拟机;

虚拟机上配置分布式,上层部署hbase数据库和hive数据库。

分布式存储故障&分析:

误删除数据库底层文件,数据库不能使用。需要恢复hbase和hive数据库。

通过现场对用户环境的检测,数据恢复工程师发现虚拟机还可以正常启动,虚拟机上的数据库块文件丢失。块文件丢失之后没有新的数据写入操作,底层的数据损坏可能性比较小。

分布式存储数据恢复过程:

1、备份。

对物理服务器底层做备份。通过网络直接备份虚拟机底层磁盘文件。

准备一台服务器,以只读方式挂载所有服务器硬盘,使用磁盘备份工具进行扇区级别的备份。

2、分析块文件结构。

分析每个虚拟机磁盘的块文件&文件底层的聚合方式&每个磁盘中数据的分布情况。

3、分析Block文件key。

定位&提取并解析数据库文件中key信息,整合数据库文件key信息。

4、拼接Block文件。

根据Block文件的key信息提取文件片段,拼接提取出来的Block文件片段并校验拼接出来的Block文件的正确性。

5、导入Block文件。

校验提取出的Block文件完整性及正确性并把提取出来的Block文件导入到hbase和hive数据库中。

6、验证数据。

在北亚数据恢复工程师的协助下,由用户对恢复出来的数据进行验证。如果发现问题,重新检验上述所有过程。

北亚数据恢复服务:

1、整个过程不会对原盘进行任何写入操作。

2、尽可能保证操作可逆,确保人力可控范围内操作可回溯。

3、提供后期数据保管和服务跟踪。

4、所有操作都是在有备份的情况下进行,若不成功不影响其他方案。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 服务器
    +关注

    关注

    12

    文章

    8930

    浏览量

    85048
  • 数据恢复
    +关注

    关注

    10

    文章

    535

    浏览量

    17338
  • 数据库
    +关注

    关注

    7

    文章

    3750

    浏览量

    64217
收藏 人收藏

    评论

    相关推荐

    数据库数据恢复—通过拼接数据库碎片恢复SQLserver数据库

    一个运行在存储上的SQLServer数据库,有1000多个文件,大小几十TB。数据库每10天生成一个NDF文件,每个NDF几百GB大小。
    的头像 发表于 10-31 13:21 72次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—通过拼接<b class='flag-5'>数据库</b>碎片<b class='flag-5'>恢复</b>SQLserver<b class='flag-5'>数据库</b>

    oracle数据恢复—Oracle数据库打开报错的数据恢复案例

    和data pump工具无法使用,查询告警日志并分析报错,确认发生上述错误的原因就是sysaux01.dbf文件损坏。由于该文件损坏,从数据库层面无法修复数据库。由于system和用户
    的头像 发表于 10-17 13:20 150次阅读
    oracle<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—Oracle<b class='flag-5'>数据库</b>打开报错的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    Oracle数据恢复—异常断电后Oracle数据库报错的数据恢复案例

    Oracle数据库的在线文件,需要恢复zxfg用户的数据。 Oracle数据库恢复方案:
    的头像 发表于 09-30 13:31 203次阅读
    Oracle<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—异常断电后Oracle<b class='flag-5'>数据库</b>启<b class='flag-5'>库</b>报错的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    数据库数据恢复—Oracle数据库文件system01.dbf损坏的数据恢复案例

    打开oracle数据库报错“system01.dbf需要更多的恢复来保持一致性,数据库无法打开”。
    的头像 发表于 09-21 14:25 221次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—Oracle<b class='flag-5'>数据库文件</b>system01.dbf损坏的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    数据库数据恢复—SQL Server数据库出现823错误的数据恢复案例

    SQL Server数据库故障: SQL Server附加数据库出现错误823,附加数据库失败。数据库没有备份,无法通过备份恢复数据库
    的头像 发表于 09-20 11:46 250次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—SQL Server<b class='flag-5'>数据库</b>出现823错误的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    基于分布式存储WDS的金融信创云承载数据库类关键应用

    基于分布式存储WDS的金融信创云承载数据库类关键应用
    的头像 发表于 08-16 09:42 218次阅读
    基于<b class='flag-5'>分布式</b><b class='flag-5'>存储</b>WDS的金融信创云承载<b class='flag-5'>数据库</b>类关键应用

    NetApp数据恢复—NetApp存储误删除的数据恢复案例

    某公司一台NetApp存储,该存储中有24块磁盘。 工作人员误删除了NetApp存储中一个文件夹,文件
    的头像 发表于 08-12 13:35 203次阅读
    NetApp<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—NetApp<b class='flag-5'>存储</b><b class='flag-5'>误删</b>除的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    数据库数据恢复—SqlServer数据库底层File Record被截断为0的数据恢复案例

    SQL Server数据库数据无法被读取。 经过数据库数据恢复工程师的初步检测,发现SQL Server
    的头像 发表于 07-26 11:27 315次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—SqlServer<b class='flag-5'>数据库</b><b class='flag-5'>底层</b>File Record被截断为0的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    Oracle数据恢复—Oracle删除数据不用怕!这些数据恢复方法了解一下

    相信有很多oracle数据库用户都遇到过在操作Oracle数据库误删除某些重要数据的情况,这个时候如果数据库没有备份且
    的头像 发表于 07-19 16:40 429次阅读

    数据库数据恢复—raid5阵列上层Sql Server数据库数据恢复案例

    数据库数据恢复环境: 5块硬盘组建一组RAID5阵列,划分LUN供windows系统服务器使用。windows系统服务器内运行了Sql Server数据库
    的头像 发表于 05-08 11:43 453次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—raid5阵列上层Sql Server<b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    数据库数据恢复—ndf文件大小变为0KB的数据恢复案例

    存储设备损坏导致存储中SQL Server数据库崩溃。对数据库文件进行恢复后,用户发现有4个ndf文件
    的头像 发表于 05-07 11:19 381次阅读

    数据库数据恢复—Sql Server数据库文件丢失的数据恢复案例

    存储空间LUN划分了两个逻辑分区。 服务器故障&初检: 由于未知原因,Sql Server数据库文件丢失,丢失数据涉及到3个,表的数量有3000左右。
    的头像 发表于 04-11 15:38 794次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—Sql Server<b class='flag-5'>数据库文件</b>丢失的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    分布式数据恢复-hbase+hive分布式存储误删文件数据恢复方案

    仓库。 hbase+hive分布式存储故障&初检: 数据库文件误删除,数据库无法使用。
    的头像 发表于 11-24 15:55 392次阅读

    数据库数据恢复—MySQL数据库误删除记录的数据恢复案例

    数据库数据恢复环境: 一台本地windows sever操作系统服务器,服务器上部署mysql数据库单实例,引擎类型为innodb,表内数据
    的头像 发表于 11-09 15:16 1237次阅读
    <b class='flag-5'>数据库</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—MySQL<b class='flag-5'>数据库</b>表<b class='flag-5'>误删</b>除记录的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例