热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

【北亚数据恢复】_mdb_catalog.wt文件损坏情况下的MongoDB数据库数据恢复案例

环境:WindowsServer2012的虚拟机;MongoDB数据库。 故障:未关闭MongoDB服务的情况下,将数据库文件拷贝到其他分区后,对原数据库所在分区进行了格式化操作,

环境:
Windows Server 2012的虚拟机;
MongoDB数据库。

 

故障:
未关闭MongoDB服务的情况下,将数据库文件拷贝到其他分区后,对原数据库所在分区进行了格式化操作,然后将数据库文件拷回原分区,再重新启动MongoDB服务时发现无法启动。报错截图如下:

 

管理员联系北亚数据恢复中心寻求帮助。

 

MongoDB数据恢复过程:
在MongoDB服务没有关闭的情况下对MongoDB数据库文件进行拷贝,会导致mongod.lock和WiredTiger.lock这2个文件拷贝出错。可以在拷贝出的文件中删除这两个文件后再启动服务,这2个文件会自动重新生成。
1、北亚数据恢复工程师对管理员拷贝出的文件检测后发现,_mdb_catalog.wt文件丢失。
_mdb_catalog.wt文件里存储了MongoDB中所有集合的元数据,数据库启动时需要从_mdb_catalog.wt文件中读取相关的信息。由于此_mdb_catalog.wt文件丢失,数据库无法获取数据库中集合对应的WT table名字、集合的创建选项、集合的索引信息等元数据,数据库无法启动。
2、北亚数据恢复工程师尝试从文件系统的角度对_mdb_catalog.wt文件进行恢复。
使用北亚数据恢复中心自研软件对数据库分区进行扫描后发现并没有_mdb_catalog.wt文件的信息。北亚数据恢复工程师又根据MongoDB数据库中数据文件的特征值对数据库分区进行扫描,也没有发现_mdb_catalog.wt相关的数据区域。由此可以判断,_mdb_catalog.wt文件已经被彻底覆盖破坏,无法恢复。
3、从数据库层面设法提取数据。原服务器所部署的MongoDB数据库是基于WiredTiger存储引擎,北亚数据恢复工程师使用WiredTiger实用工具包提取数据库中的数据。
下载WiredTiger实用工具包,然后在windows环境下编译出可执行的wt工具。

4、编译完成后,使用wt工具对数据库的集合文件中的数据进行清洗回写,清洗回写完成后直接读取文件中的数据,并写入到一个.dump文件中。
5、还原数据库环境。北亚数据恢复工程师重新创建一个MongoDB数据库,根据提取出的集合文件,创建对应数量的空集合,然后使用wt工具,将提取出来的dump文件一一写入到新创建的空集合中。这时就可以通过查询集合中的数据,确认这些集合与元数据库中集合的对应关系,修改集合名称,重建索引信息。
6、由于原数据库中存在Gridfs存储的大字段(文件)集合,所以通过查询集合中的记录,确定记录类型,从而确定fs.files和fs.chunks集合的位置,然后修改这两个集合名称分别为xxx.files和xxx.chunks,重建集合索引,Gridfs集合恢复完成,可以正常查看其中数据:

 

 

数据验证:
北亚数据恢复工程师协助对全部集合进行索引重建之后,由管理员对数据库整体进行查询验证,数据无误。



推荐阅读
  • 本文详细解析了在Oracle数据库操作中遇到的ORA-01846错误,该错误通常出现在尝试使用NEXT_DAY函数处理日期时,因客户端和服务器端字符集不匹配导致的问题。文章不仅提供了错误的具体表现,还深入分析了错误原因,并给出了多种解决方案。 ... [详细]
  • 本文介绍如何利用Python中的Epoll机制构建一个高效的Web服务器,该服务器能够处理多个并发连接,并向每个连接的客户端返回预定义的响应文本。通过使用Epoll,服务器可以实现高性能的I/O多路复用。 ... [详细]
  • 如何将Redis配置为后台服务
    本文介绍了在安装Redis后,如何通过修改配置文件使其以守护进程模式在后台运行,避免因控制台被占用而无法进行其他操作的问题。 ... [详细]
  • 本文详细介绍了如何搭建一个高可用的MongoDB集群,包括环境准备、用户配置、目录创建、MongoDB安装、配置文件设置、集群组件部署等步骤。特别关注分片、读写分离及负载均衡的实现。 ... [详细]
  • 实践指南:使用Express、Create React App与MongoDB搭建React开发环境
    本文详细介绍了如何利用Express、Create React App和MongoDB构建一个高效的React应用开发环境,旨在为开发者提供一套完整的解决方案,包括环境搭建、数据模拟及前后端交互。 ... [详细]
  • Redis:缓存与内存数据库详解
    本文介绍了数据库的基本分类,重点探讨了关系型与非关系型数据库的区别,并详细解析了Redis作为非关系型数据库的特点、工作模式、优点及持久化机制。 ... [详细]
  • 通过阅读本文,您将全面了解如何在数据库表中有效利用索引提升查询效率。本文不仅探讨了索引为何能提高查询速度,还深入分析了不同类型的索引结构及其在SQL Server中的实现方式。 ... [详细]
  • CGroups: 资源管理和控制
    CGroups(Control Groups)是Linux内核提供的一个功能,旨在限制、记录和隔离进程组使用的物理资源,如CPU、内存和I/O等。它通过精细的资源管理,支持现代容器技术如Docker的资源限制需求。 ... [详细]
  • Linux 文件系统结构详解
    本文详细介绍了Linux操作系统的文件系统结构,包括其独特的树状目录体系、根目录的作用、目录与磁盘分区的关系等,并对各主要目录的功能进行了深入解析。 ... [详细]
  • 开发笔记:每篇半小时1天入门MongoDB——3.MongoDB可视化及shell详解
    开发笔记:每篇半小时1天入门MongoDB——3.MongoDB可视化及shell详解 ... [详细]
  • 本文介绍了如何使用Node.js通过两种不同的方法连接MongoDB数据库,包括使用MongoClient对象和连接字符串的方法。每种方法都有其特点和适用场景,适合不同需求的开发者。 ... [详细]
  • Python3爬虫入门:pyspider的基本使用[python爬虫入门]
    Python学习网有大量免费的Python入门教程,欢迎大家来学习。本文主要通过爬取去哪儿网的旅游攻略来给大家介绍pyspid ... [详细]
  • PHP面试题精选及答案解析
    本文精选了新浪PHP笔试题及最新的PHP面试题,并提供了详细的答案解析,帮助求职者更好地准备PHP相关的面试。 ... [详细]
  • MongoDB核心概念详解
    本文介绍了NoSQL数据库的概念及其应用场景,重点解析了MongoDB的基本特性、数据结构以及常用操作。MongoDB是一个高性能、高可用且易于扩展的文档数据库系统。 ... [详细]
  • 本文介绍了多种开源数据库及其核心数据结构和算法,包括MySQL的B+树、MVCC和WAL,MongoDB的tokuDB和cola,boltDB的追加仅树和mmap,levelDB的LSM树,以及内存缓存中的一致性哈希。 ... [详细]
author-avatar
圈圈
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有