热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

[Erlang]Mnesia的备份与还原

数据库在使用当中都会有数据库备份工作,当数据库发生严重错误无法启动,或者数据丢失时可以及时有效地恢复数据。文章首先介绍如何备份和还原ErlangMne

数据库在使用当中都会有数据库备份工作,当数据库发生严重错误无法启动,或者数据丢失时可以及时有效地恢复数据。文章首先介绍如何备份和还原Erlang Mnesia数据库,然后从备份、回滚两大方面深入探讨mnesia的备份机制。

备份数据库

在Mnesia启动后,可以使用mnesia:backup()备份,函数原型:

mnesia:backup(Opaque [, BackupMod]) -> ok | {error,Reason}

[plain] view plaincopy在CODE上查看代码片派生到我的代码片
  1. # 调用前,确保mnesia正常运行,保存目录存在  
  2. mnesia:backup("d:/backup.log").  

还原数据库

在mnesia启动后,可以使用mnesia:restore()恢复,函数原型:

mnesia:restore(Opaque, Args) -> {atomic, RestoredTabs} |{aborted, Reason}

恢复过程相关的所有表将写锁,可在mnesia不用重启的情况下恢复数据

[plain] view plaincopy在CODE上查看代码片派生到我的代码片
  1. # 调用前,确保mnesia正常运行  
  2. mnesia:restore("d:/backup.log", []).  

好了,如果只是了解如何备份和还原mnesia数据库,到这里就结束了。

如果为了更加深入了解mnesia的备份机制,那就继续往下看。

[cpp] view plaincopy在CODE上查看代码片派生到我的代码片
  1. /********  无情的分割线 ********* /  
  2.   作者:没有开花的树  
  3.   博客:blog.csdn.net/mycwq  
  4. / *******   无情的copy  *********/    

备份与回滚

下列函数用于备份数据、安装备份作为回滚:

[plain] view plaincopy在CODE上查看代码片派生到我的代码片
  1. # 执行一个包含在检查点中的表备份  
  2. mnesia:backup_checkpoint(Name, Opaque [, BackupMod])  
  3.   
  4. # 激活一个覆盖全部 Mnesia 表的新检查点并且执行一次备份(备份以最大冗余度执行)  
  5. mnesia:backup(Opaque [, BackupMod])  
  6.   
  7. # 备份转储,从一个现存的备份创建一个新的备份。可以在不同介质之间复制备份。  
  8. mnesia:traverse_backup(Source,[SourceMod,]Target,[TargetMod,]Fun,Ac)  
  9.   
  10. # 从一个现存的备份恢复表  
  11. mnesia:restore(Opaque, Args)  
  12.   
  13. # 安装回滚,从一个现存的备份重启并且重新加载数据库表。  
  14. mnesia:install_fallback(Opaque, [Mod])  
  15.   
  16. # 移除先前安装的回滚文件  
  17. mnesia:uninstall_fallback()  

mnesia:backup()的备份过程的内部实现分为以下3步:

1、创建检查点:mnesia:activate_checkpoint/1
2、执行备份:mnesia:backup_checkpoint/3
3、停用检查点:mnesia:deactivate_checkpoint/1

对比来说,mnesia:backup方式比较野蛮,执行最大冗余备份,也就是备份全部数据,包括所有副本(copy)。当数据量比较大时恢复过程比较久,如果只需要备份某些重要的表数据,可以使用自己创建检查点。


创建检查点

关于检查点的概念,erlang的解释如下:

A checkpoint is a consistent view of the system. A checkpoint can be activated on a set of tables. This checkpoint can then be traversed and will present a view of the system as it existed at the time when the checkpoint was activated, even if the tables are being or have been manipulated.

大概意思是,检查点被用以维护系统视图一致性。检查点相当于一个系统镜像,在备份过程中,即使数据发生变化,也不会影响备份内容。

检查点使用mnesia:activate_checkpoint函数创建,erlang会启动所有节点的mnesia_checkpoint进程,由mnesia_checkpoint_sup进程监督。关于这部分内容可以参考mnesia_checkpoint:init/1

mnesia_checkpoint进程主要负责监视数据变化。主要行为有add_retainer、del_retainer、add_copy、del_copy、change_copy

函数原型:mnesia:activate_checkpoint(Args) -> {ok,Name,Nodes} | {error,Reason}

参数说明:

Args参数是由下列元组构成的一个列表:

参数项 说明 默认值
{name,Name} Name是检查点的名字,这个名字在关联的节点中必须是唯一的。当检查点被停用时,该名字可以重复使用。可以不用设置,系统会自动生成唯一的名字。 {erlang:now(), erlang:node()}
{max,MaxTabs} MaxTabs是告诉erlang哪些表需要最大冗余备份,也就是所有副本也备份。默认值为[] []
{min,MinTabs} MinTabs是告诉erlang哪些表需要最小冗余备份,也就是只备份一个副本。建议是储存在本地节点的副本。默认值[] []
{allow_remote,Bool} Bool为false表示所有的连接保持器必须是本地的,如果涉及的表有不属于本地节点的,检查点就无法创建成功。Bool为true就是允许分配到任意节点。 true
{ram_overrides_dump,Bool} 仅适用于ram_copies。选择你要备份的模式,true表示当最近记录提交到RAM的时候就记录到检查点,false表示当记录转储到DAT文件时才记录到检查点。这里要注意了,RAM的记录是应用程序运行时的数据,而DAT的记录只是mnesia启动需要加载的记录。默认值false false


执行备份

先看下erlang对于这块内容的解释:

The tables are backed up to external media using the backup module BackupMod. Tables with the local contents property is being backed up as they exist on the current node. BackupMod is the default backup callback module obtained by mnesia:system_info(backup_module). 

大概意思是,执行备份时,erlang会备份本地表数据和表属性,还可以利用BackupMod参数将数据备份到其他存储介质。

函数原型:mnesia:backup_checkpoint(Name, Opaque [, BackupMod]) -> ok | {error,Reason}

参数说明:

Opaque参数:这参数是作为备份模块BackupMod的传入参数,在没有指定备份模块时,这个参数指的是本地文件名。


停用检查点:

简单的理解就是删了之前创建的检查点。

函数原型:mnesia:deactivate_checkpoint(Name) -> ok | {error, Reason}

这里有一点问题需要注意。检查点就算没有调用mnesia:deactivate_checkpoint/1 ,它也可能被停用。关于这个内容,这个功能,erlang的解释如下:

The checkpoint is automatically deactivated when some of the tables involved have no retainer attached to them. This may happen when nodes go down or when a replica is deleted. 

大致意思是,当涉及到的任意一个表没有连接保持器(retainer)时,检查点会自动停用。节点挂了或者数据副本被删除也可能会导致检查点停用。

下面是一个手动备份的过程:

[plain] view plaincopy在CODE上查看代码片派生到我的代码片
  1. 4>  {ok, Name, _} = mnesia:activate_checkpoint( [ { max, [tb_message] } ] ).  
  2. {ok,{{1387,505130,66000},nonode@nohost},[nonode@nohost]}  
  3.   
  4. 5> mnesia:backup_checkpoint( Name, "d:/backup.log", [] ).  
  5. ok  
  6.   
  7. 6> mnesia:deactivate_checkpoint( Name ).  
  8. ok  


恢复数据

用于恢复之前备份过的数据,恢复过程相关的所有表将写锁,可在mnesia不用重启的情况下恢复数据

函数原型:

mnesia:restore(Opaque, Args) -> {atomic, RestoredTabs} |{aborted, Reason}

参数说明:

Opaque参数:这参数是作为备份模块BackupMod的传入参数,在没有指定备份模块时,这个参数指的是本地文件名。

Args参数是由下列元组构成的一个列表:

参数项 说明
{module, BackupMod} BackupMod用于使用自定义的模块来处理恢复数据,忽略这个参数项则使用系统模块
{skip_tables, TabList} TabList告诉erlang哪些表不需要恢复
{clear_tables, TabList} TabList告诉erlang哪些表在恢复数据前要清除表中所有记录。注意了,这里不会删除表,只是恢复所有记录
{keep_tables, TabList} TabList告诉erlang哪些表在恢复数据前记录不会被清除,而备份中的记录将会新增到表中。注意了,这里不会删除表,只是新增所有记录
{recreate_tables, TabList} TabList告诉erlang哪些表在恢复数据前需要重新创建表。这些表将被删除然后重建。注意了,这里会删除表
{default_op, Operation} Operation参数值为skip_tables,clear_tables,keep_tables或recreate_tables。这个参数用于指定erlang恢复表的默认行为,也就是说那些在没指定恢复方式的表将以这种方式处理。如果这个参数没有设置,默认是clear_tables


回滚

首先要明确,什么是回滚,为什么要使用回滚,什么时候下要使用回滚?

还是先看下erlang对这块内容的解释:

This function is used to install a backup as fallback. The fallback will be used to restore the database at the next start-up. Installation of fallbacks requires Erlang to be up and running on all the involved nodes, but it does not matter if Mnesia is running or not. The installation of the fallback will fail if the local node is not one of the disc resident nodes in the backup.

回滚用于在下一次系统启动时恢复数据库,也就是说安装回滚后系统不会立即恢复数据,而是等待mnesia重启后恢复数据。

为什么要使用回滚?前面一种恢复方式(restore)被作为一个单独事务执行,在恢复过程中相关的所有表写锁,如果数据库过于庞大,会影响其他程序运行,或无法成功恢复。在这种情况下,数据库必须通过安装一个回滚来恢复,然后重新启动。

使用回滚的另一种场合是当mnesia无法启动时,还可以使用回滚还恢复数据。在mnesia崩溃,也就是表结构损毁(schema)或者数据发生严重错误时,mnesia将无法启动,原来的恢复方式(restore)也无法使用。

回滚是一个分布式的操作,要么在所有数据库节点上执行,要么不执行。安装回滚要求 Erlang 所有数据库相关节点都启动和运行,就算Mnesia进程没有运行也不受影响。

函数原型:

mnesia:install_fallback(Opaque, Args) -> ok | {error,Reason}

Opaque参数:这参数是作为备份模块BackupMod的传入参数,在没有指定备份模块时,这个参数指的是本地文件名。

Args参数是由下列元组构成的一个列表:

参数项 说明
{module, BackupMod} BackupMod用于使用自定义的模块来处理恢复数据,忽略这个参数项则使用系统模块
{scope, Scope} Scope配置回滚的影响范围,既可以是全部数据库节点(global),也可以是一个本地节点(local)。默认是global。至于哪个节点是磁盘存储类型,由导入的备份文件确定。
{mnesia_dir, AlternateDir} 当scope参数项为local有效。一般来说,回滚的安装都是以mnesia的默认目录为准。这里还可以通过配置AlternateDir来修改回滚的安装地址,回滚安装后这个目录就成了一个有效的mnesia目录。这个参数项是危险的,请谨慎使用,否则可能会导致数据库不一致


卸载回滚

还是给一个erlang解释的机会:

This function is used to de-install a fallback before it has been used to restore the database. This is normally a distributed operation that is either performed on all nodes with disc resident schema or none. Uninstallation of fallbacks requires Erlang to be up and running on all involved nodes, but it does not matter if Mnesia is running or not. Which nodes that are considered as disc-resident nodes is determined from the schema info in the local fallback.

大概意思就是卸载回滚这个功能,用于在数据库已被恢复之前移除回滚。

卸载回滚也是一个分布式的操作,要么在所有数据库节点执行,要么不执行。安装回滚要求 Erlang 所有数据库相关节点都启动和运行,就算Mnesia进程没有运行也不受影响。

函数原型:

mnesia:uninstall_fallback(Args) -> ok | {error,Reason}

Args参数含义可以参考回滚的Args参数介绍。

文章参考:
http://blog.csdn.net/mycwq/article/details/17285693
http://www.erlang.org/doc/man/mnesia.html


推荐阅读
  • 本文介绍了如何利用Shell脚本高效地部署MHA(MySQL High Availability)高可用集群。通过详细的脚本编写和配置示例,展示了自动化部署过程中的关键步骤和注意事项。该方法不仅简化了集群的部署流程,还提高了系统的稳定性和可用性。 ... [详细]
  • Android 构建基础流程详解
    Android 构建基础流程详解 ... [详细]
  • 为了确保iOS应用能够安全地访问网站数据,本文介绍了如何在Nginx服务器上轻松配置CertBot以实现SSL证书的自动化管理。通过这一过程,可以确保应用始终使用HTTPS协议,从而提升数据传输的安全性和可靠性。文章详细阐述了配置步骤和常见问题的解决方法,帮助读者快速上手并成功部署SSL证书。 ... [详细]
  • PHP预处理常量详解:如何定义与使用常量 ... [详细]
  • 蓝桥杯物联网基础教程:通过GPIO输入控制LED5的点亮与熄灭
    本教程详细介绍了如何利用STM32的GPIO接口通过输入信号控制LED5的点亮与熄灭。内容涵盖GPIO的基本配置、按键检测及LED驱动方法,适合具有STM32基础的读者学习和实践。 ... [详细]
  • MySQL Decimal 类型的最大值解析及其在数据处理中的应用艺术
    在关系型数据库中,表的设计与SQL语句的编写对性能的影响至关重要,甚至可占到90%以上。本文将重点探讨MySQL中Decimal类型的最大值及其在数据处理中的应用技巧,通过实例分析和优化建议,帮助读者深入理解并掌握这一重要知识点。 ... [详细]
  • 在CentOS 7环境中安装配置Redis及使用Redis Desktop Manager连接时的注意事项与技巧
    在 CentOS 7 环境中安装和配置 Redis 时,需要注意一些关键步骤和最佳实践。本文详细介绍了从安装 Redis 到配置其基本参数的全过程,并提供了使用 Redis Desktop Manager 连接 Redis 服务器的技巧和注意事项。此外,还探讨了如何优化性能和确保数据安全,帮助用户在生产环境中高效地管理和使用 Redis。 ... [详细]
  • 在Linux系统中避免安装MySQL的简易指南
    在Linux系统中避免安装MySQL的简易指南 ... [详细]
  • 基于Net Core 3.0与Web API的前后端分离开发:Vue.js在前端的应用
    本文介绍了如何使用Net Core 3.0和Web API进行前后端分离开发,并重点探讨了Vue.js在前端的应用。后端采用MySQL数据库和EF Core框架进行数据操作,开发环境为Windows 10和Visual Studio 2019,MySQL服务器版本为8.0.16。文章详细描述了API项目的创建过程、启动步骤以及必要的插件安装,为开发者提供了一套完整的开发指南。 ... [详细]
  • 在对WordPress Duplicator插件0.4.4版本的安全评估中,发现其存在跨站脚本(XSS)攻击漏洞。此漏洞可能被利用进行恶意操作,建议用户及时更新至最新版本以确保系统安全。测试方法仅限于安全研究和教学目的,使用时需自行承担风险。漏洞编号:HTB23162。 ... [详细]
  • 服务器部署中的安全策略实践与优化
    服务器部署中的安全策略实践与优化 ... [详细]
  • 本文详细介绍了在CentOS 6.5 64位系统上使用阿里云ECS服务器搭建LAMP环境的具体步骤。首先,通过PuTTY工具实现远程连接至服务器。接着,检查当前系统的磁盘空间使用情况,确保有足够的空间进行后续操作,可使用 `df` 命令进行查看。此外,文章还涵盖了安装和配置Apache、MySQL和PHP的相关步骤,以及常见问题的解决方法,帮助用户顺利完成LAMP环境的搭建。 ... [详细]
  • 本文介绍了如何利用 Delphi 中的 IdTCPServer 和 IdTCPClient 控件实现高效的文件传输。这些控件在默认情况下采用阻塞模式,并且服务器端已经集成了多线程处理,能够支持任意大小的文件传输,无需担心数据包大小的限制。与传统的 ClientSocket 相比,Indy 控件提供了更为简洁和可靠的解决方案,特别适用于开发高性能的网络文件传输应用程序。 ... [详细]
  • 本文深入探讨了Java多线程环境下的同步机制及其应用,重点介绍了`synchronized`关键字的使用方法和原理。`synchronized`关键字主要用于确保多个线程在访问共享资源时的互斥性和原子性。通过具体示例,如在一个类中使用`synchronized`修饰方法,展示了如何实现线程安全的代码块。此外,文章还讨论了`ReentrantLock`等其他同步工具的优缺点,并提供了实际应用场景中的最佳实践。 ... [详细]
  • 本文探讨了利用JavaScript实现集合的对称差集算法的方法。该算法旨在处理多个数组作为输入参数,同时保留每个数组中元素的原始顺序。算法不会移除单个数组内的重复元素,但会删除在不同数组之间出现的重复项。通过这种方式,能够有效地计算出多个数组的对称差集。 ... [详细]
author-avatar
kenvilen_106
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有