MySql逻辑备份恢复方法简单总结一、Mysql逻辑备份1.使用mysqldump命令生成INSERT语句备份此方法类似于oracle的expdp\exp工具语法如下:mysqldump[arguments]>file_name.sql使用帮助:[root@gc~]#mys...
MySql逻辑备份恢复方法简单总结
一、Mysql逻辑备份
1. 使用mysqldump命令生成INSERT语句备份
此方法类似于oracle的expdp\exp工具
语法如下:
mysqldump [arguments] > file_name.sql
使用帮助:
[root@gc ~]# mysqldump
Usage: mysqldump [OPTIONS] database [tables]
OR mysqldump [OPTIONS] --databases [OPTIONS] DB1 [DB2 DB3...]
OR mysqldump [OPTIONS] --all-databases [OPTIONS]
For more options, use mysqldump --help
备份实例:
#
mysqldump -uroot -proot --all-database > /tmp/dumpback/alldb.sql
备份某些数据库
# mysqldump -uroot -proot --database sqoop hive > /tmp/dumpback/sqoop_hive.sql
备份某数据库中的表
# mysqldump -uroot -proot sqoop tb1 > /tmp/dumpback/sqoop_tb1.sql
查看备份内容:
[root@gc dumpback]# more sqoop_tb1.sql
-- MySQL dump 10.13 Distrib 5.5.24, for
Linux (x86_64)
--
-- Host: localhost Database: sqoop
-- ------------------------------------------------------
-- Server version 5.5.24
/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
......
--
-- Table structure for table `tb1`
--
DROP TABLE IF EXISTS `tb1`;
/*!40101 SET @saved_cs_client = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `tb1` (
`table_schema` varchar(64) CHARACTER SET utf8 NOT NULL DEFAULT '',
`table_name` varchar(64) CHARACTER SET utf8 NOT NULL DEFAULT '',
`table_type` varchar(64) CHARACTER SET utf8 NOT NULL DEFAULT ''
) ENGINE=InnoDB DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;
--
-- Dumping data for table `tb1`
--
LOCK TABLES `tb1` WRITE;
/*!40000 ALTER TABLE `tb1` DISABLE KEYS */;
INSERT INTO `tb1` VALUES ('information_schema','CHARACTER_SETS','SYSTEM VIEW')
......
/*!40000 ALTER TABLE `tb1` ENABLE KEYS */;
UNLOCK TABLES;
/*!40103 SET TIME_ZOnE=@OLD_TIME_ZONE */;
.....
-- Dump completed on 2013-03-25 18:26:53
注意事项:
如何保证数据备份的一致性?
要想保证数据的一致性可以通过以下两种方法做到:
第一、同一时刻取出所有数据
对于事务支持的存储引擎,如Innodb 或者BDB 等,可以通过控制将整个备份过程在同一个事务中,使用“--single-transaction”选项。
例如:
# mysqldump --single-transaction test > test_backup.sql
第二、数据库中的数据处于静止状态
通过锁表参数
--lock-tables 每次锁定一个数据库的表,此参数是默认为true(见上面备份内容实例);
--lock-all-tables 一次锁定所有的表,适用于dump的表分别处于各个不同的数据库中的情况
2. 生成特定格式的纯文本文件备份
1) 通过SELECT ... TO OUTFILE FROM ...命令
通过Query将特定数据以指定方式输出到文本文件中,类似于oracle中的spool功能
参数说明:
FIELDS ESCAPED BY ['name'] 将SQL 语句中需要转义的字符;
FIELDS TERMINATED BY 设定每两个字段之间的分隔符;
FIELDS [OPTIONALLY] ENCLOSED BY 'name' 包装,有optionally数字类型不被包装,否则全包装;
LINES TERMINATED BY 'name' 行分隔符,即每记录结束时添加的字符;
备份实例:
mysql> select * into outfile '/tmp/tb1.txt'
-> fields terminated by ','
-> optionally enclosed by '"'
-> lines terminated by '\n' --默认
-> from tb1 limit 50;
Query OK, 50 rows affected (0.00 sec)
[root@gc tmp]# more tb1.txt
"information_schema","CHARACTER_SETS","SYSTEM VIEW"
"information_schema","COLLATIONS","SYSTEM VIEW"
......
2) 通过mysqldump工具命令导出文本
用此方法可以生成一个文本数据和一个对应的数据库结构创建脚本
主要重要参数:
-T, --tab=name Create tab-separated textfile for each table to given
path. (Create .sql and .txt files.) NOTE: This only works
if mysqldump is run on the same machine as the mysqld
server.
备份实例:
导出sqoop库的tb1表
# mysqldump -uroot -proot -T /tmp sqoop tb1 --fields-enclosed-by=\" --fields-terminated-by=,
[root@gc tmp]# ls
tb1.sql tb1.txt
二、逻辑备份恢复
1. INSERT 语句文件的恢复
1) 使用mysql命令直接恢复
把sqoop库的tb1表恢复到test库
# mysql -uroot -proot -D test
2) 连接上MySql在命令行中执行恢复
上面的例子同样可以使用下面的方法
[root@gc ~]# mysql -uroot -proot -D test
mysql> select database();
+------------+
| database() |
+------------+
| test |
+------------+
1 row in set (0.00 sec)
mysql> source /tmp/dumpback/sqoop_tb1.sql
Query OK, 0 rows affected (0.00 sec)
Query OK, 0 rows affected (0.00 sec)
......
或是
mysql> \. /tmp/dumpback/sqoop_tb1.sql
2. 纯文本文件的恢复
1) 使用LOAD DATA INFILE命令
此命令是SELECT ... TO OUTFILE FROM反操作,类似于oracle的sqlldr工具
语法:
LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name.txt'
[REPLACE | IGNORE]
INTO TABLE tbl_name
[FIELDS
[TERMINATED BY 'string']
[[OPTIONALLY] ENCLOSED BY 'char']
[ESCAPED BY 'char' ]
]
[LINES
[STARTING BY 'string']
[TERMINATED BY 'string']
]
[IGNORE number LINES]
[(col_name_or_user_var,...)]
[SET col_name = expr,...]]
恢复实例:
mysql> use sqoop;
Database changed
mysql> load data infile '/tmp/tb1.txt' into table tb1
-> fields terminated by ','
-> optionally enclosed by '"'
-> lines terminated by '\n';
Query OK, 50 rows affected (0.01 sec)
Records: 50 Deleted: 0 Skipped: 0 Warnings: 0
2) 使用mysqlimport工具恢复
用此工具用于可用于恢复上面mysqldump生成txt和sql两文件,所以要保证txt文件对应的数据库中的表存在。
恢复实例:
--首先恢复表结构
[root@gc ~]# mysql -uroot -proot -D test
--恢复数据
[root@gc ~]# mysqlimport -uroot -proot test --fields-enclosed-by=\" --fields-terminated-by=, /tmp/tb1.txt
test.tb1: Records: 93 Deleted: 0 Skipped: 0 Warnings: 0
推荐阅读
-
本文目录一览:1、大数据培训课程大纲要学什么课程? ...
[详细]
蜡笔小新 2023-09-25 08:52:14
-
ubuntu用sqoop将数据从hive导入mysql时,命令: ...
[详细]
蜡笔小新 2023-12-12 18:56:13
-
-
Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql)间进行数据的传递,可以将一个关系型数据库(例如:MySQL,O ...
[详细]
蜡笔小新 2023-10-11 18:06:17
-
前言本文隶属于专栏《1000个问题搞定大数据技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出, ...
[详细]
蜡笔小新 2023-10-10 19:29:19
-
新如何学习大数据技术?大数据怎么入门?怎么做大数据分析?数据科学需要学习那些技术?大数据的应用前景等等问题,已成为热门大数据领域热门问题,以下是对新手如何学习大数据技术问题的解答! ...
[详细]
蜡笔小新 2023-10-10 16:15:09
-
一、需求分析早期业务借助Sqoop将Mysql中的数据同步到Hive、hdfs来进行数据分析,使用过程中也带来了一些问题:虽然Sqoop支持增量同步但还属于粗粒度的离线同步,无法满 ...
[详细]
蜡笔小新 2023-10-10 13:14:45
-
hadoop常用操作命令https:www.cnblogs.comcerofangp10460494.htmlday3_day6https:www.cnblogs.comcerof ...
[详细]
蜡笔小新 2023-09-25 18:17:34
-
阅读目录一、Hadoop简介二、Hadoop的特性三、hadoop组成与体系结构四、Hadoop安装方式五、Hadoop集群中的节点类型一、Hadoop简介Hadoop是Apac ...
[详细]
蜡笔小新 2023-09-25 14:07:40
-
[root@cloud4conf]#sqoopexport--connectjdbc:mysql:192.168.56.1:3306hive--usernameroot--pas ...
[详细]
蜡笔小新 2023-09-25 11:46:02
-
大家好,今天分享的议题主要包括几大内容:带大家回顾一下大数据在国内的发展,从传统数仓到当前数据中台的演进过程;我个人认为数 ...
[详细]
蜡笔小新 2023-10-14 14:20:07
-
一、数据仓库数据仓库(DataWarehouse)是一个面向主题的、集成的、稳定的且随时间变化的数据集合,用于支持管理人员的决策面向主题主题就是类型的意思。传统数 ...
[详细]
蜡笔小新 2023-10-12 16:18:36
-
ftp和文件服务器的区别内容精选换一换obsftp工具于2021年2月9日正式下线,下线后OBS不再对此工具提供维护和客户支持服务,给您带来不便敬请谅解 ...
[详细]
蜡笔小新 2023-10-11 19:18:33
-
✨大数据开发笔记推荐:大数据开发面试知识点总结_GoAI的博客-CSDN博客_大数据开发面试本文详细介绍大数据hadoop生态圈各部分知识,包括不限 ...
[详细]
蜡笔小新 2023-10-10 18:18:49
-
从接触DataX起就有一个疑问,它和Sqoop到底有什么区别,昨天部署好了DataX和Sqoop,就可以对两者进行更深入的了解了。两者从原理上看有点相似,都是解决异构环境的数据交换 ...
[详细]
蜡笔小新 2023-09-25 09:46:49
-
大数据与云计算的就职方向有哪些,其实在找工作的时候,我们不仅要看我们所学的专业名称,更要看看哪些岗位的岗位要求符合我们所学的内容。 例如大数据开发工程师这一职位,其岗位职责包 ...
[详细]
蜡笔小新 2023-09-24 12:16:31
-