mysql定期数据备份_Mysql数据库表定期备份的实现详解

Mysql数据库表定期备份的实现

0.背景

实际开发环境中&＃xff0c;前端程序需要在给定时间段内&＃xff0c;将数据更新/插入到MySQL指定的库表中。随着数据量的增多&＃xff0c;基础库表基数的增长&＃xff0c;每更新一次都会有5s左右的卡顿。

改进方案一&＃xff1a;批量更新&＃xff0c;累计数10条或者100条进行一次更新入库操作&＃xff1b;

改进方案二&＃xff1a;将当前日期前1个月之前的数据进行备份操作&＃xff0c;并删除当前库表中1个月前的数据。经测定&＃xff0c;该方法一定程度提高了访问效率。根因&＃xff1a;基础表基数少&＃xff0c;查询效率相对提高。

1.库表的定时备份总结

步骤1&＃xff1a;备份Mysql指定数据库中的制定库表。

使用 mysqldump&＃xff0c;设定周期30天。

步骤2&＃xff1a;对于日期60天前的已备份的文件及压缩包做删除处理。

步骤3&＃xff1a;删除库表中在当前日期前30天的数据。(步骤1已经做了备份)。

步骤4&＃xff1a;设定定时。

crontab设定。 [root&＃64;mysql_bak]# cat mysql_bak.sh

#!/bin/sh

#DATABASE INFO

DB_NAME&＃61;"ppdb"

DB_USER&＃61;"root"

DB_PASS&＃61;"password"

DISPOSE_TABLE&＃61;"dispose_ticles"

RST_TABLE&＃61;"match_rst"

DB_IP&＃61;100.55.1.129

BIN_DIR&＃61;"/usr/bin"

BAK_DIR&＃61;"/home/mysql_bak/data"

DATE&＃61;&＃96;date &＃43;%Y%m%d_%H%M%S&＃96;

#mkdir -p $BAK_DIR

#备份包 形成压缩包

$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql

$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE | gzip > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql.gz

$BIN_DIR/mysqldump $DB_NAME $RST_TABLE > $BAK_DIR/$RST_TABLE.dump_$DATE.sql

$BIN_DIR/mysqldump $DB_NAME $RST_TABLE | gzip > $BAK_DIR/$RST_TABLE.dump_$DATE.sql.gz

#定期删除60天的备份包

find $BAK_DIR -name "name_*.sql.gz" -type f -mtime &＃43;60 -exec rm {} \; > /dev/null 2>&1

#30天前的指定库表数据删除操作 (当前时间减去30天)

delete_date&＃61;&＃96;date --date&＃61;&＃39;30 day ago&＃39; &＃43;%Y-%m-%d&＃96;

echo "delete_date&＃61;$delete_date"

#删除rst表信息

rst_sql&＃61;"delete from $RST_TABLE where update_time <&＃61; $delete_date order by update_time;";

echo "rst_sql&＃61;$rst_sql"

#ret&＃61;$(mysql -u $DB_USER -h ${DB_IP} -p${DB_PASS} $DB_NAME -e "$sql");

ret&＃61;$(mysql -h${DB_IP} $DB_NAME -e "$rst_sql");

echo $ret

#删除dispose表信息

dispose_sql&＃61;"delete from $DISPOSE_TABLE where judge_time <&＃61; $delete_date order by judge_time;";

echo "dispose_sql&＃61;$dispose_sql"

ret&＃61;$(mysql -h${DB_IP} $DB_NAME -e "$dispose_sql");

echo $ret

2.定时设置&＃xff1a;每隔30天的1点进行备份。 [root&＃64;mysql_bak]# cat /etc/crontab

SHELL&＃61;/bin/bash

PATH&＃61;/sbin:/bin:/usr/sbin:/usr/bin

MAILTO&＃61;root

HOME&＃61;/

# For details see man 4 crontabs

# Example of job definition:

# .---------------- minute (0 - 59)

# | .------------- hour (0 - 23)

# | | .---------- day of month (1 - 31)

# | | | .------- month (1 - 12) OR jan,feb,mar,apr ...

# | | | | .---- day of week (0 - 6) (Sunday&＃61;0 or 7) OR sun,mon,tue,wed,thu,fri,sat

# | | | | |

# * * * * * user-name command to be executed

0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1

[root&＃64;mysql_bak]# crontab -e

0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1

重启crontab服务 service crond restart

感谢阅读&＃xff0c;希望能帮助到大家&＃xff0c;谢谢大家对本站的支持&＃xff01;