Mysql數(shù)據(jù)庫(kù)表定期備份的實(shí)現(xiàn)
0.背景
實(shí)際開發(fā)環(huán)境中，前端程序需要在給定時(shí)間段內(nèi)，將數(shù)據(jù)更新/插入到MySQL指定的庫(kù)表中。隨著數(shù)據(jù)量的增多，基礎(chǔ)庫(kù)表基數(shù)的增長(zhǎng)，每更新一次都會(huì)有5s左右的卡頓。
改進(jìn)方案一：批量更新，累計(jì)數(shù)10條或者100條進(jìn)行一次更新入庫(kù)操作；
改進(jìn)方案二：將當(dāng)前日期前1個(gè)月之前的數(shù)據(jù)進(jìn)行備份操作，并刪除當(dāng)前庫(kù)表中1個(gè)月前的數(shù)據(jù)。經(jīng)測(cè)定，該方法一定程度提高了訪問(wèn)效率。根因：基礎(chǔ)表基數(shù)少，查詢效率相對(duì)提高。
1.庫(kù)表的定時(shí)備份總結(jié)
步驟1：備份Mysql指定數(shù)據(jù)庫(kù)中的制定庫(kù)表。
使用 mysqldump，設(shè)定周期30天。
步驟2：對(duì)于日期60天前的已備份的文件及壓縮包做刪除處理。
步驟3：刪除庫(kù)表中在當(dāng)前日期前30天的數(shù)據(jù)。（步驟1已經(jīng)做了備份）。
步驟4：設(shè)定定時(shí)。
crontab設(shè)定。
| [root@mysql_bak]# cat mysql_bak.sh#!/bin/sh#DATABASE INFODB_NAME="ppdb"DB_USER="root"DB_PASS="password"DISPOSE_TABLE="dispose_ticles"RST_TABLE="match_rst"DB_IP=100.55.1.129BIN_DIR="/usr/bin"BAK_DIR="/home/mysql_bak/data"DATE=`date +%Y%m%d_%H%M%S`#mkdir -p $BAK_DIR#備份包 形成壓縮包$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE | gzip > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql.gz$BIN_DIR/mysqldump $DB_NAME $RST_TABLE > $BAK_DIR/$RST_TABLE.dump_$DATE.sql$BIN_DIR/mysqldump $DB_NAME $RST_TABLE | gzip > $BAK_DIR/$RST_TABLE.dump_$DATE.sql.gz#定期刪除60天的備份包find $BAK_DIR -name "name_*.sql.gz" -type f -mtime +60 -exec rm {} /; > /dev/null 2>&1#30天前的指定庫(kù)表數(shù)據(jù)刪除操作 (當(dāng)前時(shí)間減去30天）delete_date=`date --date='30 day ago' +%Y-%m-%d`echo "delete_date=$delete_date"#刪除rst表信息rst_sql="delete from $RST_TABLE where update_time <= $delete_date order by update_time;";echo "rst_sql=$rst_sql"#ret=$(mysql -u $DB_USER -h ${DB_IP} -p${DB_PASS} $DB_NAME -e "$sql");ret=$(mysql -h${DB_IP} $DB_NAME -e "$rst_sql");echo $ret#刪除dispose表信息dispose_sql="delete from $DISPOSE_TABLE where judge_time <= $delete_date order by judge_time;";echo "dispose_sql=$dispose_sql"ret=$(mysql -h${DB_IP} $DB_NAME -e "$dispose_sql");echo $ret |
2.定時(shí)設(shè)置：每隔30天的1點(diǎn)進(jìn)行備份。
| [root@mysql_bak]# cat /etc/crontabSHELL=/bin/bashPATH=/sbin:/bin:/usr/sbin:/usr/binMAILTO=rootHOME=/# For details see man 4 crontabs# Example of job definition:# .---------------- minute (0 - 59)# | .------------- hour (0 - 23)# | | .---------- day of month (1 - 31)# | | | .------- month (1 - 12) OR jan,feb,mar,apr ...# | | | | .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat# | | | | |# * * * * * user-name command to be executed0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1[root@mysql_bak]# crontab -e0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1 |
