10分鐘完成MySQL物理xtrabackup增量備份

在生產(chǎn)環(huán)境中,我們一般采取MySQLdump全庫備份,但這對于大型數(shù)據(jù)庫是不可用的,因為mysqldump是邏輯備份,備份和恢復(fù)的效率緩慢,根據(jù)個人經(jīng)驗給出一個臨界值的話,50G以下的數(shù)據(jù)庫可以用mysqldump來進行全庫備份,50G以上的數(shù)據(jù)庫則需要物理全庫備份,甚至是增量備份。Xtrabackup是物理備份,其備份速度也因其物理特性遠超邏輯備份的速度,而且Xtrabackup就是為了邏輯備份而生的,接下來演示一下Xtrabackup是如何完成對數(shù)據(jù)庫的全備和增備的。

在榆林等地區(qū),都構(gòu)建了全面的區(qū)域性戰(zhàn)略布局,加強發(fā)展的系統(tǒng)性、市場前瞻性、產(chǎn)品創(chuàng)新能力,以專注、極致的服務(wù)理念,為客戶提供成都做網(wǎng)站、網(wǎng)站設(shè)計 網(wǎng)站設(shè)計制作按需網(wǎng)站建設(shè),公司網(wǎng)站建設(shè),企業(yè)網(wǎng)站建設(shè),品牌網(wǎng)站建設(shè),成都營銷網(wǎng)站建設(shè),成都外貿(mào)網(wǎng)站建設(shè),榆林網(wǎng)站建設(shè)費用合理。

一:首先我們安裝xtrabackup軟件

該tar包可自行百度下載。

[root@HE3 ~]# tar xvf percona-xtrabackup-2.1.8-733-Linux-x86_64.tar.gz
[root@HE3 ~]# mkdir -p /usr/local/xtrabackup
[root@HE3 ~]#cp -rp  percona-xtrabackup-2.1.8-Linux-x86_64/* /usr/local/xtrabackup

將上述目錄添加到系統(tǒng)環(huán)境變量
[root@HE3 bin]# echo export PATH=$PATH:/usr/local/xtrabackup/bin >>/etc/profile
[root@HE3 bin]# source /etc/profile
[root@HE3 yum.repos.d]# yum install perl-Time-HiRes
[root@HE3 bin]# yum install perl-DBD-MySQL*

二:創(chuàng)建備份目錄

[root@HE3 ~]#mkdir -p /databackup/xtrabackup

[root@HE3 ~]#mkdir -p/databackup/xtrabackuplog

 

 

三:數(shù)據(jù)庫授予備份用戶相關(guān)權(quán)限

mysql > grant
SELECT,RELOAD,SHOW DATABASES,SUPER,LOCK TABLES,REPLICATION CLIENT,SHOW VIEW,EVENT,FILE on *.* to backup@'localhost' identified by 'MANAGER';

四:執(zhí)行本文的自動化的備份腳本

[root@HE3 ~]#vi xtrabackup.sh
#backup.sh
#!/bin/sh
#on xtrabackup 2.1.8
# 第一次執(zhí)行它的時候它會檢查是否有完全備份,否則先創(chuàng)建一個全庫備份
# 當(dāng)你再次運行它的時候,它會根據(jù)腳本中的設(shè)定來基于之前的全備或增量備份進行增量備份
##################
#author rrhelei@126.com#
##################
INNOBACKUPEX_PATH=innobackupex  #INNOBACKUPEX的命令
INNOBACKUPEXFULL=/usr/local/xtrabackup/bin/$INNOBACKUPEX_PATH  #INNOBACKUPEX的命令路徑
#mysql目標(biāo)服務(wù)器以及用戶名和密碼
MYSQL_CMD="--host=localhost --user=backup --password=MANAGER --port=3306"  
MYSQL_UP=" --user=backup --password='MANAGER' --port=3306"  #mysqladmin的用戶名和密碼
TMPLOG="/tmp/innobackupex.$$.log"
MY_CNF=/etc/my.cnf #mysql的配置文件
MYSQL=/usr/local/mysql/bin/mysql
MYSQL_ADMIN=/usr/local/mysql/bin/mysqladmin
BACKUP_DIR=/databackup/xtrabackup # 備份的主目錄
FULLBACKUP_DIR=$BACKUP_DIR/full # 全庫備份的目錄
INCRBACKUP_DIR=$BACKUP_DIR/incre # 增量備份的目錄
FULLBACKUP_INTERVAL=82800 # 全庫備份的間隔周期,時間:秒
KEEP_FULLBACKUP=3 # 至少保留幾個全庫備份
logfiledate=backup.`date +%Y%m%d%H%M`.txt
#開始時間
STARTED_TIME=`date +%s`
#############################################################################
# 顯示錯誤并退出
#############################################################################
error()
{
    echo "$1" 1>&2
    exit 1
}
 
# 檢查執(zhí)行環(huán)境
if [ ! -x $INNOBACKUPEXFULL ]; then
  error "$INNOBACKUPEXFULL未安裝或未鏈接到/usr/bin."
fi
 
if [ ! -d $BACKUP_DIR ]; then
  error "備份目標(biāo)文件夾:$BACKUP_DIR不存在."
fi
 
mysql_status=`netstat -nl | awk 'NR>2{if ($4 ~ /.*:3306/) {print "Yes";exit 0}}'`
if [ "$mysql_status" != "Yes" ];then
    error "MySQL 沒有啟動運行."
fi
 
if ! `echo 'exit' | $MYSQL -s $MYSQL_CMD` ; then
 error "提供的數(shù)據(jù)庫用戶名或密碼不正確!"
fi
 
# 備份的頭部信息
echo "----------------------------"
echo
echo "$0: MySQL備份腳本"
echo "開始于: `date +%F' '%T' '%w`"
echo
 
#新建全備和差異備份的目錄
mkdir -p $FULLBACKUP_DIR
mkdir -p $INCRBACKUP_DIR
#查找最新的完全備份
LATEST_FULL_BACKUP=`find $FULLBACKUP_DIR -mindepth 1 -maxdepth 1 -type d -printf "%P\n" | sort -nr | head -1`
 
# 查找最近修改的最新備份時間
LATEST_FULL_BACKUP_CREATED_TIME=`stat -c %Y $FULLBACKUP_DIR/$LATEST_FULL_BACKUP`
#如果全備有效進行增量備份否則執(zhí)行完全備份
if [ "$LATEST_FULL_BACKUP" -a `expr $LATEST_FULL_BACKUP_CREATED_TIME + $FULLBACKUP_INTERVAL + 5` -ge $STARTED_TIME ] ; then
# 如果最新的全備未過期則以最新的全備文件名命名在增量備份目錄下新建目錄
echo -e "完全備份$LATEST_FULL_BACKUP未過期,將根據(jù)$LATEST_FULL_BACKUP名字作為增量備份基礎(chǔ)目錄名"
echo "   "
NEW_INCRDIR=$INCRBACKUP_DIR/$LATEST_FULL_BACKUP
mkdir -p $NEW_INCRDIR
# 查找最新的增量備份是否存在.指定一個備份的路徑作為增量備份的基礎(chǔ)
LATEST_INCR_BACKUP=`find $NEW_INCRDIR -mindepth 1 -maxdepth 1 -type d -printf "%P\n"  | sort -nr | head -1`
if [ ! $LATEST_INCR_BACKUP ] ; then
INCRBASEDIR=$FULLBACKUP_DIR/$LATEST_FULL_BACKUP
echo -e "增量備份將以$INCRBASEDIR作為備份基礎(chǔ)目錄"
echo "   "
else
INCRBASEDIR=$INCRBACKUP_DIR/${LATEST_FULL_BACKUP}/${LATEST_INCR_BACKUP}
echo -e "增量備份將以$INCRBASEDIR作為備份基礎(chǔ)目錄"
echo "   "
fi
echo "使用$INCRBASEDIR作為基礎(chǔ)本次增量備份的基礎(chǔ)目錄."
$INNOBACKUPEXFULL --defaults-file=$MY_CNF --use-memory=4G $MYSQL_CMD --incremental $NEW_INCRDIR --incremental-basedir $INCRBASEDIR > $TMPLOG 2>&1
#保留一份備份的詳細(xì)日志
cat $TMPLOG>/databackup/xtrabackuplog/$logfiledate
if [ -z "`tail -1 $TMPLOG | grep 'innobackupex: completed OK!'`" ] ; then
 echo "$INNOBACKUPEX命令執(zhí)行失敗:"; echo
 echo -e "---------- $INNOBACKUPEX_PATH錯誤 ----------"
 cat $TMPLOG
 rm -f $TMPLOG
 exit 1
fi
THISBACKUP=`awk -- "/Backup created in directory/ { split( \\\$0, p, \"'\" ) ; print p[2] }" $TMPLOG`
rm -f $TMPLOG
echo -n "數(shù)據(jù)庫成功備份到:$THISBACKUP"
echo
# 提示應(yīng)該保留的備份文件起點
LATEST_FULL_BACKUP=`find $FULLBACKUP_DIR -mindepth 1 -maxdepth 1 -type d -printf "%P\n" | sort -nr | head -1`
NEW_INCRDIR=$INCRBACKUP_DIR/$LATEST_FULL_BACKUP
LATEST_INCR_BACKUP=`find $NEW_INCRDIR -mindepth 1 -maxdepth 1 -type d -printf "%P\n"  | sort -nr | head -1`
RES_FULL_BACKUP=${FULLBACKUP_DIR}/${LATEST_FULL_BACKUP}
RES_INCRE_BACKUP=`dirname ${INCRBACKUP_DIR}/${LATEST_FULL_BACKUP}/${LATEST_INCR_BACKUP}`
echo
echo -e '\e[31m NOTE:---------------------------------------------------------------------------------.\e[m' #紅色
echo -e "必須保留$KEEP_FULLBACKUP份全備即全備${RES_FULL_BACKUP}和${RES_INCRE_BACKUP}目錄中所有增量備份."
echo -e '\e[31m NOTE:---------------------------------------------------------------------------------.\e[m' #紅色
echo
else
echo  "*********************************"
echo -e "正在執(zhí)行全新的完全備份...請稍等..."
echo  "*********************************"
$INNOBACKUPEXFULL --defaults-file=$MY_CNF  --use-memory=4G  $MYSQL_CMD $FULLBACKUP_DIR > $TMPLOG 2>&1 
#保留一份備份的詳細(xì)日志
cat $TMPLOG>/databackup/xtrabackuplog/$logfiledate
if [ -z "`tail -1 $TMPLOG | grep 'innobackupex: completed OK!'`" ] ; then
 echo "$INNOBACKUPEX命令執(zhí)行失敗:"; echo
 echo -e "---------- $INNOBACKUPEX_PATH錯誤 ----------"
 cat $TMPLOG
 rm -f $TMPLOG
 exit 1
fi
 
THISBACKUP=`awk -- "/Backup created in directory/ { split( \\\$0, p, \"'\" ) ; print p[2] }" $TMPLOG`
rm -f $TMPLOG
echo -n "數(shù)據(jù)庫成功備份到:$THISBACKUP"
echo
# 提示應(yīng)該保留的備份文件起點
LATEST_FULL_BACKUP=`find $FULLBACKUP_DIR -mindepth 1 -maxdepth 1 -type d -printf "%P\n" | sort -nr | head -1`
RES_FULL_BACKUP=${FULLBACKUP_DIR}/${LATEST_FULL_BACKUP}
echo
echo -e '\e[31m NOTE:---------------------------------------------------------------------------------.\e[m' #紅色
echo -e "無增量備份,必須保留$KEEP_FULLBACKUP份全備即全備${RES_FULL_BACKUP}."
echo -e '\e[31m NOTE:---------------------------------------------------------------------------------.\e[m' #紅色
echo
fi
#刪除過期的全備
echo -e "find expire backup file...........waiting........."
echo -e "尋找過期的全備文件并刪除">>/databackup/xtrabackuplog/$logfiledate
find $FULLBACKUP_DIR -type d -name "201*" -mtime +2| xargs rm -fr {};
#刪除過期的增備
echo -e "尋找過期的增備文件并刪除" >>/databackup/xtrabackuplog/$logfiledate
find $INCRBACKUP_DIR -type d -name "201*" -mtime +2| xargs rm -fr {};
echo
echo "完成于: `date +%F' '%T' '%w`"
exit 0

五:驗證結(jié)果

腳本執(zhí)行完畢后,則會在/databackup/xtrabackup下創(chuàng)建兩個文件夾,分別是full代表全庫備份和incre增量備份

第一次執(zhí)行,則創(chuàng)建全庫備份,該腳本每天創(chuàng)建一分全庫備份,增量備份則根據(jù)執(zhí)行腳本的間隔來執(zhí)行。

六:計劃任務(wù)參考

這里給出一個事例僅供參考:

編輯crontab計劃任務(wù)

00 */1 * * * /root/shell/xtrabackup.sh 1>/dev/null  2>&1 &

這里的意思是每一小時自動執(zhí)行一次腳本,增量備份的間隔是1小時

網(wǎng)頁名稱:10分鐘完成MySQL物理xtrabackup增量備份
文章出自:http://muchs.cn/article14/isjhde.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供標(biāo)簽優(yōu)化、網(wǎng)站設(shè)計公司、網(wǎng)站制作關(guān)鍵詞優(yōu)化、網(wǎng)站排名、定制網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

網(wǎng)站優(yōu)化排名