告訴你如何打造PostgreSQL閃回環(huán)境

在 PostgreSQL 數(shù)據(jù)庫；目前是不支持類似 Oracle 閃回特性；我們知道 Oracle 閃回特性在數(shù)據(jù)恢復(fù)是非常簡單給力。增加數(shù)據(jù)庫操作人員（開發(fā)，DBA）的容錯率。Oracle 閃回特性使用場景：

成都創(chuàng)新互聯(lián)專業(yè)為企業(yè)提供儋州網(wǎng)站建設(shè)、儋州做網(wǎng)站、儋州網(wǎng)站設(shè)計、儋州網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計與制作、儋州企業(yè)網(wǎng)站模板建站服務(wù)，10多年儋州做網(wǎng)站經(jīng)驗(yàn)，不只是建網(wǎng)站，更提供有價值的思路和整體網(wǎng)絡(luò)服務(wù)。
  • flashback database： 數(shù)據(jù)庫閃回；多用于數(shù)據(jù)庫恢復(fù)；數(shù)據(jù)庫，用戶，表空間誤刪。
  • flashback table： 表閃回；用于數(shù)據(jù)表恢復(fù)；數(shù)據(jù)表誤刪。
  • flashback query： 閃回查詢；應(yīng)用于修復(fù)誤操作數(shù)據(jù)。

對于 PostgreSQL 閃回；校長（德哥）有寫過一系列的文章PostgreSQL flashback(閃回)功能實(shí)現(xiàn)與介紹；如今我取巧實(shí)現(xiàn) PostgreSQL 閃回特性。原理參考我之前的文章PostgreSQL恢復(fù)誤刪數(shù)據(jù)。

  • 支持在線數(shù)據(jù)庫恢復(fù)（不推薦），多用于數(shù)據(jù)表恢復(fù)，修復(fù)誤操作數(shù)據(jù)。
  • 支持多次閃回操作；在 flashback query 中恢復(fù)的時間點(diǎn)不是很理想；可以重新設(shè)定時間點(diǎn)再閃回操作一次。

一. flashback 所需命令

實(shí)現(xiàn) flashback 就是一個有效的數(shù)據(jù)庫備份/恢復(fù)。

  • 備份操作命令有 scp/cp, pg_basebackup, pg_rman。我選 pg_basebackup。因?yàn)閜g_basebackup 支持異構(gòu)備份。意味著可以在同一臺服務(wù)器在 cp 一個 PostgreSQL 實(shí)例。即可以在一臺服務(wù)器上實(shí)現(xiàn)閃回。
  • 恢復(fù)操作有 copy 或者 pg_dump 命令。

二. flashback 所需條件

實(shí)現(xiàn) flashback 可以是在線服務(wù)器上操作，也可以是在另一臺服務(wù)器上操作。換句話說：可以是一臺服務(wù)器或者是兩臺服務(wù)器來實(shí)現(xiàn)。在一臺服務(wù)器上需要更改數(shù)據(jù)庫端口。由于本環(huán)境有清理目錄操作；避免在在線服務(wù)器上誤刪目錄。所以建議用兩條服務(wù)器來實(shí)現(xiàn)。

三. flashback 搭建原理

本文檔采用兩臺服務(wù)器來實(shí)現(xiàn)。兩臺服務(wù)器時間校準(zhǔn)，免密碼登錄。

  • 正式數(shù)據(jù)庫環(huán)境：192.168.1.201
  • 閃回數(shù)據(jù)庫環(huán)境：192.168.1.202

3.1 創(chuàng)建腳本cleandir.sh

cleandir腳本用于在pg_basebackup備份前；先清空備份所需的路徑

psql -h 192.168.1.201 -p $PGPORT -t -A -n -c"SELECT pg_catalog.pg_tablespace_location(oid) AS "Location" FROM pg_catalog.pg_tablespace where spcname not in ('pg_default','pg_global')" -o tablespace_location.txtawk '{print "rm -rf " $1}' tablespace_location.txt > cleandir.shecho "rm -rf $PGDATA" >> cleandir.sh

3.2 創(chuàng)建備份腳本pg_backup.sh

采用pg_basebackup備份；

cleandir.shpg_basebackup -F p --progress -D $PGDATA -h 192.168.1.201 -p $PGPORT -U replica

加入定時任務(wù) crontab 中 例如：每天凌晨過5分執(zhí)行備份

5 0 * * * pg_backup.sh

3.3 創(chuàng)建配置文件recovery.conf模板

執(zhí)行閃回查詢/數(shù)據(jù)庫恢復(fù)。多用時間點(diǎn)進(jìn)行恢復(fù)即（PITR）

restore_command = 'scp postgres@192.168.1.201:**/%f %p'recovery_target_time = '2018-11-10 10:33:12'

3.4 創(chuàng)建恢復(fù)腳本pg_flashback.sh

pg_flashback.sh 腳本用于數(shù)據(jù)庫誤操作實(shí)現(xiàn)閃回到某個時間點(diǎn)。支持多次閃回。執(zhí)行閃回 之前；需要配置 recovery.conf 中的 “recovery_target_time” 時間點(diǎn)。即恢復(fù)到哪個時間點(diǎn)。
第一次執(zhí)行；執(zhí)行

pg_flashback.sh 1

往后執(zhí)行閃回；通稱再次執(zhí)行；執(zhí)行命令

pg_flashback.sh 2

當(dāng)然往后加也行例如：pg_flashback.sh 3
pg_flashback.sh腳本如下

##===========================================================  ##   pg_flashback.sh                ##   created by lottu           ##   2018/11/07    ##   usage: pg_flashback.sh 1                          ##============================================================  #!/bin/bashPGHOME=/opt/pgsql96PGDATA=/data/postgres/data              LANG=en_US.utf8PGPORT=5432PGUSER=postgresPGDATABASE=postgresPG_BACK_HOST_IP=192.168.1.202E_BADARGS=65E_FAIL=66if [ $# -ne 1 ];then echo "Usage: `basename $0` Please invoke this script with one command-line arguments" exit $E_BADARGSfiflashback_path=/data/flash_backif [ $1 -eq 1 ];then echo "Info: backup backupset" backup.shelse rebackup.shfi echo "Info: edit recovery.conf"#scp recovery.conf postgres@192.168.1.202:$PGDATAcp /home/postgres/recovery.conf $PGDATAecho "Info: begin start database"pg_ctl start -l /home/postgres/log/pg_server.logif [ $? -eq 0 ];then echo "Info: start database succes" sleep 10 psql -h $PG_BACK_HOST_IP -p 5432 postgres postgres -c "select pg_xlog_replay_resume()"else echo "[Error]: start database fail" exit $E_FAILfi

四. flashback 實(shí)驗(yàn)驗(yàn)證

4.1 驗(yàn)證目的

  • 驗(yàn)證是否可以閃回/恢復(fù)
  • 驗(yàn)證是否可以多次操作閃回
  • 驗(yàn)證在閃回的過程中；正式環(huán)境是否正常對外服務(wù)

4.2 實(shí)驗(yàn)操作

4.2.1 備份數(shù)據(jù)庫

執(zhí)行pg_backup.sh腳本。部署成功了是沒這個操作。因?yàn)槊刻於加卸〞r備份。

[postgres@Postgres202 ~]$ pg_backup.sh waiting for server to shut down......... doneserver stopped 322503/322503 kB (100%), 4/4 tablespaces

4.2.2 模擬誤操作

lottu=# create table lottu as select * from lottu01 ; SELECT 4 lottu=# select * from lottu; id | text ------+------- 1001 | lottu 1004 | rax 1002 | world 1003 | world (4 rows) -- 獲取時間點(diǎn)；這個時間點(diǎn)“2018-11-10 14:56:56”是我目標(biāo)恢復(fù)時間點(diǎn)。表lottu有4條記錄。lottu=# select now(); now ------------------------------ 2018-11-10 14:56:56.30188+08 (1 row) -- 在時間點(diǎn)“2018-11-10 14:57:51”；誤操作1 清理表lottu的記錄lottu=# delete from lottu; DELETE 4 lottu=# select now(); now ------------------------------- 2018-11-10 14:57:51.891931+08 (1 row) -- 誤操作2 刪除表lottu。lottu=# drop table lottu; DROP TABLE
  • 獲取時間點(diǎn)；這個時間點(diǎn)“2018-11-10 14:56:56”是我目標(biāo)恢復(fù)時間點(diǎn)。表lottu有4條記錄。
  • 在時間點(diǎn)“2018-11-10 14:57:51”；誤操作1 清理表lottu的記錄
  • 誤操作2 刪除表lottu。

4.2.3 閃回操作

我們先在配置文件 recovery.conf 中的參數(shù)“recovery_target_time” 設(shè)置為 “2018-11-10 14:57:51”。執(zhí)行閃回pg_flashback.sh 1

[postgres@Postgres202 ~]$ pg_flashback.sh 1 Info: backup backupset Info: edit recovery.conf Info: begin start databaseserver starting Info: start database succespsql: FATAL: the database system is starting up

閃回數(shù)據(jù)庫成功啟動；登錄查看表lottu情況：表數(shù)據(jù)未找回；這不是我所需閃回的目標(biāo)

[postgres@Postgres202 ~]$ psql lottu lottupsql (9.6.0) Type "help" for help. lottu=# \d lottu Table "lottu.lottu" Column | Type | Modifiers --------+---------+----------- id | integer | name | text | lottu=# select * from lottu; id | name ----+------ (0 rows)

在配置文件 recovery.conf 中的參數(shù)“recovery_target_time” 設(shè)置為 “2018-11-10 14:56:56”。再執(zhí)行閃回pg_flashback.sh 2

[postgres@Postgres202 ~]$ pg_flashback.sh 2 Info: edit recovery.conf Info: begin start databaseserver starting Info: start database successpsql: FATAL: the database system is starting up

再次閃回也成功了。我們在看下表lottu的情況

[postgres@Postgres202 ~]$ psql lottu lottupsql (9.6.0) Type "help" for help. lottu=# \d lottu Table "lottu.lottu" Column | Type | Modifiers --------+---------+----------- id | integer | name | text | lottu=# select * from lottu; id | name ------+------- 1001 | lottu 1004 | rax 1002 | world 1003 | world (4 rows)

表 lottu 的數(shù)據(jù)成功找回。在使用 pg_dump 導(dǎo)出表 lottu 的表結(jié)構(gòu)和數(shù)據(jù)的腳本；

[postgres@Postgres202 ~]$ pg_dump -d lottu -t lottu.lottu -f lottu.sql [postgres@Postgres202 ~]$ scp lottu.sql postgres@192.168.1.201:/home/postgres

再到正式數(shù)據(jù)庫上執(zhí)行

[postgres@Postgres201 ~]$ psql lottu lottu psql (9.6.0) Type "help" for help. lottu=# \i lottu.sql SET SET SET SET SET SET SET SET SET SET SET CREATE TABLE ALTER TABLE COPY 4 lottu=# \d lottu Table "lottu.lottu" Column | Type | Modifiers --------+---------+----------- id | integer | name | text | lottu=# select * from lottu; id | name ------+------- 1001 | lottu 1004 | rax 1002 | world 1003 | world (4 rows)

在整個閃回過程；除了最后一步是在正式服務(wù)器上執(zhí)行。前面其他操作都是在閃回數(shù)據(jù)庫操作。

4.3 實(shí)驗(yàn)結(jié)論

  • 可以閃回
  • 可以多次操作
  • 不影響正式環(huán)境

五. 其他實(shí)現(xiàn)方式參考

PostgreSQL flashback(閃回) 功能實(shí)現(xiàn)與介紹

六. 不足

  • 不推薦使用這種方式恢復(fù)數(shù)據(jù)庫。多用于ddl/dml誤操作恢復(fù)。

七. 代碼下載

鏈接：https://pan.baidu.com/s/1j8ZNj3yjxj82MnomzxQkfA
提取碼：j4xd


創(chuàng)新互聯(lián)面向全國提供域名注冊、虛擬主機(jī)、云服務(wù)器、服務(wù)器托管與租用，如需了解，請聯(lián)系QQ:171356849微信：zh18159893430 咨詢，謝謝！


新聞標(biāo)題：告訴你如何打造PostgreSQL閃回環(huán)境
標(biāo)題URL：http://muchs.cn/article36/ddpsg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供云服務(wù)器、做網(wǎng)站、外貿(mào)網(wǎng)站建設(shè)、網(wǎng)站內(nèi)鏈、小程序開發(fā)、響應(yīng)式網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)

微信小程序開發(fā)