postgres pgpool PIRT online recovery steps

postgres+pgpool实现在线恢复，实际上说白了就是手动恢复变成自动恢复。通过调用命令和脚本，pgpool控制多个node实现备份，恢复，重启，加载。

background

postgres 8.4 

pgpool-II 3.4.2

复制模式+load balance

基于PIRT 实现在线恢复

安装好c语言函数

postgres实例都以archmod=on 模式运行

两台机器要实现postgres 用户ssh 无密码互访问

配置好pcp

配置好脚本，命令（脚本和命令参见pgpool手册，不过要小心调试）

from     192.168.0.10 

to          192.168.0.11 

1,准备，查看状态

#su - postgres

-bash-4.1$ psql -p 9999 -h192.168.0.10 
Password:
psql (8.4.20)
Type "help" for help.

postgres=# show pool_nodes;
node_id |    hostname    | port | status | lb_weight |  role
---------+----------------+------+--------+-----------+--------
0       | 192.168.0.10   | 5433 | 2      | 0.500000  | master
1       | 192.168.0.11 | 5433 | 2      | 0.500000  | slave
(2 rows)

2，打开日志

[root@iZ2864nri9hZ ~]# tail -f /var/log/pgpool/pgpool.log

[root@iZ2864nri9hZ ~]# cd /data/
[root@iZ2864nri9hZ data]# tail -f archive/recovery.log

3，停掉192.168.0.10  的postgres，并删除实例

[root@iZ28bh1trh9Z data]# ./postgrestop.sh
[root@iZ28bh1trh9Z data]# ps -ef |grep postgres
root     26503 26432  0 09:23 pts/1    00:00:00 grep postgres

postgres=# show pool_nodes;
The connection to the server was lost. Attempting reset: Succeeded.
postgres=# show pool_nodes;
node_id |    hostname    | port | status | lb_weight |  role
---------+----------------+------+--------+-----------+--------
0       | 192.168.0.10   | 5433 | 2      | 0.500000  | master
1       | 192.168.0.11  | 5433 | 3      | 0.500000  | slave
(2 rows)

这里看到 pgpool连接会断掉，并且 detatch 1 node 为 status=3

同时，如果有web程序连接pgpool,连接也会断，不过web程序会自动重连，重连需要几秒钟，应该是可以配置的？？

删除 pgdata_backup, pgdata.tar.gz

备份pgdata

root@iZ28bh1trh9Z data]# rm -rf pgdata_backup
[root@iZ28bh1trh9Z data]# mv pgdata pgdata_backup
[root@iZ28bh1trh9Z data]# rm pgdata.tar.gz

4,开始 online recovery

退出 pgpool的登录

postgres=# \q

运行命令

[root@iZ2864nri9hZ data]# pcp_recovery_node -d 50 localhost 9898 postgres postgres 1
DEBUG: send: tos="R", len=46
DEBUG: recv: tos="r", len=21, data=AuthenticationOK
DEBUG: send: tos="D", len=6
DEBUG: recv: tos="c", len=20, data=CommandComplete
DEBUG: send: tos="X", len=4

运行过程中要查看

/var/log/pgpool/pgpool.log 

/data/archive/recovery.log

5，结束检查

[root@iZ28bh1trh9Z data]# pwd
/alidata/data
[root@iZ28bh1trh9Z data]# ls
checkpgpool.sh  pgbackup.sh  pgdata  pgdata_backup  pgdata.tar.gz  pgpoolstart.sh  pgstartup.log  postgrestart.sh  postgrestop.sh

[root@iZ28bh1trh9Z data]# ps -ef |grep postgres
root     26550  1020  0 09:38 ?        00:00:00 sshd: postgres [priv]
postgres 26552 26550  0 09:38 ?        00:00:00 sshd: postgres@notty
postgres 26556     1  0 09:38 ?        00:00:00 /usr/bin/postgres -D /data/pgdata
postgres 26561 26556  0 09:38 ?        00:00:00 postgres: logger process
postgres 26577 26556  0 09:38 ?        00:00:00 postgres: writer process
postgres 26578 26556  0 09:38 ?        00:00:00 postgres: wal writer process
postgres 26579 26556  0 09:38 ?        00:00:00 postgres: autovacuum launcher process
postgres 26580 26556  0 09:38 ?        00:00:00 postgres: archiver process   last was 00000002.history
postgres 26581 26556  0 09:38 ?        00:00:00 postgres: stats collector process
postgres 26594 26556  0 09:40 ?        00:00:00 postgres: postgres postgres 192.168.0.10 (35555) idle
root     26609 26432  0 09:48 pts/1    00:00:00 grep postgres

-bash-4.1$ psql -p 9999 -h 192.168.0.10 
Password:
psql (8.4.20)
Type "help" for help.

postgres=# show pool_nodes;
node_id |    hostname    | port | status | lb_weight |  role
---------+----------------+------+--------+-----------+--------
0       | 192.168.0.10   | 5433 | 2      | 0.500000  | master
1       | 192.168.0.11  | 5433 | 2      | 0.500000  | slave
(2 rows)

可以看到 两个node都已经启动

6，清理现场