pgsql主从流复制PostgreSQL流复制

pgsql主从流复制PostgreSQL流复制
原理机制
参考--https://yq.aliyun.com/articles/51009

主备总体结构
PG主备流复制的核心部分由walsender，walreceiver和startup三个进程组成。

walsender进程是用来发送WAL日志记录的
walreceiver进程是用来接收WAL日志记录的
startup进程是用来apply日志的
配置环境
主机名 IP地址 角色 数据目录
postgres202 192.168.1.202 primary /home/postgres/data
postgres203 192.168.1.203 standby /home/postgres/data
同步类型
异步方式
同步方式
【异步方式配置】
复制代码
主数据库配置

1. 主机192.168.1.202
   1.1 首先需要配置一个账号进行主从同步。
   创建replica用户设置密码，登录和备份权限。
   CREATE ROLE replica login replication encrypted password 'replica'

1.2 修改pg_hba.conf，增加replica用户，进行同步。
host replication replica 192.168.1.0/24 md5
这样，就设置了replica这个用户可以从192.168.1.0对应的网段进行流复制请求。

1.3 修改postgresql.conf，注意设置下下面几个地方：
wal_level = hot_standby # 这个是设置主为wal的主机
max_wal_senders = 5 # 这个设置了可以最多有几个流复制连接，差不多有几个从，就设置几个
wal_keep_segments = 128 # 设置流复制保留的最多的xlog数目
wal_sender_timeout = 60s # 设置流复制主机发送数据的超时时间
max_connections = 100 # 这个设置要注意下，从库的max_connections必须要大于主库的

1.4 重启主库

2. 备数据库配置
   主机192.168.1.203
   2.1 使用pg_basebackup建备库
   pg_basebackup -F p --progress -D /home/postgres/data -h 192.168.1.202 -p 5432 -U replica --password
   这里使用了pg_basebackup这个命令，/home/postgres/data这个目录是空的
   成功之后，就可以看到这个目录中现有的文件都是一样的了。

2.2 进入到/home/postgres/data目录，修改recovery.conf，只要修改几个地方就行了
standby_mode = on # 这个说明这台机器为从库
primary_conninfo = 'host=192.168.1.202 port=5432 user=replica password=replica' # 这个说明这台机器对应主库的信息
recovery_target_timeline = 'latest' # 这个说明这个流复制同步到最新的数据

2.3 postgresql.conf中也有几个地方要进行修改
max_connections = 200 # 一般查多于写的应用从库的最大连接数要比较大
hot_standby = on # 说明这台机器不仅仅是用于数据归档，也用于数据查询
max_standby_streaming_delay = 30s # 数据流备份的最大延迟时间
wal_receiver_status_interval = 10s # 多久向主报告一次从的状态，当然从每次数据复制都会向主报告状态，这里只是设置最长的间隔时间
hot_standby_feedback = on # 如果有错误的数据复制，是否向主进行反馈

2.4 启动备

【主库】查看配置结果
postgres=# select * from pg_stat_replication ;
-[ RECORD 1 ]----+------------------------------
pid | 1793
usesysid | 24576
usename | replica
application_name | walreceiver
client_addr | 192.168.1.203
client_hostname |
client_port | 32250
backend_start | 2017-09-01 22:23:16.924496+08
backend_xmin | 1676
state | streaming
sent_location | 0/60003E0
write_location | 0/60003E0
flush_location | 0/60003E0
replay_location | 0/60003E0
sync_priority | 0
sync_state | async

复制代码
【异步更改为同步方式】

复制代码

1. 主数据库配置
   主机192.168.1.202
   1.1 修改postgresql.conf
   synchronous_standby_names = 'standby01'

2. 备数据库配置
   主机192.168.1.203
   2.2 vi recovery.conf
   standby_mode = on
   primary_conninfo = 'application_name=standby01 host=192.168.1.202 port=5432 user=replica password=replica'
   recovery_target_timeline = 'latest

3.重启动主备库

【主库】查看
postgres=# select * from pg_stat_replication ;
-[ RECORD 1 ]----+----------------------------
pid | 1706
usesysid | 24576
usename | replica
application_name | standby01
client_addr | 192.168.1.203
client_hostname |
client_port | 59550
backend_start | 2017-09-01 23:36:05.7176+08
backend_xmin | 1676
state | streaming
sent_location | 0/70000D0
write_location | 0/70000D0
flush_location | 0/70000D0
replay_location | 0/70000D0
sync_priority | 1
sync_state | sync

也可以用以下方法，类似：

0. Stop postgresql on standby
   standby# /etc/init.d/postgresql stop

1. invoke pg_start_backup() on master
   master# sudo -u postgres psql -c "SELECT pg_start_backup('2011-08-15_04:49)"

2. remove data files on standby
   standby# cd /var/lib/postgresql/9.0/main
   standby# /bin/rm -rf base pg_*
   standby# mkdir pg_xlog; chown postgres.postgres pg_xlog; chmod 700 pg_xlog

3. copy data files
   master# rsync -av --delete /var/lib/postgresql/9.0/main --exclude=pg_xlog
   --exclude=postmaster.pid --exclude=server.crt --exclude=server.key
   /path/to/standby/data/directory

4. invoke pg_stop_backup() on master
   master# sudo -u postgres psql -c "SELECT pg_stop_backup()"

5. start postgresql on standby
   standby# /etc/init.d/postgresql start