POSTGRESQL10.3RPM包如何实现主从搭建

这篇文章主要介绍POSTGRESQL10.3  RPM包如何实现主从搭建,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!

创新互联是一家以网站设计建设,小程序制作、网站开发设计,网络软件产品开发,企业互联网推广服务为主的民营科技公司。主要业务涵盖:为客户提供网站策划、网站设计、网站开发、域名与空间、网站优化排名、外链等服务领域。凭借建站老客户口碑做市场,建设网站时,根据市场搜索规律和搜索引擎的排名收录规律编程,全力为建站客户设计制作排名好的网站,深受老客户认可和赞誉。



一、POSTGRESQL主从复制搭建

1、安装POSTGRESQL

PGSQL10.3

下载地址:

https://yum.postgresql.org/testing/10/redhat/rhel-6-x86_64/repoview/postgresqldbserver10.group.html

下载

·         postgresql10 - PostgreSQL client programs and libraries

·         postgresql10-contrib - Contributed source and binaries distributed with PostgreSQL

·         postgresql10-libs - The shared libraries required for any PostgreSQL clients

·         postgresql10-server - The programs needed to create and run a PostgreSQL server

依次使用rpm –ivh 进行安装(两个节点都安装)

安装顺序:

rpm -ivh postgresql10-libs-10.3-1PGDG.rhel6.x86_64.rpm

rpm -ivh postgresql10-10.3-1PGDG.rhel6.x86_64.rpm

rpm -ivh postgresql10-server-10.3-1PGDG.rhel6.x86_64.rpm

rpm -ivh postgresql10-contrib-10.3-1PGDG.rhel6.x86_64.rpm

2、启动POSTGRESQL服务

(1)第一步启动

service postgresql-10 initdb

(2)第二步启动

service postgresql-10 start

3、修改监听

(1)修改监听地址

vi  /var/lib/pgsql/10/data/postgresql.conf

# - Connection Settings -

 #这里原本是#listen_addresses ='localhost'修改为以下黄色字体

listen_addresses = '192.168.159.128'           

(2)查看监听

显示黄色特色字体即可

netstat -anlp |grep post

tcp        0      0 192.168.159.128:5432        0.0.0.0:*                   LISTEN      4784/postmaster    

udp        0      0 ::1:57424                   ::1:57424                   ESTABLISHED 4784/postmaster    

unix  2      [ ACC ]     STREAM     LISTENING     30353  4784/postmaster     /var/run/postgresql/.s.PGSQL.5432

unix  2      [ ACC ]     STREAM     LISTENING     30356  4784/postmaster     /tmp/.s.PGSQL.5432

4、主从搭建

(1)主库环境

su - postgres

psql

创建一个用户复制的用户replica

CREATE ROLE replica login replication encrypted password 'replica';

修改pg_hba.conf文件,指定replica登录网络(最后一添加)

vi /var/lib/pgsql/10/data/pg_hba.conf

host    replication     replica            192.168.159.0/24         md5
host    all          replica           192.168.159.0/24         trust

 
主库配置文件修改以下几项,其他不变
vi /var/lib/pgsql/10/data/postgresql.conf
listen_addresses = '*'
wal_level = hot_standby  #热备模式
max_wal_senders= 6 #可以设置最多几个流复制链接,差不多有几个从,就设置多少
wal_keep_segments = 10240  #重要配置
wal_send_timeout = 60s
max_connections = 512 #从库的 max_connections要大于主库
archive_mode = on #允许归档
archive_command = 'cp %p /url/path%f'   #根据实际情况设置

(2)从库环境

把备库的数据文件夹目录清空
rm -rf /var/lib/pgsql/10/data/*

在备库上运行

pg_basebackup -F p --progress -D /var/lib/pgsql/10/data/ -h 192.168.159.128 -p 5432 -U replica --password

输入密码replica 

!!!注意,复制完成后,在备库一定要将数据目录下的所有文件重新授权

chown -R postgres.postgres /var/lib/pgsql/10/data/

创建recovery.cnf 文件

cp /usr/pgsql-10/share/recovery.conf.sample /var/lib/pgsql/10/data/recovery.conf

vi  /var/lib/pgsql/10/data/recovery.conf

standby_mode = on

primary_conninfo = 'host=192.168.159.128 port=5432 user=replica password=replica'

recovery_target_timeline = 'latest'

trigger_file = '/var/lib/pgsql/10/data/trigger.kenyon'

vi /var/lib/pgsql/10/data/postgresql.conf
listen_addresses ='*'

wal_level = hot_standby

max_connections =1000 #一般从的最大链接要大于主的

hot_standby =on  #说明这台机器不仅仅用于数据归档,也用于查询

max_standby_streaming_delay =30s

wal_receiver_status_interval = 10s  #多久向主报告一次从的状态

hot_standby_feedback = on   #如果有错误的数据复制,是否向主进行范例

启动备库

service postgresql-10 start

如果无法启动,如下操作:

scp /var/lib/pgsql/10/data/postmaster.opts 192.168.159.129:/var/lib/pgsql/10/data/

 chown -R postgres.postgres /var/lib/pgsql/10/data/

chmod 700 data/

5、验证主从功能

主库查询

su - postgres

psql

postgres=# select client_addr,sync_state from pg_stat_replication;

   client_addr   | sync_state

-----------------+------------

 192.168.159.129 | async

(1 row)

在主库创建表

create table test2 (name varchar(3));

在从库查询表

\d

主库查询黄色字体

[root@ha1 data]# ps aux | grep postgres

postgres  4686  0.0  0.8 356584 15592 ?        S    15:22   0:00 /usr/pgsql-10/bin/postmaster -D /var/lib/pgsql/10/data

postgres  4688  0.0  0.0 209416  1572 ?        Ss   15:22   0:00 postgres: logger process                             

postgres  4690  0.0  0.1 356700  3744 ?        Ss   15:22   0:00 postgres: checkpointer process                       

postgres  4691  0.0  0.1 356584  3044 ?        Ss   15:22   0:00 postgres: writer process                             

postgres  4692  0.0  0.3 356584  5980 ?        Ss   15:22   0:00 postgres: wal writer process                         

postgres  4693  0.0  0.1 356992  2616 ?        Ss   15:22   0:00 postgres: autovacuum launcher process                

postgres  4694  0.0  0.0 211516  1540 ?        Ss   15:22   0:00 postgres: archiver process                           

postgres  4695  0.0  0.0 211648  1784 ?        Ss   15:22   0:02 postgres: stats collector process                    

postgres  4696  0.0  0.1 356876  2272 ?        Ss   15:22   0:00 postgres: bgworker: logical replication launcher     

postgres  4711  0.7  0.4 358576  8536 ?        Ss   15:24   0:35 postgres: dbuser exampledb 192.168.159.1(63172) idle 

postgres  4845  0.0  0.1 357384  3424 ?        Ss   15:39   0:00 postgres: wal sender process replica 192.168.159.129(46554) streaming 0/401B0A0

root      5049  0.0  0.0 103256   840 pts/3    S+   16:42   0:00 grep postgres

备库查询黄色字体

[root@ha2 data]# ps aux | grep postgres

postgres  4827  0.0  2.2 398228 42844 ?        S    15:39   0:00 /usr/pgsql-10/bin/postmaster -D /var/lib/pgsql/10/data

postgres  4829  0.0  0.0 209416  1536 ?        Ss   15:39   0:00 postgres: logger process                             

postgres  4830  0.0  0.2 398324  3948 ?        Ss   15:39   0:00 postgres: startup process   recovering 000000010000000000000004

postgres  4831  0.0  0.1 398228  3496 ?        Ss   15:39   0:00 postgres: checkpointer process                       

postgres  4832  0.0  0.1 398228  2772 ?        Ss   15:39   0:00 postgres: writer process                             

postgres  4833  0.0  0.0 211516  1604 ?        Ss   15:39   0:00 postgres: stats collector process                    

postgres  4834  0.1  0.1 405444  3688 ?        Ss   15:39   0:06 postgres: wal receiver process   streaming 0/401B0A0 

root      4912  0.0  0.0 103252   828 pts/3    S+   16:42   0:00 grep postgres

6、POSTGRESQL相关

(1)创建LINUX用户

useradd dbuser

passwd dbuser

(2)创建数据库用户

CREATE USER dbuser WITH PASSWORD 'password';

(3)创建数据库

CREATE DATABASE exampledb OWNER dbuser;

(4)赋予权限

GRANT ALL PRIVILEGES ON DATABASE exampledb TO dbuser;

(5)以dbuser的身份连接数据库exampledb

su - dbuser

psql -d exampledb

(6)网络登陆方式

vi /var/lib/pgsql/10/data/pg_hba.conf(在IPV4那里添加以下)

host    exampledb        dbuser             192.168.159.0/24        trust

切换dbuser用户登陆

psql -h 192.168.159.128 -U dbuser -p password -d exampledb -p 5432

 (7)重启和停止命令

service postgresql-10 restart

service postgresql-10 stop

(8)重要配置文件

pg_hba.conf

postgresql.conf

(9)PG的安装目录及命令目录

查看进程是否启动,可以找到

命令目录/usr/pgsql-10/bin/

安装目录/var/lib/pgsql/10/data

[root@ha1 ~]# ps -ef|grep post

root      1732     1  0 02:25 ?        00:00:00 /usr/libexec/postfix/master

postfix   1742  1732  0 02:25 ?        00:00:00 pickup -l -t fifo -u

postfix   1743  1732  0 02:25 ?        00:00:00 qmgr -l -t fifo -u

postgres  2322     1  1 02:38 ?        00:00:00 /usr/pgsql-10/bin/postmaster -D /var/lib/pgsql/10/data

postgres  2324  2322  0 02:38 ?        00:00:00 postgres: logger process                             

postgres  2329  2322  0 02:38 ?        00:00:00 postgres: checkpointer process                       

postgres  2330  2322  0 02:38 ?        00:00:00 postgres: writer process                             

postgres  2331  2322  0 02:38 ?        00:00:00 postgres: wal writer process                         

postgres  2332  2322  0 02:38 ?        00:00:00 postgres: autovacuum launcher process                

postgres  2333  2322  0 02:38 ?        00:00:00 postgres: stats collector process                    

postgres  2334  2322  0 02:38 ?        00:00:00 postgres: bgworker: logical replication launcher     

root      2336  2232  0 02:39 pts/0    00:00:00 grep post

 



7、主备手动切换
4、手动主备切换

(1)创建备库recovery.conf 文件( 在备库上操作192.168.159.152)

  cp $PGHOME/share/recovery.conf.sample $PGDATA/recovery.conf

配置以下参数  

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.151 port=1921 user=repuser '   --标识主库信息

trigger_file = '/data/pg/data/trigger.kenyon'     --标识触发器文件

(2) 关闭主库(在主库上操作192.168.159.151)

/opt/postgresql-10.3/bin/pg_ctl -D /data/pg/data/ -l logfile stop

(3)激活备库到主库状态 ( 在备库上操作192.168.159.152 )

   激活备库只要创建一个文件即可,根据备库 recovery.conf 配置文件的参数 trigger_file 值,

  创建这个 trigger 文件即可。 例如 "touch /data/pg/data/trigger.kenyon"

touch /data/pg/data/trigger.kenyon

过一会儿发现 recovery.conf 文件变成 recovery.done ,说明备库已经激活。

查看logfile日志,出现以下信息即激活
2018-06-04 21:11:01.137 PDT [12818] 日志:  已找到触发器文件:/data/pg/data/trigger.kenyon
2018-06-04 21:11:01.148 PDT [12818] 日志:  redo 在 0/C02A390 完成
2018-06-04 21:11:01.172 PDT [12818] 日志:  已选择的新时间线ID:2
2018-06-04 21:11:05.442 PDT [12818] 日志:  归档恢复完毕
2018-06-04 21:11:05.568 PDT [12817] 日志:  数据库系统准备接受连接


(4)修改原来主库的配置文件
vi /data/pg/data/postgresql.conf
max_connections = 1500


(5)激活原来的主库,让其转变成从库  (在原来的主库上执行192.168.159.151) 

--创建 $PGDATA/recovery.conf 文件,配置以下参数
vi /data/pg/data/recovery.conf

recovery_target_timeline = 'latest'

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.152 port=1921 user=repuser '   --标识主库信息

trigger_file = '/data/pg/data/trigger.kenyon'     --标识触发器文件

--修改 pg_hba.conf (现在的主库上增加192.168.159.152),添加以下配置
vi /data/pg/data/pg_hba.conf

host   replication     repuser          192.168.159.151/32         md5


启动原来的主库即现在的从库(192.168.159.151)
/opt/postgresql-10.3/bin/pg_ctl -D /data/pg/data/ -l logfile start

查看现在的从库logfile日志发现报错信息
2018-06-05 00:08:00.326 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:00.327 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1
2018-06-05 00:08:05.322 PDT [9729] 日志:  在0/C000000处时间线1上重启WAL流操作
2018-06-05 00:08:05.327 PDT [9729] 日志:  复制由主用服务器终止
2018-06-05 00:08:05.327 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:05.329 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1
2018-06-05 00:08:10.328 PDT [9729] 日志:  在0/C000000处时间线1上重启WAL流操作
2018-06-05 00:08:10.332 PDT [9729] 日志:  复制由主用服务器终止
2018-06-05 00:08:10.332 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:10.333 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1

在现在的主库操作:
scp /data/pg/data/pg_wal/00000002.history 192.168.159.151:/data/pg/data/pg_wal/4、手动主备切换

(1)创建备库recovery.conf 文件( 在备库上操作192.168.159.152)

  cp $PGHOME/share/recovery.conf.sample $PGDATA/recovery.conf

配置以下参数  

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.151 port=1921 user=repuser '   --标识主库信息

trigger_file = '/data/pg/data/trigger.kenyon'     --标识触发器文件

(2) 关闭主库(在主库上操作192.168.159.151)

/opt/postgresql-10.3/bin/pg_ctl -D /data/pg/data/ -l logfile stop

(3)激活备库到主库状态 ( 在备库上操作192.168.159.152 )

   激活备库只要创建一个文件即可,根据备库 recovery.conf 配置文件的参数 trigger_file 值,

  创建这个 trigger 文件即可。 例如 "touch /data/pg/data/trigger.kenyon"

touch /data/pg/data/trigger.kenyon

过一会儿发现 recovery.conf 文件变成 recovery.done ,说明备库已经激活。

查看logfile日志,出现以下信息即激活
2018-06-04 21:11:01.137 PDT [12818] 日志:  已找到触发器文件:/data/pg/data/trigger.kenyon
2018-06-04 21:11:01.148 PDT [12818] 日志:  redo 在 0/C02A390 完成
2018-06-04 21:11:01.172 PDT [12818] 日志:  已选择的新时间线ID:2
2018-06-04 21:11:05.442 PDT [12818] 日志:  归档恢复完毕
2018-06-04 21:11:05.568 PDT [12817] 日志:  数据库系统准备接受连接


(4)修改原来主库的配置文件
vi /data/pg/data/postgresql.conf
max_connections = 1500


(5)激活原来的主库,让其转变成从库  (在原来的主库上执行192.168.159.151) 

--创建 $PGDATA/recovery.conf 文件,配置以下参数
vi /data/pg/data/recovery.conf

recovery_target_timeline = 'latest'

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.152 port=1921 user=repuser '   --标识主库信息

trigger_file = '/data/pg/data/trigger.kenyon'     --标识触发器文件

--修改 pg_hba.conf (现在的主库上增加192.168.159.152),添加以下配置
vi /data/pg/data/pg_hba.conf

host   replication     repuser          192.168.159.151/32         md5


启动原来的主库即现在的从库(192.168.159.151)
/opt/postgresql-10.3/bin/pg_ctl -D /data/pg/data/ -l logfile start

查看现在的从库logfile日志发现报错信息
2018-06-05 00:08:00.326 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:00.327 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1
2018-06-05 00:08:05.322 PDT [9729] 日志:  在0/C000000处时间线1上重启WAL流操作
2018-06-05 00:08:05.327 PDT [9729] 日志:  复制由主用服务器终止
2018-06-05 00:08:05.327 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:05.329 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1
2018-06-05 00:08:10.328 PDT [9729] 日志:  在0/C000000处时间线1上重启WAL流操作
2018-06-05 00:08:10.332 PDT [9729] 日志:  复制由主用服务器终止
2018-06-05 00:08:10.332 PDT [9729] 详细信息:  WAL结束时,到了时间线1和地址0/C02A400.
2018-06-05 00:08:10.333 PDT [9725] 日志:  在当前恢复点0/C02A630之前, 新的时间点2脱离了当前茅的数据库系统时间点1

在现在的主库操作:
scp /data/pg/data/pg_wal/00000002.history 192.168.159.151:/data/pg/data/pg_wal/

(1)创建备库recovery.conf 文件( 在备库上操作192.168.159.149)

  cp /usr/pgsql-10/share/recovery.conf.sample /var/lib/pgsql/10/data/recovery.conf

配置以下参数  

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.128 port=5432 user=replica password=replica'   --标识主库信息

trigger_file = '/var/lib/pgsql/10/data/trigger.kenyon'     --标识触发器文件

(2) 关闭主库(在主库上操作192.168.159.148)

service postgresql-10 stop

(3)激活备库到主库状态 ( 在备库上操作192.168.159.149 )

   激活备库只要创建一个文件即可,根据备库 recovery.conf 配置文件的参数 trigger_file 值,

  创建这个 trigger 文件即可。 例如 "touch /var/lib/pgsql/10/data/trigger.kenyon"

touch /var/lib/pgsql/10/data/trigger.kenyon

过一会儿发现 recovery.conf 文件变成 recovery.done ,说明备库已经激活。

查看/var/lib/pgsql/10/data/log/目录下的最新日志,出现以下信息即激活
(我这里的日志是tail  -100f postgresql-Tue.log)
2018-06-05 19:32:36.403 PDT [3969] LOG:  fetching timeline history file for timeline 2 from primary server
2018-06-05 19:32:36.429 PDT [3969] LOG:  started streaming WAL from primary at 0/3000000 on timeline 1
2018-06-05 19:32:36.461 PDT [3969] LOG:  replication terminated by primary server
2018-06-05 19:32:36.461 PDT [3969] DETAIL:  End of WAL reached on timeline 1 at 0/301B078.
2018-06-05 19:32:36.478 PDT [3916] LOG:  new target timeline is 2
2018-06-05 19:32:36.479 PDT [3969] LOG:  restarted WAL streaming at 0/3000000 on timeline 2
2018-06-05 19:32:37.044 PDT [3916] LOG:  redo starts at 0/301B078

(4)修改原来主库的配置文件(192.168.159.148)
vi /var/lib/pgsql/10/data/postgresql.conf
max_connections = 150


(5)激活原来的主库,让其转变成从库  (在原来的主库上执行192.168.159.148) 

--创建 $PGDATA/recovery.conf 文件,配置以下参数
vi /data/pg/data/recovery.conf

recovery_target_timeline = 'latest'

standby_mode = 'on'  --标记PG为STANDBY SERVER

primary_conninfo = 'host=192.168.159.149 port=1921 user=repuser '   --标识主库信息

trigger_file = '/var/lib/pgsql/10/data/trigger.kenyon'     --标识触发器文件

--修改 pg_hba.conf (现在的主库上增加192.168.159.149),添加以下配置
vi /data/pg/data/pg_hba.conf

host    replication     replica            192.168.159.0/24         md5
host    all          replica           192.168.159.0/24         trust


注意这里修改完配置文件后需要重启数据库服务(192.168.159.149)
service postgresql-10 restart

启动原来的主库即现在的从库(192.168.159.148)
service postgresql-10 start

主库查询

su - postgres

psql

postgres=# select client_addr,sync_state from pg_stat_replication;

   client_addr   | sync_state 
-----------------+------------
 192.168.159.148 | async
(1 row)

相关报错:
(1)网络登录方式报错
psql: FATAL:  no pg_hba.conf entry for host "192.168.159.128", user "dbuser", database "exampledb", SSL off

出现这个报错,就要检查pg_hba.conf文件了,
添加设置host exampledb dbuser 192.168.159.0/24        trust  重启数据库即可解决

(2)发现登陆postgres时出现以下问题
-bash-4.1$ 
root用户执行
cp /etc/skel/.bash* /var/lib/pgsql/
再次登陆即可变成
[postgres@node1 ~]$

以上是“POSTGRESQL10.3  RPM包如何实现主从搭建”这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注创新互联行业资讯频道!


文章名称:POSTGRESQL10.3RPM包如何实现主从搭建
文章URL:http://azwzsj.com/article/pgceoe.html