PolarDB开源数据库进阶课11 激活容灾(Standby)节点-阿里云开发者社区

PolarDB开源数据库进阶课11 激活容灾(Standby)节点

2025-02-21 260

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： 本文介绍了如何激活PolarDB容灾（Standby）节点，实验环境依赖于Docker容器中用loop设备模拟共享存储。通过`pg_ctl promote`命令可以将Standby节点提升为主节点，使其能够接收读写请求。激活后，原Standby节点不能再成为PolarDB集群的Standby节点。建议删除对应的复制槽位以避免WAL文件堆积。相关操作和配置请参考系列文章及视频教程。

背景

穷鬼玩PolarDB RAC一写多读集群系列已经写了几篇:

本篇文章介绍一下如何激活容灾(Standby)节点? 实验环境依赖《在Docker容器中用loop设备模拟共享存储》 , 如果没有环境, 请自行参考以上文章搭建环境.

本文还依赖如下文档:

《如何搭建PolarDB容灾(Standby)节点》

DEMO

b站视频链接

Youtube视频链接

假设你的PolarDB Standby已按前面的文档在容器pb3中部署完成, Standby 节点正常运行中.

1、pb3, 查看一下Standby节点本地数据目录

$ cd ~/standby/  
  
$ ll  
total 344  
drwx------ 22 postgres postgres   4096 Dec 24 14:07 ./  
drwxr-x---  1 postgres postgres   4096 Dec 24 11:06 ../  
-rw-------  1 postgres postgres    227 Dec 24 09:52 backup_label.old  
-rw-------  1 postgres postgres 183650 Dec 24 09:52 backup_manifest  
drwx------  6 postgres postgres   4096 Dec 24 09:52 base/  
-rw-------  1 postgres postgres    163 Dec 24 14:07 current_logfiles  
drwx------  2 postgres postgres   4096 Dec 24 14:07 global/  
drwx------  2 postgres postgres   4096 Dec 24 14:07 pg_commit_ts/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_dynshmem/  
-rw-------  1 postgres postgres   4870 Dec 24 09:52 pg_hba.conf  
-rw-------  1 postgres postgres   1636 Dec 24 09:52 pg_ident.conf  
drwx------  2 postgres postgres   4096 Dec 24 14:07 pg_log/  
drwx------  4 postgres postgres   4096 Dec 24 14:22 pg_logical/  
drwx------  2 postgres postgres   4096 Dec 24 14:07 pg_logindex/  
drwx------  4 postgres postgres   4096 Dec 24 14:07 pg_multixact/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_notify/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_replslot/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_serial/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_snapshots/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_stat/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_stat_tmp/  
drwx------  2 postgres postgres   4096 Dec 24 09:58 pg_subtrans/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 pg_tblspc/  
-rw-------  1 postgres postgres      3 Dec 24 09:52 PG_VERSION  
drwx------  2 postgres postgres   4096 Dec 24 14:07 pg_xact/  
drwx------  2 postgres postgres   4096 Dec 24 14:12 polar_cache_trash/  
drwx------  2 postgres postgres   4096 Dec 24 14:07 polar_fullpage/  
drwx------  2 postgres postgres   4096 Dec 24 09:52 polar_rel_size_cache/  
-rw-------  1 postgres postgres    100 Dec 24 14:07 polar_settings.conf  
-rw-------  1 postgres postgres      9 Dec 24 14:07 polar_shmem_stat_file  
-rw-------  1 postgres postgres    505 Dec 24 09:53 postgresql.auto.conf  
-rw-------  1 postgres postgres  31063 Dec 24 09:53 postgresql.conf  
-rw-------  1 postgres postgres     81 Dec 24 14:07 postmaster.opts  
-rw-------  1 postgres postgres     84 Dec 24 14:07 postmaster.pid  
-rw-------  1 postgres postgres      0 Dec 24 09:52 standby.signal

共享盘nvme2n1中的数据目录

$ sudo pfs -C disk ls /nvme2n1/shared_data/  
   Dir  1     256               Tue Dec 24 09:52:52 2024  pg_multixact  
   Dir  1     256               Tue Dec 24 09:52:52 2024  pg_wal  
   Dir  1     0                 Tue Dec 24 09:52:54 2024  pg_commit_ts  
  File  1     0                 Tue Dec 24 09:52:54 2024  standby.signal  
   Dir  1     512               Tue Dec 24 09:52:57 2024  polar_fullpage  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_replslot  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_tblspc  
  File  1     227               Tue Dec 24 09:52:57 2024  polar_non_exclusive_backup_label  
  File  1     257               Tue Dec 24 09:52:57 2024  postgresql.auto.conf  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_twophase  
   Dir  1     128               Tue Dec 24 09:52:57 2024  pg_xact  
   Dir  1     128               Tue Dec 24 09:53:37 2024  pg_logindex  
   Dir  1     7808              Tue Dec 24 09:52:57 2024  global  
   Dir  1     512               Tue Dec 24 09:52:58 2024  base  
total 16384 (unit: 512Bytes)

2、pb3, 激活容灾(Standby)节点

PS: 激活之前, 可以先观察standby和主集群或实时流式归档(如有)的WAL差异, 有差异的话可以通过文件拷贝到standby节点, 通过restore_command配置进行恢复. 尽量减少standby与上游的数据差异.

$ pg_ctl promote -D ~/standby  
  
日志如下, 有点多.  
[PFSD_SDK INF Dec 24 14:27:57.278019][94]pfsd_umount_force 247: pbdname nvme2n1  
[PFSD_SDK INF Dec 24 14:27:57.279200][94]chnl_connection_release_shm 1164: client umount return : deleted /var/run/pfsd//nvme2n1/94.pid  
[PFSD_SDK INF Dec 24 14:27:57.279212][94]pfsd_umount_force 261: umount success for nvme2n1  
waiting for server to promote...[PFSD_SDK INF Dec 24 14:27:57.380783][94]pfsd_umount_force 247: pbdname nvme2n1  
[PFSD_SDK INF Dec 24 14:27:57.382082][94]chnl_connection_release_shm 1164: client umount return : deleted /var/run/pfsd//nvme2n1/94.pid  
[PFSD_SDK INF Dec 24 14:27:57.382091][94]pfsd_umount_force 261: umount success for nvme2n1  
.[PFSD_SDK INF Dec 24 14:27:57.583592][94]pfsd_umount_force 247: pbdname nvme2n1  
  
...  
[PFSD_SDK INF Dec 24 14:28:52.847152][94]chnl_connection_release_shm 1164: client umount return : deleted /var/run/pfsd//nvme2n1/94.pid  
[PFSD_SDK INF Dec 24 14:28:52.847161][94]pfsd_umount_force 261: umount success for nvme2n1  
 done  
server promoted

激活后是一个正常实例, 可以接收读写请求了

$ psql  
psql (PostgreSQL 15.10 (PolarDB 15.10.2.0 build d4f5477d debug) on aarch64-linux-gnu)  
Type "help" for help.  
  
postgres=# select pg_is_in_recovery();  
 pg_is_in_recovery   
-------------------  
 f  
(1 row)  
  
postgres=# create table t_new (id int);  
CREATE TABLE  
postgres=# insert into t_new values (1),(2),(3);  
INSERT 0 3  
postgres=# select * from t_new;  
 id   
----  
  1  
  2  
  3  
(3 rows)  
  
postgres=# \dt  
         List of relations  
 Schema | Name  | Type  |  Owner     
--------+-------+-------+----------  
 public | t     | table | postgres  
 public | t1    | table | postgres  
 public | t2    | table | postgres  
 public | t_new | table | postgres  
 public | tbl   | table | postgres  
(5 rows)

注意: PolarDB standby激活之后, 不能再成为原来PolarDB集群的Standby. 如果是PostgreSQL社区版本的话激活之后通过pg_rewind可以回退到过去, PolarDB standby如果部署在ZFS上, 可以通过zfs快照克隆来进行回退, 省去重建Standby的动作.

观察本地数据文件目录和共享盘nvme2n1中的数据目录, 对比激活前后只有一处不同. 本地数据文件目录的standby.signal文件不存在了, 而共享盘中的还在, 说明signal文件起作用的是本地数据目录. 共享盘中的standby.signal可以删掉.

$ sudo pfs -C disk rm /nvme2n1/shared_data/standby.signal

因为这种标记文件决定的是计算节点的角色, 所以只和计算节点相关, 和共享存储无关. 不会放在共享存储里, 想想看如果放在共享存储里, 那有多个计算节点时, 到底谁时RO呢?

激活之后, 如果上游节点还活着, 建议到PolarDB primary节点删除对应standby的slot, 以免导致wal文件堆积.

postgres=# select pg_drop_replication_slot('standby1');
postgres=# select * from pg_replication_slots ;
    slot_name     | plugin | slot_type | datoid | database | temporary | active | active_pid | xmin | catalog_xmin | restart_lsn | confirmed_flush_lsn | wal_status | safe_wal_size | two_phase 
------------------+--------+-----------+--------+----------+-----------+--------+------------+------+--------------+-------------+---------------------+------------+---------------+-----------
 replica1         |        | physical  |        |          | f         | t      |        208 |      |              | 1/C7AFA000  |                     | reserved   |               | f
 online_archwal_1 |        | physical  |        |          | f         | t      |        226 |      |              | 1/C7AFA100  |                     | reserved   |               | f
(2 rows)