PolarDB开源数据库进阶课12 集群版转换为单机版-阿里云开发者社区

PolarDB开源数据库进阶课12 集群版转换为单机版

2025-02-21 43

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

本文涉及的产品

云原生数据库 PolarDB PostgreSQL 版，标准版 2核4GB 50GB

云原生数据库 PolarDB MySQL 版，通用型 2核8GB 50GB

简介： 本文介绍了如何将“共享存储实例”转换为“本地存储实例”，实验环境依赖于Docker容器中的loop设备模拟共享存储。具体步骤包括准备本地目录、停库、拷贝数据、修改配置文件并启动实例。通过这些操作，可以实现从共享存储到本地存储的平滑转换。相关系列文章详细记录了PolarDB RAC一写多读集群的搭建与管理，提供了丰富的实战经验。

背景

穷鬼玩PolarDB RAC一写多读集群系列已经写了几篇:

本篇文章介绍一下如何把“共享存储实例”转换为“本地存储实例”? 实验环境依赖《在Docker容器中用loop设备模拟共享存储》 , 如果没有环境, 请自行参考以上文章搭建环境.

本文还依赖如下文章:

DEMO

b站视频链接

Youtube视频链接

在pb3容器进行演示. 假设在pb3 容器中的standby节点已经被成功激活. 接下来将介绍把这个“共享存储实例”转换为“本地存储实例”.

预览当前目录结构:

# 数据放在PFS内  
$ sudo pfs -C disk ls /nvme2n1/shared_data/  
   Dir  1     256               Tue Dec 24 09:52:52 2024  pg_multixact  
   Dir  1     768               Tue Dec 24 14:29:01 2024  pg_wal  
   Dir  1     0                 Tue Dec 24 09:52:54 2024  pg_commit_ts  
   Dir  1     512               Tue Dec 24 14:46:02 2024  polar_fullpage  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_replslot  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_tblspc  
  File  1     227               Tue Dec 24 09:52:57 2024  polar_non_exclusive_backup_label  
  File  1     257               Tue Dec 24 09:52:57 2024  postgresql.auto.conf  
   Dir  1     0                 Tue Dec 24 09:52:57 2024  pg_twophase  
   Dir  1     128               Tue Dec 24 09:52:57 2024  pg_xact  
   Dir  1     128               Tue Dec 24 14:45:55 2024  pg_logindex  
   Dir  1     7808              Tue Dec 24 09:52:57 2024  global  
   Dir  1     512               Tue Dec 24 09:52:58 2024  base  
total 16384 (unit: 512Bytes)  
  
# 本地实例放在本地目录中  
$ ls ~/standby  
backup_label.old  current_logfiles  pg_dynshmem    pg_log       pg_multixact  pg_serial     pg_stat_tmp  PG_VERSION         polar_fullpage        polar_shmem_stat_file  postmaster.opts  
backup_manifest   global            pg_hba.conf    pg_logical   pg_notify     pg_snapshots  pg_subtrans  pg_xact            polar_rel_size_cache  postgresql.auto.conf   postmaster.pid  
base              pg_commit_ts      pg_ident.conf  pg_logindex  pg_replslot   pg_stat       pg_tblspc    polar_cache_trash  polar_settings.conf   postgresql.conf

设计目标目录结构

# 数据放在本地 /data/standby/shared_data 目录中  
  
# 本地实例还是放在本地 ~/standby 目录中

1、准备存放PFS 共享盘数据库目录的本地目录

mkdir -p /data/standby/shared_data

2、停库

pg_ctl stop -m fast -D ~/standby

3、把PFS的内容拷贝到本地目录, 并修改owner和权限

pfs cp -r /nvme2n1/shared_data /data/standby/  
  
chmod 700 /data/standby/shared_data  
chown -R postgres:postgres /data/standby/shared_data

预览新的本地共享数据目录结构

$ ll /data/standby/shared_data  
total 8  
drwx------ 15 postgres postgres  480 Dec 24 15:55 ./  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:48 ../  
drwxr-xr-x  6 postgres postgres  192 Dec 24 15:55 base/  
drwxr-xr-x 63 postgres postgres 2016 Dec 24 15:55 global/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_commit_ts/  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:55 pg_logindex/  
drwxr-xr-x  4 postgres postgres  128 Dec 24 15:55 pg_multixact/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_replslot/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_tblspc/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_twophase/  
drwxr-xr-x  8 postgres postgres  256 Dec 24 15:55 pg_wal/  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:55 pg_xact/  
drwxr-xr-x  6 postgres postgres  192 Dec 24 15:55 polar_fullpage/  
-rw-r--r--  1 postgres postgres  227 Dec 24 15:55 polar_non_exclusive_backup_label  
-rw-r--r--  1 postgres postgres  257 Dec 24 15:55 postgresql.auto.conf

共享数据目录中这两个文件没什么用可以删掉

rm /data/standby/shared_data/polar_non_exclusive_backup_label  
rm -f /data/standby/shared_data/postgresql.auto.conf

4、修改 ~/standby 内配置文件

postgresql.conf

echo "  
huge_pages=off  
port=5432  
polar_hostid=3  
polar_enable_shared_storage_mode=on  
polar_disk_name='home'  # 修改
# polar_storage_cluster_name='disk'   # 修改  
polar_datadir='file-dio:///data/standby/shared_data/'    # 修改  
polar_vfs.localfs_mode=true    # 修改   
shared_preload_libraries='\$libdir/polar_vfs,\$libdir/polar_worker'  
logging_collector=on  
log_line_prefix='%p\t%r\t%u\t%m\t'  
log_directory='pg_log'  
listen_addresses='0.0.0.0'  
max_connections=200  
# 下面几个参数解决replica不能promote的问题, 因为RO依赖logindex.  
polar_logindex_mem_size=64MB  
polar_xlog_queue_buffers=64MB  
polar_xlog_page_buffers=64MB  
# 使用pfs管理块设备时可以关掉 full page write 和 polar_has_partial_write  . 或者使用zfs这类cow的文件系统时也可以关掉以下2个配置.  
full_page_writes = off  
polar_has_partial_write = on  # 修改
polar_resource_manager.enable_resource_manager=off
" >> ~/standby/postgresql.conf

5、启动实例

pg_ctl start -D ~/standby

将“共享存储实例”转换为“本地存储实例”完成

$ psql  
psql (PostgreSQL 15.10 (PolarDB 15.10.2.0 build d4f5477d debug) on aarch64-linux-gnu)  
Type "help" for help.  
  
postgres=# \dt  
         List of relations  
 Schema | Name  | Type  |  Owner     
--------+-------+-------+----------  
 public | t     | table | postgres  
 public | t1    | table | postgres  
 public | t2    | table | postgres  
 public | t_new | table | postgres  
 public | tbl   | table | postgres  
(5 rows)  
  
postgres=# show polar_datadir;  
             polar_datadir               
---------------------------------------  
 file-dio:///data/standby/shared_data/  
(1 row)  
  
postgres=# create table t3(id int);  
CREATE TABLE  
postgres=# insert into t3 select generate_series(1,10);  
INSERT 0 10