PolarDB开源数据库进阶课13 单机版转换为集群版-阿里云开发者社区

PolarDB开源数据库进阶课13 单机版转换为集群版

2025-02-21 352

版权

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

简介： 本文介绍如何将“本地存储实例”转换为“共享存储实例”，依赖于先前搭建的实验环境。主要步骤包括：准备PFS二进制文件、格式化共享盘为pfs文件系统、启动pfsd服务、停库并拷贝数据到pfs内、修改配置文件，最后启动实例。通过这些操作，成功实现了从本地存储到共享存储的转换，并验证了新实例的功能。相关系列文章和视频链接提供了更多背景信息和技术细节。

背景

穷鬼玩PolarDB RAC一写多读集群系列已经写了几篇:

本篇文章介绍一下如何把“本地存储实例”转换为“共享存储实例”? 实验环境依赖《在Docker容器中用loop设备模拟共享存储》 , 如果没有环境, 请自行参考以上文章搭建环境.

本文还依赖如下文章:

DEMO

b站视频链接

Youtube视频链接

在pb3容器进行演示. 假设你已完成《将“共享存储实例”转换为“本地存储实例”》的操作. 现在pb3上的实例为本地盘实例, 共享数据放在本地盘中.

预览当前目录结构:

# 共享数据放在本地盘中    
postgres@a8d5e5dc6b96:~/standby$ cd /data/standby/shared_data/  
postgres@a8d5e5dc6b96:/data/standby/shared_data$ ll  
total 0  
drwx------ 13 postgres postgres  416 Dec 24 15:58 ./  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:48 ../  
drwxr-xr-x  6 postgres postgres  192 Dec 24 15:55 base/  
drwxr-xr-x 63 postgres postgres 2016 Dec 24 15:55 global/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_commit_ts/  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:55 pg_logindex/  
drwxr-xr-x  4 postgres postgres  128 Dec 24 15:55 pg_multixact/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_replslot/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_tblspc/  
drwxr-xr-x  2 postgres postgres   64 Dec 24 15:55 pg_twophase/  
drwxr-xr-x  8 postgres postgres  256 Dec 24 15:55 pg_wal/  
drwxr-xr-x  3 postgres postgres   96 Dec 24 15:55 pg_xact/  
drwxr-xr-x  6 postgres postgres  192 Dec 24 15:55 polar_fullpage/  
    
# 本地实例放在本地目录中    
$ ls ~/standby    
backup_label.old  current_logfiles  pg_dynshmem    pg_log       pg_multixact  pg_serial     pg_stat_tmp  PG_VERSION         polar_fullpage        polar_shmem_stat_file  postmaster.opts    
backup_manifest   global            pg_hba.conf    pg_logical   pg_notify     pg_snapshots  pg_subtrans  pg_xact            polar_rel_size_cache  postgresql.auto.conf   postmaster.pid    
base              pg_commit_ts      pg_ident.conf  pg_logindex  pg_replslot   pg_stat       pg_tblspc    polar_cache_trash  polar_settings.conf   postgresql.conf

设计目标目录结构

# 共享数据放在pfs /nvme2n1/shared_data 目录中    
    
# 本地实例还是放在本地 ~/standby 目录中

1、准备工作

在pb3容器内准备PFS二进制. 已完成
在宿主机挂载目录中dd共享盘 /data/VirtualDisk_standby.img . 已完成
使用loop将该文件模拟为块设备 . 已完成
软链到 /dev/nvme2n1 . 已完成

以上步骤不知道如何操作的话可以参考《如何搭建PolarDB容灾(Standby)节点》

2、把/dev/nvme2n1格式化为pfs文件系统

sudo pfs -C disk mkfs -f nvme2n1

3、启动pfsd

sudo /usr/local/polarstore/pfsd/bin/start_pfsd.sh -p nvme2n1 -w 1

现在这个共享盘里什么都没了:

$ pfs ls /nvme2n1/  
  File  1     4194304           Tue Dec 24 16:27:16 2024  .pfs-paxos  
  File  1     1073741824        Tue Dec 24 16:27:18 2024  .pfs-journal  
total 2105344 (unit: 512Bytes)

4、停库

pg_ctl stop -m fast -D ~/standby

5、把本地共享数据目录的内容拷贝到pfs内

pfs cp -r /data/standby/shared_data /nvme2n1/

拷贝成功后, 查看一下pfs内的文件位置

postgres@a8d5e5dc6b96:/data$ pfs ls /nvme2n1/  
  File  1     4194304           Tue Dec 24 16:27:16 2024  .pfs-paxos  
  File  1     1073741824        Tue Dec 24 16:27:18 2024  .pfs-journal  
   Dir  1     1408              Tue Dec 24 16:29:41 2024  shared_data  
total 2105344 (unit: 512Bytes)  
postgres@a8d5e5dc6b96:/data$ pfs ls /nvme2n1/shared_data/  
   Dir  1     256               Tue Dec 24 16:29:25 2024  pg_multixact  
   Dir  1     768               Tue Dec 24 16:29:35 2024  pg_wal  
   Dir  1     0                 Tue Dec 24 16:29:38 2024  pg_commit_ts  
   Dir  1     512               Tue Dec 24 16:29:41 2024  polar_fullpage  
   Dir  1     0                 Tue Dec 24 16:29:41 2024  pg_replslot  
   Dir  1     0                 Tue Dec 24 16:29:41 2024  pg_tblspc  
   Dir  1     0                 Tue Dec 24 16:29:41 2024  pg_twophase  
   Dir  1     128               Tue Dec 24 16:29:41 2024  pg_xact  
   Dir  1     128               Tue Dec 24 16:29:41 2024  pg_logindex  
   Dir  1     7808              Tue Dec 24 16:29:41 2024  global  
   Dir  1     512               Tue Dec 24 16:29:42 2024  base  
total 0 (unit: 512Bytes)

6、修改 ~/standby 内配置文件

postgresql.conf

echo "    
huge_pages=off    
port=5432    
polar_hostid=3    
polar_enable_shared_storage_mode=on    
polar_disk_name='nvme2n1'  # 改了  
polar_storage_cluster_name='disk'  # 改了   
polar_datadir='/nvme2n1/shared_data/'  # 改了   
polar_vfs.localfs_mode=off  # 改了   
shared_preload_libraries='\$libdir/polar_vfs,\$libdir/polar_worker'    
logging_collector=on    
log_line_prefix='%p\t%r\t%u\t%m\t'    
log_directory='pg_log'    
listen_addresses='0.0.0.0'    
max_connections=200    
# 下面几个参数解决replica不能promote的问题, 因为RO依赖logindex.    
polar_logindex_mem_size=64MB    
polar_xlog_queue_buffers=64MB    
polar_xlog_page_buffers=64MB    
# 使用pfs时可以关掉 full page write 和 polar_has_partial_write     
full_page_writes = off    
polar_has_partial_write = off    # 改了
polar_resource_manager.enable_resource_manager=off
" >> ~/standby/postgresql.conf

7、启动实例

pg_ctl start -D ~/standby

将“本地存储实例”转换为“共享存储实例”完成

$ psql    
psql (PostgreSQL 15.10 (PolarDB 15.10.2.0 build d4f5477d debug) on aarch64-linux-gnu)    
Type "help" for help.    
  
postgres=# show polar_datadir;  
     polar_datadir       
-----------------------  
 /nvme2n1/shared_data/  
(1 row)  
  
postgres=# \dt  
         List of relations  
 Schema | Name  | Type  |  Owner     
--------+-------+-------+----------  
 public | t     | table | postgres  
 public | t1    | table | postgres  
 public | t2    | table | postgres  
 public | t3    | table | postgres  
 public | t_new | table | postgres  
 public | tbl   | table | postgres  
(6 rows)  
  
postgres=# create table test(id int);  
CREATE TABLE  
postgres=# insert into test values (1),(2);  
INSERT 0 2  
postgres=# select * from test;  
 id   
----  
  1  
  2  
(2 rows)