【ECS生长万物之开源】搭建PostgreSQL主从架构

本文涉及的产品
轻量应用服务器 2vCPU 4GiB,适用于搭建Web应用/小程序
轻量应用服务器 2vCPU 4GiB,适用于网站搭建
轻量应用服务器 2vCPU 4GiB,适用于搭建容器环境
简介: PostgreSQL被业界誉为最先进的开源数据库,支持NoSQL数据类型(JSON/XML/hstore)。本文档介绍在CentOS 7操作系统的ECS实例上搭建PostgreSQL主从架构的操作步骤。

PostgreSQL被业界誉为最先进的开源数据库,支持NoSQL数据类型(JSON/XML/hstore)。本文档介绍在CentOS 7操作系统的ECS实例上搭建PostgreSQL主从架构的操作步骤。

前提条件

  • 已注册阿里云账号。如还未注册,请先完成账号注册
  • 已在安全组入方向中添加规则放行5432端口。具体步骤,请参见添加安全组规则

背景信息

本教程适用于熟悉阿里云服务器ECS、Linux系统、PostgreSQL的阿里云用户。

本教程在示例步骤中使用了以下实例配置和软件版本。操作时,请您以实际软件版本为准。

  • 实例规格:ecs.g6.large
  • 操作系统:CentOS 7.2
  • PostgreSQL:11

在阿里云服务器ECS上安装PostgreSQL有以下两种方式:

  • 镜像部署(在云市场基础环境中,搜索筛选PostgreSQL镜像)
  • 手动部署(源码编译安装/yum安装)

本教程基于yum方式手动安装并搭建PostgreSQL主从复制架构。

步骤一:选购ECS实例

搭建PostgreSQL主从复制架构,需要选购2台专有网络类型的ECS实例,一台ECS实例作为主节点,另一台ECS实例作为从节点。 具体操作,请参见使用向导创建实例

说明: 建议您不为ECS实例分配公网IP,按需购买弹性公网IP绑定至ECS实例,后续您可以根据实际情况考虑升级配置或调优架构。详情请参见申请弹性公网IP

步骤二:配置PostgreSQL主节点

1.远程连接PostgreSQL主节点。具体操作,请参见连接方式概述

2.依次运行以下命令,安装PostgreSQL。

yum update -y
wget --no-check-certificate https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm
rpm -ivh pgdg-redhat-repo-latest.noarch.rpm
yum install postgresql11-server postgresql11-contrib -y
/usr/pgsql-11/bin/postgresql-11-setup initdb


说明: 本教程以PostgreSQL 11版本为例。实际安装时,请您使用最新版本。

3.依次运行以下命令,启动服务并设置服务开机自启动。

systemctl start postgresql-11.service    #启动服务
systemctl enable postgresql-11.service   #设置服务开机自启动

4.在主节点上创建数据库账号replica(用于主从复制),并设置密码及登录权限和备份权限。

a.运行以下命令,登录postgres用户。

su - postgres

b.当显示-bash-4.2$时表示成功登录,然后输入以下命令进入PostgreSQL交互终端。

psql

c.当显示postgres=#时表示成功进入交互终端,然后为用户postgres设置密码,增强安全性。

ALTER USER postgres WITH PASSWORD 'YourPassWord';

d.输入以下SQL语句创建数据库账号replica,并设置密码及登录权限和备份权限。本示例中将密码设置为replica

CREATE ROLE replica login replication encrypted password 'replica';

e.查询账号是否创建成功。

SELECT usename from pg_user;

返回结果如下,表示已创建成功。

usename  
----------
postgres
replica
(2 rows)

f.查询权限是否创建成功。

SELECT rolname from pg_roles;

返回结果如下,表示已创建成功。

rolname  
----------
postgres
replica
(2 rows)

g.输入以下命令,并按Enter退出SQL终端。

\q

h.输入以下命令,并按Enter退出PostgreSQL。

exit

5.运行以下命令,打开pg_hba.conf文件,设置replica用户白名单。

vim /var/lib/pgsql/11/data/pg_hba.conf
  1. IPv4 local connections段添加下面两行内容。
host    all             all             <从节点的VPC IPv4网段>          md5     #允许VPC网段中md5密码认证连接
host    replication     replica         <从节点的VPC IPv4网段>          md5     #允许用户从replication数据库进行数据同步
  1. 添加完成后,按Esc键,输入:wq并按下enter键,保存并退出。

6.运行以下命令,打开postgresql.conf文件。

vim /var/lib/pgsql/11/data/postgresql.conf
  1. 分别找到以下参数,并将参数修改为以下内容:
listen_addresses = '*'   #监听的IP地址
wal_level = hot_standby  #启用热备模式
synchronous_commit = on  #开启同步复制
max_wal_senders = 32     #同步最大的进程数量
wal_sender_timeout = 60s #流复制主机发送数据的超时时间
max_connections = 100    #最大连接数,从库的max_connections必须要大于主库的
  1. 修改完成后,按Esc键,输入:wq并按下enter键,保存并退出。

7.运行以下命令,重启服务。

systemctl restart postgresql-11.service

步骤三:配置PostgreSQL从节点

1.远程连接PostgreSQL从节点。具体操作,请参见连接方式概述

2.依次运行以下命令,安装PostgreSQL。

yum update -y
wget --no-check-certificate https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm
rpm -ivh pgdg-redhat-repo-latest.noarch.rpm
yum install postgresql11-server postgresql11-contrib -y

3.运行以下命令,使用pg_basebackup基础备份工具指定备份目录。

pg_basebackup -D /var/lib/pgsql/11/data -h <主节点IP> -p 5432 -U replica -X stream -P
  1. 本示例中Passwordreplica
Password: 
30075/30075 kB (100%), 1/1 tablespace

4.依次运行以下命令,新建并修改recovery.conf配置文件。

cp /usr/pgsql-11/share/recovery.conf.sample /var/lib/pgsql/11/data/recovery.conf
vim /var/lib/pgsql/11/data/recovery.conf
  1. 分别找到以下参数,并将参数修改为以下内容:
standby_mode = on     #声明此节点为从库
primary_conninfo = 'host=<主节点IP> port=5432 user=replica password=replica' #对应主库的连接信息
recovery_target_timeline = 'latest' #流复制同步到最新的数据
  1. 修改完成后,按Esc键,输入:wq并按下enter键,保存并退出。

5.运行以下命令,打开postgresql.conf文件。

vim /var/lib/pgsql/11/data/postgresql.conf
  1. 分别找到以下参数,并将参数修改为以下内容:
max_connections = 1000             # 最大连接数,从节点需设置比主节点大
hot_standby = on                   # 开启热备
max_standby_streaming_delay = 30s  # 数据流备份的最大延迟时间
wal_receiver_status_interval = 1s  # 从节点向主节点报告自身状态的最长间隔时间
hot_standby_feedback = on          # 如果有错误的数据复制向主进行反馈
  1. 修改完成后,按Esc键,输入:wq并按下enter键,保存并退出。

6.运行以下命令,修改数据目录的属组和属主。

chown -R postgres.postgres /var/lib/pgsql/11/data

7.依次运行以下命令,启动服务并设置服务开机自启动。

systemctl start postgresql-11.service    #启动服务
systemctl enable postgresql-11.service   #设置服务开机自启动

步骤四:检测验证

检测验证需要主从节点之间存在数据交互,例如,从节点备份目录时,进行检测能够得到预期的结果。

pg_basebackup -D /var/lib/pgsql/96/data -h <主节点IP> -p 5432 -U replica -X stream -P

1.在主节点中运行以下命令,查看sender进程。

ps aux |grep sender

返回结果如下,表示可成功查看到sender进程。

postgres  2916  0.0  0.3 340388  3220 ?        Ss   15:38   0:00 postgres: wal sender     process replica 192.168.**.**(49640) streaming 0/F01C1A8

2.在从节点中运行以下命令,查看receiver进程。

ps aux |grep receiver

返回结果如下,表示可成功查看到receiver进程。

postgres 23284  0.0  0.3 387100  3444 ?        Ss   16:04   0:00 postgres: wal receiver process   streaming 0/F01C1A8

3.在主节点中进入PostgreSQL交互终端,输入以下SQL语句,在主库中查看从库状态。

select * from pg_stat_replication;

返回结果如下,表示可成功查看到从库状态。

pid | usesysid | usename | application_name | client_addr | client_hostname | client_port | backend_start | backend_xmin | state | sent_location | write_locati
on | flush_location | replay_location | sync_priority | sync_state 
------+----------+---------+------------------+---------------+-----------------+------------- +-------------------------------+--------------+-----------+---------------+-------------
---+----------------+-----------------+---------------+------------
2916 | 16393 | replica | walreceiver | 192.168.**.** | | 49640 | 2017-05-02 15:38:06.188988+08 | 1836 | streaming | 0/F01C0C8 | 0/F01C0C8 
| 0/F01C0C8 | 0/F01C0C8 | 0 | async
(1 rows)
相关实践学习
通义万相文本绘图与人像美化
本解决方案展示了如何利用自研的通义万相AIGC技术在Web服务中实现先进的图像生成。
7天玩转云服务器
云服务器ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,可降低 IT 成本,提升运维效率。本课程手把手带你了解ECS、掌握基本操作、动手实操快照管理、镜像管理等。了解产品详情:&nbsp;https://www.aliyun.com/product/ecs
相关文章
|
5月前
|
人工智能 API 开发者
FastAPI开发者福音!FastAPI-MCP:将FastAPI秒变MCP服务器的开源神器,无需配置自动转换!
FastAPI-MCP是一款能将FastAPI应用端点自动转换为符合模型上下文协议(MCP)的开源工具,支持零配置自动发现接口并保留完整文档和模式定义。
3223 112
FastAPI开发者福音!FastAPI-MCP:将FastAPI秒变MCP服务器的开源神器,无需配置自动转换!
|
2月前
|
数据采集 人工智能 安全
开源赋能双碳:MyEMS 能源管理系统的架构与实践价值
在全球碳中和趋势与“双碳”目标推动下,能源管理趋向精细化与智能化。MyEMS是一款基于Python开发的开源能源管理系统,具备灵活适配、功能全面的优势,覆盖工厂、建筑、数据中心等多元场景。系统支持能源数据采集、分析、可视化及设备管理、故障诊断、AI优化控制等功能,提供“监测-分析-优化”闭环解决方案。遵循“国家+省级+接入端”三级架构,MyEMS在重点用能单位能耗监测中发挥关键作用,助力实现能源效率提升与政策合规。开源模式降低了技术门槛,推动“双碳”目标落地。
125 0
|
5月前
|
机器学习/深度学习 人工智能 文件存储
Llama Nemotron:英伟达开源基于Llama架构优化的推理模型,253B参数持平DeepSeek R1!
NVIDIA推出的Llama Nemotron系列推理模型,基于Llama架构优化,包含Nano/Super/Ultra三款,在数学推理、编程和工具调用等任务中展现卓越性能。
168 5
Llama Nemotron:英伟达开源基于Llama架构优化的推理模型,253B参数持平DeepSeek R1!
|
10天前
|
存储 人工智能 关系型数据库
阿里云AnalyticDB for PostgreSQL 入选VLDB 2025:统一架构破局HTAP,Beam+Laser引擎赋能Data+AI融合新范式
在数据驱动与人工智能深度融合的时代,企业对数据仓库的需求早已超越“查得快”这一基础能力。面对传统数仓挑战,阿里云瑶池数据库AnalyticDB for PostgreSQL(简称ADB-PG)创新性地构建了统一架构下的Shared-Nothing与Shared-Storage双模融合体系,并自主研发Beam混合存储引擎与Laser向量化执行引擎,全面解决HTAP场景下性能、弹性、成本与实时性的矛盾。 近日,相关研究成果发表于在英国伦敦召开的数据库领域顶级会议 VLDB 2025,标志着中国自研云数仓技术再次登上国际舞台。
91 0
|
4月前
|
存储 Cloud Native 关系型数据库
PolarDB开源:云原生数据库的架构革命
本文围绕开源核心价值、社区运营实践和技术演进路线展开。首先解读存算分离架构的三大突破,包括基于RDMA的分布式存储、计算节点扩展及存储池扩容机制,并强调与MySQL的高兼容性。其次分享阿里巴巴开源治理模式,涵盖技术决策、版本发布和贡献者成长体系,同时展示企业应用案例。最后展望技术路线图,如3.0版本的多写多读架构、智能调优引擎等特性,以及开发者生态建设举措,推荐使用PolarDB-Operator实现高效部署。
267 3
|
5月前
|
机器学习/深度学习 人工智能 算法
超越 DeepSeek-R1!Seed-Thinking-v1.5:字节跳动开源MoE架构推理模型,200B总参数仅激活20B,推理效率提升5倍
字节跳动推出的200B参数混合专家模型,在AIME/Codeforces/GPQA等基准测试中实现多项突破,采用强化学习框架与流式推理系统,支持7大领域复杂推理任务。
311 13
超越 DeepSeek-R1!Seed-Thinking-v1.5:字节跳动开源MoE架构推理模型,200B总参数仅激活20B,推理效率提升5倍
|
5月前
|
存储 人工智能 项目管理
2025年GitHub平台上的十大开源MCP服务器汇总分析
本文深入解析了GitHub上十个代表性MCP(Model Context Protocol)服务器项目,探讨其在连接AI与现实世界中的关键作用。这些服务器实现了AI模型与应用程序、数据库、云存储、项目管理等工具的无缝交互,扩展了AI的应用边界。文中涵盖Airbnb、Supabase、AWS-S3、Kubernetes等领域的MCP实现方案,展示了AI在旅行规划、数据处理、云存储、容器编排等场景中的深度应用。未来,MCP技术将向标准化、安全性及行业定制化方向发展,为AI系统集成提供更强大的支持。
1256 2
2025年GitHub平台上的十大开源MCP服务器汇总分析
|
5月前
|
机器学习/深度学习 编解码 人工智能
Kimi开源MoE架构多模态推理模型,小激活参数,大能量!
最近Moonshot AI推出了 Kimi-VL,这是一个高效的开源混合专家(MoE)视觉-语言模型(VLM),它提供了先进的多模态推理、长上下文理解以及强大的代理能力——所有这些功能都只需激活其语言解码器中的2.8B参数(Kimi-VL-A3B)。
317 1
|
6月前
|
人工智能 物联网
VideoPainter:开源视频修复神器!双分支架构一键修复,对象身份永久在线
VideoPainter 是由香港中文大学、腾讯ARC Lab等机构联合推出的视频修复和编辑框架,基于双分支架构和预训练扩散模型,支持任意长度视频的修复与编辑,具备背景保留、前景生成、文本指导编辑等功能,为视频处理领域带来新的突破。
276 12

热门文章

最新文章

相关产品

  • 云服务器 ECS
  • 推荐镜像

    更多