《PolarDB for PostgreSQL源码与应用实战》——PolarDB for PostgreSQL 基础入门(5)

本文涉及的产品
云原生数据库 PolarDB MySQL 版,Serverless 5000PCU 100GB
简介: 《PolarDB for PostgreSQL源码与应用实战》——PolarDB for PostgreSQL 基础入门(5)

《PolarDB for PostgreSQL源码与应用实战》——PolarDB for PostgreSQL 基础入门(4) https://developer.aliyun.com/article/1232837?groupCode=polardbforpg


集群配置


接下来介绍集群相关的一些配置。


1、公共配置


image.png


2DN配置


image.png


3、分布式扩展、及其他CNGTM配置,多DN配置


集群配置里包含几个部分,第一个部分是公共配置,这里比较重要的是安装路径是怎样的,另外Standalone控制单机版还是集群版,包括备份目录的设置,还有角色的设置。


还有一些DN相关,包括DN的公共部分,DN主备,可以看到跟主相关的都是Master,备相关的都是slave参数,包括IP地址、端口、同步状态,还有相关路径,包括数据路径、日志路径、开发日志等。第三个节点名字叫learner,但是这个learner就是第二个备,它有可能配置成follower,也可能配成learner。


另外就是我们为了分布式,扩展了CN和GTM相关的一些配置,另外多个CN的配置,当然如果有集群,我们一套机器里面可能有多个CN,也可能有更多的DN,这种情况下该如何配置。


简单来看一下配置文件。

image.png


这个配置文件是生成的配置文件在这个目录下了。先看一下默认单机的模板,可以看到它的公共的部分,跟datanode相

关的几个节点的路径,刚才那几个进程显示的路径在这个位置。之后它的Master相关的一些IP地址的配置,slave相关的

一些地址的配置,learned的一些配置。还有比方说我们配置好以后,每个DN节点,其实类似于一个PG节点的角色,PG

内部也要配置很多参数,所以我们可以简单追加一些对于PG的设置,比方说内存使用多大,或者连接数,这些配置都可

以在这里进行配置。包括hba还有配置文件,我们可以使用自己的配置文件来进行配置,在这里面进行一个设置。这个就

是单机版的情况。


image.png


下面看一下集群版,虽然现在还不支持集群版,但是它的配置基本上如图所示,可以看到有很多东西比较类似,属于公共的部分。


image.png


但是这里面会用到GTM相关的一些东西,还有coord这些是我们没有开源的部分。


image.png


里配置的是三个datanode,可以看到写法是这样的,用空格把它们隔开,三个datanote的名字、部署的机器、IP地

址、分别的端口都在上面。


这套三个DN都是的Master配置,之后我们还需要配置对应的这三个Masters的slave的配置,就是它的备机。可以看到备

机也是三个,前两个配了,我不想让第三个有备机,所以我就设置成None,这样的话可以看到它有多个DN的情况下的一

些配置,其他跟单机配置是类似的。


以上就是集群相关参数配置的讲解。


运维管理


1、启动所有节点

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf start all

2、停止所有节点

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf stop all

3、部署集群及集群管理

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf deploy all

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf deploy cm

4、集群初始化

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf init all

5、集群状态检查

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf monitor all

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf monitor datanode datanode_1

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf healthcheck all

6、节点 failover

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf failover datanode datanode_1

7、查看节点配置

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf log var all

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf log var datanodeNames

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf show configuration all

8、集群清理

pgxc_ctl -c $HOME/polardb/polardb_paxos.conf clean all


运维管理包括系统启动,用stop all或者start all来进行启动和停止。


另外就是部署,刚才已经简单提到了,包括init初始化集群,包括查看它的相关状态,查看状态可以通过指定某一个DN来

查看。目前只有一个DN,现在inti all就可以了,一个DN的三副本都可以查看到。以后有多个DN或者有CN的场景,我们可以在这个地方指定,只查看某一个时间点,前面这些start命令也都是这种情况,可以指定只启动或停止一个DN节点,包括failover的命令,也都是可以单独指定某个节点。


还有查看系统的参数配置,PG的参数配置等操作,下面简单演示一下。


image.png


这里面先看一下它的Monitor,所有节点的状态会打印出来,这里面datanode1已经打印出来。


image.png



还可以看到它的一些集群的配置参数,包括CN和GTM其实都是空着的。这里包括它的一些log参数,还有一些其它的配置

信息。


这就是所有跟配置和运维相关的命令。


获取帮助


最后介绍一下,如果大家在使用PolarDB的时候出现了某些问题,如何来获取帮助。


集群配置文件说明 基本参数说明


image.png


如上所示,主要有三种途径。

第一种,在Readme文档里面有各个架构文档,还有其他文档的导航,大家可以去这些文档查看帮助。

第二种,可以在我们的网站上提一些Issues,另外也可以查看一些别人的发起的问题,并且这里面有回复,具有一定的借鉴意义。

第三种,扫码钉钉群,目前我们钉钉群里已经有将近五千个PG爱好者,也包含阿里内部很多技术专家,所以如果大家这

个在里面提问,很快就会得到回复,这也是很好的学习途径。

现在我们看一下网站画面。


image.png


其实在Code的主页里显示的就是Readme的信息了,这里面可以看到Reamme的基本介绍,包括导航安装,可以导航到

架构里面去。


如果没有上文刚才提到的部署相关的东西,在这里边也可以看到,在Docker情况下我们怎么部署;怎么去部署几个系统环境的三个准备;怎么调用一键式的命令;怎么去查看我们的这个系统部署是否是成功了;最后在这种源码部署的场景下,怎么去修改配置,怎么产生配置,怎么去启动,这些运维的命令也都在里边。


后面有架构相关的一些文档,包括Roadmap,包括其它相关技术点的介绍。除此之外,刚才演示的Issues这边可以看到

大量的issue,这里很多大家原先出现的问题已经得到了解决,从这里也可以获取一些帮助。








相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
相关文章
|
1月前
|
关系型数据库 Serverless 分布式数据库
【公测】PolarDB PostgreSQL版Serverless功能免费使用​!
【公测】PolarDB PostgreSQL版Serverless功能免费使用​,公测于2024年3月28日开始,持续三个月,公测期间可以免费使用!
|
2月前
|
SQL 运维 关系型数据库
课程导航 | 学姐领航,共学PolarDB-X:从入门到精通实操课
本课程旨在教授核心技术和实际操作,学习安装部署、架构原理、SQL开发及最佳实践。本文将提供讲师介绍、学习群和扩展资料,适合各层次学习者,助你成为数据大师,入群方式和更多资料可在文章中获取。
课程导航 | 学姐领航,共学PolarDB-X:从入门到精通实操课
|
18天前
|
存储 SQL 人工智能
01-PostgreSQL 存储过程的基本介绍以及入门(基本结构、声明和赋值、控制结构)(下)
01-PostgreSQL 存储过程的基本介绍以及入门(基本结构、声明和赋值、控制结构)
|
1月前
|
Docker 容器 关系型数据库
【PolarDB-X从入门到精通】 第四讲:PolarDB分布式版安装部署(源码编译部署)
本期课程将于4月11日19:00开始直播,内容包括源码编译基础知识和实践操作,课程目标是使学员掌握源码编译部署技能,为未来发展奠定基础,期待大家在课程中取得丰富的学习成果!
【PolarDB-X从入门到精通】 第四讲:PolarDB分布式版安装部署(源码编译部署)
|
2月前
|
关系型数据库 Serverless 分布式数据库
PolarDB PostgreSQL版Serverless功能上线公测啦,公测期间免费使用!
Serverless数据库能够使得数据库集群资源随客户业务负载动态弹性扩缩,将客户从复杂的业务资源评估和运维工作中解放出来。PolarDB PostgreSQL版 Serverless提供了CPU、内存、存储、网络资源的实时弹性能力,构建计算与存储分离架构下的 PolarDB PostgreSQL版产品新形态。
|
18小时前
|
关系型数据库 MySQL 分布式数据库
如何将数据从MySQL迁移到PolarDB?
【5月更文挑战第13天】如何将数据从MySQL迁移到PolarDB?
8 0
|
5天前
|
关系型数据库 Linux 分布式数据库
源码编译实现PolarDB-X部署安装的体验报告
本文档记录了编译安装PolarDB-X的步骤,包括设置CentOS开发环境、从GitHub获取源码、编译(耗时较长)、解决依赖和权限问题、安装部署及测试验证。作者建议优化文档细节、减少编译时间、改进错误提示,并提议提供一键安装依赖脚本、新手视频教程及加强社区支持。整个过程虽有挑战,但具有成就感。
16 0
|
14天前
|
DataWorks 关系型数据库 MySQL
DataWorks产品使用合集之在DataWorks中,如何通过PolarDB for MySQL来查看binlog日志
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
28 1
|
15天前
|
关系型数据库 MySQL 分布式数据库
PolarDB产品使用合集之PolarDB MySQL标准版中带有分区功能吗
PolarDB产品使用合集涵盖了从创建与管理、数据管理、性能优化与诊断、安全与合规到生态与集成、运维与支持等全方位的功能和服务,旨在帮助企业轻松构建高可用、高性能且易于管理的数据库环境,满足不同业务场景的需求。用户可以通过阿里云控制台、API、SDK等方式便捷地使用这些功能,实现数据库的高效运维与持续优化。
|
15天前
|
关系型数据库 分布式数据库 数据库
VLDB顶会论文解读 | PolarDB MySQL高性能强一致集群核心技术详解
在VLDB2023会议上,阿里云瑶池数据库团队的论文介绍了PolarDB-SCC,这是一个创新的云原生数据库系统,确保了低延迟的全局强一致读取。PolarDB-SCC解决了传统主从架构中只读节点可能返回过期数据的问题,实现了在不影响性能的情况下提供强一致性。通过重新设计的主从信息同步机制、线性Lamport时间戳和细粒度修改跟踪,以及利用RDMA优化的日志传输,PolarDB-SCC已经在PolarDB中成功应用超过一年,成为业界首个无感知全局一致性读的云原生数据库解决方案。
66755 0

相关产品

  • 云原生数据库 PolarDB