PolarDB实操课] 04.通过源码部署PolarDB-X企业版

简介: 本次课程由PolarDB开源架构师王江颖分享,详细介绍了通过源码部署PolarDB-X企业版的全过程。主要内容包括:1. **编译基础**2. **使用源码编译部署PolarDB-X企业版**3. **演示实例**:通过阿里云ECS进行实际操作演示,从创建用户、赋予权限到最终启动并连接PolarDB-X数据库,展示了完整的部署过程。4. **总结**

PolarDB实操课] 04.通过源码部署PolarDB-X企业版


内容介绍:

一、编译基础

二、使用源码编译部署PolarDB-X企业版

三、演示实例

四、总结

 

本次分享的主题是通过源码部署PolarDB-X企业版,由PolarDB开源架构师王江颖分享。

28a5e7599c3c36c323736a922fa28d3.png

本次课程通过源码部署PolarDB-X的企业版,首先了解编译的基础知识,编译是将高级编程语言写成的源代码转换成低级语言的过程,以便计算机可以直接执行程序。高级编程语言是平时所用的语言,例如C、C++、java、python等。低级语言是计算机能够直接识别的语言,如机器语言、字节码,因为计算机不能识别高级编程语言,所以需要通过编译把高级语言转换成低级语言,以便于执行程序。


一、编译基础

d79958b249863c28e882f1c4043391e.png

编译分为六部分。

1. 预处理

预处理指编译器处理源代码文件中的预处理指指令,编译器是软件程序,它可以读取高级语言写成的源代码,经过一系列的分析和转换过程,产生等价的低级语言代码。常见的编译器有GCC。

2. 词法分析

词法分析是将源代码分解成一串标记,也就是tokens,包括关键字、变量、常量等。

3. 语法分析

语法分析是将标记组成语法结构,表示成一棵语法树。在完成语法分析后,进入到语义分析的阶段,语义分析是检查语法树是否有意义,比如变量的类型是否正确、函数调用是否有效等。

4. 代码生成的阶段

代码生成就是把语法结构转换成目标代码的过程。

5. 优化阶段

优化阶段是改进生成的代码,使代码更快、更节省资源。优化不仅出现在最后一个阶段,在编译的整个过程中都会一直不断的去优化代码。

6. 构建系统

构建系统是当项目复杂时,源代码会被分散在许多不同的文件和目录当中,例如PolarDB-X的源代码会分散在不同的文件和目录当中,构建系统就可以把源代码进行统一的管理,并且帮助程序员控制整个编译的过程。将源代码文件转换成最终的可执行程序,方便进行编译。常见的构建系统有Cmake、 Automake、 Maven等。

7. 库

库是一组事先编译好的代码的集合。可以由编译器在编译新程序时使用,可以大幅提高编译的速度,避免重新编写常见功能的代码。常见的库有Boost。

8. 软件包管理器

软件包管理器是一种工具或系统,用在计算机操作系统上自动安装、配置、更新和删除软件包。

在编译的过程中,开发者首先会写下源代码,使用GCC转换成机器代码,然后借助一些构建系统,比如借助C make或者Automake这样的工具去自动化整个编译的过程。使用Cmake命令进行自动化的构建,在编译的过程中使用boost提供一些丰富的功能,加速编译的过程。

 

二、使用源码编译部署PolarDB-X企业版

b7d6076363d32cf01b070994f80d822.png

PolarDB-X企业版的代码是在github仓库上存储的。

1. PolarDB-X源代码结构

(1)polardbx-engine是存储节点DN的代码,DN节点就是存储节点。

(2)polardbx-sql是计算节点CN的代码。

(3)polardbx-cdc是日志节点CDC的代码。

(4)polardbx-glue是私有协议的代码。

2. 编译的过程

(1)准备环境

本次使用的环境是阿里云的云服务器ECS,操作系统是CentOS7.9版本,规格是24核48GiB。推荐使用8核16GiB以上的规格,小规格有可能导致编译不成功。并且需要使用一系列的工具,例如sudo、git、 make、 redhat-lsb-core等。

(2)编译

准备完环境后,在环境上安装工具,并且拉取源代码,拉取结束通过Make进行自动化编译。

(3)启动PolarDB-X

编译完成后,启动PolarDB-X数据库,连接登录PolarDB-X数据库。

 

三、演示实例

通过ECS进行编译,首先需要安装必要的工具。

569ca89f80ed3a8538cb80ad9e9440a.png

1. 工具

(1)sudo是一个命令行工具。允许普通用户以超级用户的身份去运行命令,因为有一些命令只有超级用户才有权限去执行,需要赋予普通用户权限。

(2)git是一个分布式版本控制系统。

(3)make是很重要的一个编译过程的工具。通过单独的一个make命令,可以自动化的执行整个编译的过程。

(4)redhat-lsb-core工具提供LSB的支持和兼容linux版本的功能。

2. 执行代码

代码执行成功,工具安装完成。

#创建一个名为polarx的用户

useradd  -ms /bin/bash  polarx

echo “ polarx: polarx”|chpasswd

//这两行代码指创建用户和创建密码

#接下来赋予polarx权限。

echo“polarx  ALL=(ALL)   NOPASSWD:ALL”>>/etc/sudoers

//polarx的用户在执行命令时不需要输入密码。这个过程自动化和加速整个编译的过程

#接下来通过su命令切换到polar x用户

su - polarx

#最后从github仓库拉取源代码

git clone https://github.com/zhiliyao-polarx/polardbx.git

f28325828d5c75c7fb5291d44a2814a.png

3.使用make编译。

#首先进入到polardbx 目录

cd polardbx

//通过cd命令进入到目录

#进入目录就直接去执行make命令。

make

//在编译过程中,make可以自动下载所有源码、工具和库等所有资源,并构建和安装polar DB-X。

直接执行make命令,在make命令中,安装了一些必要的配置工具,安装成功之后,拉取各个节点的源码,就是DN节点、CN节点、CDC节点和源码,并逐步编译。现在进行拉取polardbx-sql源码和polardbx-engine源码,polardbx-engine源码比较大,拉取的过程较慢,需要花费一定的时间,让后拉取polardbx-cdc源码,它是日志节点CDC的源码。进入编译环节,首先编译DN节点,其次编译CN节点,最后编译CDC节点,所有节点都编译完成,进行最后的收尾工作。这是编译完成的截图。

c0bacef7d904e1cc3d59cd753c4c40c.png

接下来进入到启动的阶段

#启动PolarDB-X数据库

./build/run/bin/polardb-x.sh start

//最后启动的cdc  start.  try  polardb-x  by进程,启动成功。

#连接PolarDB-X数据库

mysql -h127.0.0.1 -P8527 -upolardbx_root

//连接成功代表编译过程完成

4e13bf0be1f30806e4dc1febe654671.png


四、课程总结

cbb2671b85eef0733ad146c24c6d656.png

(1)本节课学习了编译的基本概念,以及编译的主要的阶段。

(2) 学习了编译所涉及的一些工具,包括编译器,构建系统库以及软件包管理器等。整个编译过程比较慢,通过make命令来进行操作,有一些环节没有看清楚,但工具在整个编译过程当中都有用到。

(3)学习了PolarDB-X源代码结构,DN、CN、CDC和私有协议对应源代码的仓库。

(4)通过实际演示的方式学习通过源码来部署PolarDB-X,其中重要的一点是,用make命令去自动的拉取代码,以及下载编译过程中所需的工具和库,在DN、CN、CDC节点都逐一的编译完成后,启动polar DB-X数据库。

 

相关文章
|
关系型数据库 MySQL 分布式数据库
[PolarDB实操课] 05.通过源码部署PolarDB-X标准版
本课程介绍如何通过源码部署PolarDB-X标准版,涵盖基于Paxos的MySQL三副本工作原理和技术特点。主要内容包括: 1. **Paxos三副本工作原理**:讲解Leader和Follower节点的角色及数据同步机制。 2. **技术特点**:强调高性能、数据不丢失(RPO=0)和自动HA切换。 3. **源码部署步骤**:详细演示从编译生成RPM包到启动DN节点的过程,包括配置my.cnf文件和初始化数据库。 4. **高可用体验**:通过三台机器模拟三副本集群,展示Leader选举和故障转移机制,确保数据一致性和服务可用性。
779 1
|
弹性计算 关系型数据库 PolarDB
[PolarDB实操课] 03.使用PXD部署PolarDB企业版和标准版
本课程详细介绍了如何使用PXD工具部署PolarDB-X企业版和标准版。主要内容包括: 1. **PolarDB-X企业版与标准版的区别**:讲解了两者的架构特点、性能差异及适用场景。 2. **集群机器上安装Docker环境**:指导用户在阿里云ECS实例上安装Docker,确保后续部署顺利进行。 3. **部署机上安装PXD**:介绍如何配置密钥连接、安装Python3并激活虚拟环境,最后安装PXD工具。 4. **创建并部署PolarDB-X**:通过编写拓扑文件(YAML格式),一键拉起PolarDB-X集群,并验证部署状态。
559 0
|
供应链 安全 Cloud Native
阿里云飞天企业版获【可信云·容器平台安全能力】先进级认证
阿里云飞天企业版容器系列产品获中国信息通信研究院【可信云·容器平台安全能力】先进级认证,这是飞天企业版容器产品获得《等保四级PaaS平台》和《 云原生安全配置基线规范V2.0》之后,本年度再一次获得行业权威认可,证明飞天企业版的容器解决方案具备符合行业标准的最高等级容器安全能力。
640 8
阿里云飞天企业版获【可信云·容器平台安全能力】先进级认证
|
云安全 运维 安全
唯一全领域卓越级!阿里云飞天企业版通过安全水位最新认证
近日,阿里云与中国信息通信研究院携手,共同发布了行业首个《专有云安全水位评估》标准,为行业引入第一个专有云安全整体评估体系。在该标准指导下,阿里云以飞天企业版通过了专有云安全水位评估验证,是参评产品中唯一在全领域均取得卓越级的产品,将帮助客户实现从合规到卓越的安全能力跃迁。
501 0
|
人工智能 运维 安全
十年同行,阿里云飞天企业版支持中国企业扎根全球
今天,在阿里云主办的「2025中企出海大会」上,阿里云飞天企业版(Apsara Stack)正式发布最新国际化产品与服务能力,全面助力中企出海和国际市场。阿里云专有云应急服务负责人张淑芬在大会发表“飞天企业版-本地化专有云计算服务”主题演讲,深入解读飞天企业版面向中企出海的三大核心产品解决方案,以及阿里云在全球化部署与生态合作方面的实践成果与战略布局。
1041 1
|
存储 人工智能 容灾
三大国际解决方案“一键上线”,阿里云飞天企业版为全球客户打造AI时代最开放的云
刚刚,2025阿里云国际峰会「Alibaba Cloud Global Summit 2025」在新加坡成功举办,在阿里云服务新加坡的十周年的程碑时刻,集中展示最新的AI及云产品与服务,助力全球企业拥抱新一轮科技浪潮。 飞天企业版(Apsara Stack)作为阿里云为政企客户构建的资源和云管完全独立的企业级云平台,在本次大会亮相,并首次展示了面向海外市场的三大解决方案:主权云、AI云与云迁移方案。 此次发布标志着阿里云在亚太地区深化技术赋能、推动数字主权建设与人工智能创新的重要战略布局,吸引了全球政企代表、技术专家与行业领袖的关注。
1351 0
|
存储 人工智能 运维
首批!阿里云飞天企业版率先通过中国信通院一云多算能力评估
阿里云飞天企业版率先参加中国信通院组织的首批一云多算系列标准的评估,并成功通过该标准的验收测试与专家评审。
605 2
首批!阿里云飞天企业版率先通过中国信通院一云多算能力评估
|
存储 人工智能 运维
首批!阿里云飞天企业版率先通过中国信通院一云多算能力评估
首批!阿里云飞天企业版率先通过中国信通院一云多算能力评估