开源大咖说-为什么PolarDB选择计算存储分离架构
议题为什么选择计算存储分离的架构内容简介主流的数据库架构有哪些? 市场占比分别有多少? 分别适合什么业务场景? 各自有哪些优缺点? 计算存储分离的架构的优势? 计算存储分离的架构适合的业务场景? 近期的roadmap, 计划解决哪些PG用户诟病多年的PG问题?讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程,负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发,现负责PolarDB PostgreSQL的HTAP系统的业务和研发。
深入浅出 PolarDB-X SQL Engine
PolarDB-X 作为一款兼容MYSQL生态的HTAP云数据库,计算引擎是其不可或缺的部分。本次将首次对外分享SQL Engine 的核心技术,看PolarDB-X计算层是如何用一套代码承担TP和AP业务流量的。讲师简介方孝健(花名:玄弟) 阿里云技术专家个人简介阿里云 PolarDB-X 技术研发,毕业于华中科技大学,兴趣广泛,对分布式系统、大数据等均有涉猎。有多篇技术专利,热衷开源社区,是Apache Storm PMC和Apache Calcite/RocketMq/Spark等多个项目的Contributor。 2015 年加入阿里,分别在大数据和数据库部门从事分布式计算引擎的研发。
2024阿里云PolarDB开发者大会云原生技术分会场
详解PolarDB MySQL版Serverless、IMCI、NL2SQL等领先特性的技术实现。现场Demo演示,直观感受PolarDB产品特性。携手客户,解读PolarDB最佳实践。讲师/嘉宾简介杨辛军,阿里云PolarDB MySQL产品部负责人
PolarDB开源数据库云上实验室:云时代下的数据库学习新范式
在学习数据库的过程中,一个便捷的练习环境是走向成功的关键第一步。为了方便开发者学习和使用开源数据库,PolarDB提供了免费的在线实验环境,内置PG开源数据库以及PolarDB开源数据库:PostgreSQL版和分布式版的容器镜像。无需下载或安装,只需一键启动,便可立即投入学习。立即体验:https://developer.aliyun.com/adc/scenario/f55dbfac77c0467a9d3cd95ff6697a31
Kubernetes与PolarDB-X开源
Kubernetes是使用PolarDB-X开源版本绕不开的话题,了解Kubernetes不光有助于更好的使用PolarDB-X,还能通过Kubernetes的架构设计去理解分布式系统的资源调度核心思路。本期分享将介绍Kubernetes基础和PolarDB-X开源是如何使用Kubernetes来实现集群管理。
PG在跨境电商的应用
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 智赢跨境创始人、PG 中国社区 MVP 于培恒带来主题分享《PG在跨境电商的应用》,他说,由于智赢八年积累60亿数据,通过数据处理降低成本被提上日程,本着“省钱的技术才是真本事,不变的技术才是硬通货” 的理念,选择应用 PostgreSQL 数据库。对于智赢的业务场景而言,PostgreSQL 的优点在于数据类型多、索引类型多、函数多、插件多。
SQL智能诊断优化产品SQLess蚂蚁最佳实践
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 蚂蚁高级技术专家王建超为大家带来《SQL智能诊断优化产品SQLess蚂蚁最佳实践》,他从SQL优化体系及方法论、SQL智能诊断优化产品、基于OceanBase在蚂蚁最佳实践、SQLess 核心技术等多个方面分享了SQLess实践经验。他说,SQL关系着业务的性能、吞吐和稳定性,蚂蚁业务场景对数据库稳定性的极致要求,孵化了这款覆盖SQL生命周期的诊断优化产品SQLess,包含SQL防控体系、SQL应急体系、SQL优化体系三道防线。
PolarDB PostgreSQL版企业级特性解读:Global Cache
阿里云PolarDB数据库技术专家吴辉静:《PolarDB PostgreSQL企业级特性解读——Global Cache》。本次分享首先介绍了PostgreSQL的缓存机制data cache和meta cache,并分析了其中存在的问题,随后提出了PolarDB的global cache优化方案,吴老师在分享中详细说明了global cache的架构与实现。
AI时代下的数据库变革
《AI 时代下的数据库变革》,主讲人:磐吉云数创始人CEO冯若航。在PolarDB开源社区温州沙龙冯若航为大家介绍了向量数据库以及与数据库自动驾驶领域的发展情况,分享了对于AI大模型在数据库领域的变革与思考。
PolarDB高校工作组计划发布
在5月12日PolarDB开源社区温州线下沙龙中,北京神脑资讯技术有限公司总裁陈卫星发布了《PolarDB高校工作组计划》,目前已经在多个高校开展工作,今年计划在近百所高校创建PolarDB开源数据库工作室,培养近万名PolarDB认证工程师。
《Serverless数据库技术研究报告》解读
在PolarDB & ScaleFlux meetup中,阿里云数据库开源首席架构师、PolarDB开源社区技术委员会副主席于巍进行了《助力企业降本增效-〈Serverless数据库技术研究报告〉解读》的分享,就《Serverless数据库技术研究报告》与 《数据库Serverless能力分级要求》进行了详细介绍。
使用CLup云管控平台快速体验PolarDB
在本次PolarDB & ScaleFlux 联合meetup中,来自乘数科技的唐成老师分享了如何使用Clup云管控平台快速体验PolarDB的实践案例。
pg4ml 机器学习框架系列课程:实现细节、XOR 模型案例(下)
pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架,本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节,并构建XOR两层网络的模型案例,包括计算图和链式求导设计、训练任务的结构与准备、执行、监控、测试验证等内容。
pg4ml 机器学习框架系列课程:实现细节、XOR 模型案例(上)
pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架,本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节,并构建XOR两层网络的模型案例,包括数据集、XOR分类的案例与原理、神经网络节点、训练任务结构与执行等内容。
PolarDB-X 动手实践系列第15期:PolarDB-X 的存储过程与自定义函数
为了满足更多用户和更多场景的需求,PolarDB-X 支持了兼容 MySQL 的存储过程和自定义函数。本期分享将对上述功能进行演示,并简单介绍背后的设计思路及技术原理。
PolarDB 开源人才培初级考试备考辅导公开课 | 真题解析
为了让学员的学考更有针对性,本次特邀CUUG首席讲师陈卫星老师(Oracle 10g/11g OCM、PostgreSQL PGCM证书获得者,PolarDB 开源人才初级课程金牌讲师)为您答疑解惑,陈老师目前总共分享过200多场数据库相关技术公开课,此次公开课将对比PolarDB与其它国产数据库的技术特点,分享PolarDB 开源人才初级考试秘笈,助您顺利通过考试。
PostgreSQL 内核解读系列第五讲:PostgreSQL 索引介绍(上)
本系列课程将面向DBA、高校学生、内核爱好者,分15个章节,系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和DBA,也可以进行简单的特性开发,更深入理解PG配置和运行原理。本节课将讲述 PostgreSQL 索引基本介绍、B-Tree 索引、Hash 索引、GiS T索引、GIN 索引、TSearch2 全文搜索等内容。
PostgreSQL 内核解读系列第四讲:PostgreSQL 存储管理(二)
本系列课程将面向DBA、高校学生、内核爱好者,分15个章节,系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和DBA,也可以进行简单的特性开发,更深入理解PG配置和运行原理。本节课将讲述PostgreSQL的存储管理,涵盖磁盘管理(Storage Managers、VFD)、 空闲空间映射表(FSM)、可见性映射表(VM)、内存管理等内容。讲师/嘉宾简介漠雪,13年数据库内核开发和架构设计经验,从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发,多年美国、以色列等海外研发经验,了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进,标准化,开源技术等工作。
PostgreSQL 内核解读系列第二讲:PostgreSQL 体系结构
本系列课程将面向 DBA、高校学生、内核爱好者,分15章节,系统化介绍 PostgreSQL 核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和 DBA,也可以进行简单的特性开发,更深入理解PostgreSQL 配置和运行原理。本节课将讲述 PostgreSQL 的体系架构,涵盖系统表,初始化、启动、查询流程,辅助进程等内容。讲师/嘉宾简介漠雪,13年数据库内核开发和架构设计经验,从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发,多年美国、以色列等海外研发经验,了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进,标准化,开源技术等工作。
PolarDB-X 动手实践系列第九期——PolarDB-X Replica原理和使用
Replication用来进行MySQL数据库之间的高效复制,是构建MySQL主备和多主架构的基础能力。PolarDB-X 2.1.0 版本新增兼容MySQL Replica相关指令,实现了MySQL和PolarDB-X之间的数据复制。本期分享将分别演示PolarDB-X作为MySQL和PolarDB-X的备库,并简单介绍背后的技术原理。讲师/嘉宾简介积月,阿里云 PolarDB-X 云原生分布式数据库高级开发工程师,毕业于南京大学计算机系。2021年加入 PolarDB-X 团队,主要负责数据迁移等生态组件研发工作。
PolarDB-X 动手实践系列第五讲——如何在 PolarDB-X 中进行 Online DDL
建表、加列、加索引等是数据库系统中最常见的 DDL 操作,分布式数据库系统中还有新建全局二级索引、改变拆分方式等特有的 DDL 操作,如何在不影响业务的前提下进行在线 DDL 操作,是 PolarDB-X 的核心功能之一。本期分享将围绕 DDL 这一场景演示 PolarDB-X 的 Online DDL 能力。讲师/嘉宾简介燧木,阿里云 PolarDB-X 云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017 年加入 PolarDB-X 团队进行高并发低延迟的 MySQL 分布式相关系统开发工作,目前负责 PolarDB-X 的云原生底座打造、生态系统连接、开源等开放生态构建工作。
PolarDB-X 动手实践系列——如何对 PolarDB-X 集群做动态扩缩容
作为一款云原生+分布式数据库系统,弹性扩缩容是 PolarDB-X 的亮点特性之一。在今年一月底的版本更新中,PolarDB-X 扩缩容能力正式发布,本期分享将围绕该能力进行演示与讲解。讲师/嘉宾简介燧木,阿里云 PolarDB-X 云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017 年加入 PolarDB-X 团队进行高并发低延迟的 MySQL 分布式相关系统开发工作,目前负责 PolarDB-X 的云原生底座打造、生态系统连接、开源等开放生态构建工作。
《开源大咖说》 - 5 - PolarDB的MPP跨机并行执行
PolarDB的MPP跨机并行执行.讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程,负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发,现负责PolarDB PostgreSQL的HTAP系统的业务和研发。
《开源大咖说》4期 - 分布式一致性和分布式事务
聊一聊分布式一致性协议和分布式事务协议的关系,以及经典的分布式事务算法。讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程,负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发,现负责PolarDB PostgreSQL的HTAP系统的业务和研发。
PolarDB for PostgreSQL 开源架构解读
PolarDB for PostgreSQL是开源分布式云原生数据库, 采用计算存储分离架构, 本期视频介绍了PolarDB PG如何从架构层面解决PG单机版的高并发、HTAP、读写分离延迟等痛点讲师简介花名: 北侠 title: 阿里云高级技术专家个人介绍: 深度参与PolarDB项目从零构建的过程,负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发,现负责PolarDB PostgreSQL的HTAP系统的业务和研发。
PolarDB-X云原生分布式数据库的诞生与发展
随着云计算的普及,阿里巴巴很多内部系统都逐渐演变成云产品。作为典型代表,本次分享将结合这个演变过程讲述PolarDB-X的发展历史、架构演进及决策逻辑、关键特性、未来迭代方向等。讲师介绍吴学强(花名:燧木)阿里云高级技师专家个人简介:阿里云PolarDB-X云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017加入PolarDB-X团队进行高并发低延迟的MySQL分布式相关系统开发工作,目前负责PolarDB-X的云原生底座打造、生态系统连接、开源等开放生态构建工作。
PolarDB开源
PolarDB 是阿里云自研的云原生数据库产品家族,采用存储计算分离、软硬一体化设计,既拥有分布式设计的低成本优势,又具有集中式的易用性,可满足大规模应用场景需求。 2021年,阿里云先后宣布PolarDB PostgreSQL版与PolarDB分布式版开源,并持续推动开源版本迭代和演进,助力开发者通过开源版本快速使用阿里云数据库产品技术,并参与产品迭代中来。 开源历程参见:OpenPolarDB.com/about