使用PolarDB分布版搭建炫酷个人博客
本期《动手吧,开发者》由阿里云PolarDB高级开发工程师杨鼎带您体验双十一同款数据库,按需领取PolarDB分布式版试用资源即可动手实操!全程手把手教学,10分钟时间即可完成部署~
PolarDB PostgreSQL版 Serverless弹性&价格力观测
PolarDB PostgreSQL版 Serverless弹性&价格力观测
PolarDB-PG + LLM 构建专属 Chatbot 技术解析
随着ChatGPT的横空问世,大语言模型带来了各种场景下颠覆性的变革与热议,PolarDB的大模型能力也被OpenAI合入到官方GitHub库中。本次分享主要介绍PolarDB的大模型及其相关应用,包括PolarDB向量技术对应人脸识别应用,PolarDB与OpenAI结合的知识库问答应用及其背后的技术解析。
饮水思源、万象更新 - 数据库开源沙龙(杭州站)
本次沙龙是PostgreSQL中文社区与阿里云数据库开源团队联合主办的。PostgreSQL生态技术沙龙,旨在推动PG的用户交流,分享最新热门的数据库技术,包括阿里云开源的PolarDBforPG共享存储版本如何实现类似Oracle的RAC架构?PG如何支持DirectIO?PG的内核学习方法等.大咖云集,欢迎报名参加.2021年10月30日(12:00~18:00)杭州市滨江区长河路中控信息B座1708活动嘉宾及议题曲山阿里云数据库开源负责人介绍沙龙目标, KOL、SIG、开源计划, 开源的使命.唐成杭州乘数科技CTO、PG社区常委, 内核专家PostgreSQL DirectIO开发实践北侠阿里巴巴数据库内核领域专家PolarDB PG 架构介绍与源码贡献圆珠阿里巴巴数据库分布式存储领域专家PolarDB PG分布式共享存储层原理蟾兔阿里巴巴数据库云原生领域专家PolarDB Stack 管控平台最佳实践朱贤文成都文武科技CTO、PG社区常委, 内核专家PolarDB on 鸿鹄吕海波杭州美创科技数据库内核专家、PG内核专家PostgreSQL Non-FPW开发实践
[PolarDB实操课] 01.PolarDB分布式版架构介绍
学姐和你一起学PolarDB-X系列课程,是面向数据库管理员、架构师、开发人员以及对云原生分布式数据库技术有浓厚兴趣的学习者的深度实践课程,旨在帮助学员全面理解和熟练掌握PolarDB-X的核心技术、架构原理以及实际应用操作。本期课程由PolarDB开源架构师王江颖学姐,为大家介绍PolarDB分布式版的架构。
2024阿里云PolarDB开发者大会主论坛
AI时代,开发者需要什么样的数据库?如何让数据库像「搭积木」一样简单易用?开发者最关心的话题,我们一网打尽!讲师/嘉宾简介李飞飞,阿里云副总裁,阿里云数据库产品事业部负责人,ACM、CCF、IEEE会士(Fellow);黄铭钧,中国科学院外籍院士,新加坡科学院院士,新加坡国立大学杰出教授,ACM、IEEE会士(Fellow);周傲英,华东师范大学数据学院教授,CCF数据库专委会主任;杨辛军,阿里云PolarDB MySQL产品部负责人;
数据库专家带你体验PolarDB MySQL版 Serverless的极致弹性特性
构建数据库产品 PolarDB MySQL版 Serverless 形态下的性能压测环境,基于可选择的标准压测工具进行压测,构造弹性场景进行压测,实时动态展示弹性能力、价格和性价比结果。
2024阿里云PolarDB开发者大会一站式数据管理分会场
解读“AI驱动下走向一站式智能化的数据平台”。深入剖析云原生一体化HTAP、可信密态数据管理体系,分享PolarDB多模态空间数据管理能力的最佳实践。讲师/嘉宾简介周文超,阿里云数据库事业部生态工具产品部负责人张广舟,阿里云PolarDB PostgreSQL产品部负责人
开源面对面:浅谈数据库技术与人工智能的结合与实践
数据库做机器学习和深度学习有若干技术路线?关于红极一时的 chatGPT有什么看法?数据库能否做 NLP ?Postgresql 在深度学习、人工智能领域能承担起哪些应用?本期开源面对面节目,阿里云数据库开源首席架构师于巍携手PolarDB机器学习框架SIG核心成员、pg4ml 框架作者郭铁成,与你探讨分享数据库技术与机器学习融合的一些思考和实践。
pg4ml 机器学习框架系列课程:实现细节、XOR 模型案例(上)
pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架,本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节,并构建XOR两层网络的模型案例,包括数据集、XOR分类的案例与原理、神经网络节点、训练任务结构与执行等内容。
在阿里云 ESSD 云盘上部署 PolarDB for PostgreSQL 集群
阿里云 ESSD 云盘结合 25 GE 网络和 RDMA 技术,能够提供单盘高达 100 万的随机读写能力和单路低时延性能,同时支持多重挂载在多个 ECS 实例上。本期开源学堂将演示使用一个 ESSD 云盘作为共享存储多重挂载到两个 ECS 实例上,并分别在两个 ECS 实例上部署 PolarDB-PG 节点组成集群。同时简析部署准备过程中的技术原理。讲师/嘉宾简介棠羽,阿里云 PolarDB-PG 云原生数据库内核开发工程师,毕业于南京航空航天大学计算机学院。2022 年加入 PolarDB-PG 团队,主要负责 HTAP 和分布式执行层的研发工作。
[PolarDB实操课] 05.通过源码部署PolarDB-X标准版
学姐和你一起学PolarDB-X系列课程,是面向数据库管理员、架构师、开发人员以及对云原生分布式数据库技术有浓厚兴趣的学习者的深度实践课程,旨在帮助学员全面理解和熟练掌握PolarDB-X的核心技术、架构原理以及实际应用操作。本期课程由PolarDB开源架构师王江颖学姐,为大家介绍如何通过源码部署PolarDB-X标准版。
阿里云PolarDB数据库在AI时代下的应用与优势
《PolarDB数据库在AI时代下的应用与优势》,主讲人:阿里云数据库开源首席架构师郭良忠。随着AI大模型时代的到来,阿里云通过PolarDB数据库与AI场景的结合,帮助大家更好地了解和掌握PolarDB数据库+AI的相关知识和技能,进而在实际工作中更好地应用PolarDB数据库+AI一体化的思路解决业务新需求和新场景的融合,提高数据处理效率和竞争力。
【论文解读】VLDB 2022:Ganos——阿里云多维度、动态、场景化的云原生时空数据库引擎
《Ganos: A Multidimensional, Dynamic, and Scene-Oriented Cloud-Native Spatial Database Engine》介绍了空天数据库引擎Ganos背后的系统设计,分析了对地观测、数字孪生等新技术浪潮背景下多维、动态、场景化新型空间多模态数据的挑战,自底向上提出了低成本高可用对象存储扩展、空间/时空/网格新型数据类型与模型体系、多维索引访问方法和空间多级并行查询与优化整体框架。Ganos加持PolarDB数据库,使之成为业界首个具备云原生空间数据引擎,且最早系统性支持移动对象和3D场景数据处理能力的商业化数据库。
pg4ml 机器学习框架介绍与模型案例
pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架,其核心机制是神经网络构建和模型训练。本次分享将由pg4ml 框架作者郭铁成带来 pg4ml 机器学习框架介绍与模型案例的分享,涵盖框架介绍、安装部署、模型案例、未来展望、与云计算、PolarDB结合等内容。
在 CurveBS 上部署跨机 PolarDB for PostgreSQL 集群
Curve 是网易开源的高性能、高可用、高可靠分布式存储系统,具备良好的扩展性,可应用于主流的云原生基础设施平台。本期开源学堂将演示如何使用 CurveBS 存储集群作为共享块存储底座,在多台 ECS 上部署 PolarDB-PG 共享存储数据库集群。同时简析部署流程背后的技术原理。
PolarDB-X 动手实践系列第13期:PolarDB-X 数据导入导出功能
作为 MySQL 生态的云原生分布式数据库,PolarDB-X 不仅兼容 MySQL 生态的数据导入导出方式,如mysqldump 工具、Source 语句、Load data 语句等,而且开发了新的导入导出工具 Batch-Tool,满足用户的数据保存和数据迁移需求,本期分享将介绍 PolarDB-X 的数据导入导出功能,并简单介绍不同方式之间的差异和原理。
PolarDB-X 动手实践系列——如何对 PolarDB-X 集群做动态扩缩容
作为一款云原生+分布式数据库系统,弹性扩缩容是 PolarDB-X 的亮点特性之一。在今年一月底的版本更新中,PolarDB-X 扩缩容能力正式发布,本期分享将围绕该能力进行演示与讲解。讲师/嘉宾简介燧木,阿里云 PolarDB-X 云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017 年加入 PolarDB-X 团队进行高并发低延迟的 MySQL 分布式相关系统开发工作,目前负责 PolarDB-X 的云原生底座打造、生态系统连接、开源等开放生态构建工作。
PolarDB-X 动手实践系列第一讲:如何一键部署开源 PolarDB-X
云原生分布式数据库 PolarDB-X 已于 2021 年 10 月 20 日开源,想要体验水平扩容、分布式事务、全局二级索引、全局 Binlog 等特性的前提是能够在本地部署一个 PolarDB-X 集群,本次分享将介绍 PolarDB-X 的多种部署方式,带你踏上体验 PolarDB-X 的第一步。讲师/嘉宾简介燧木,阿里云 PolarDB-X 云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017 年加入 PolarDB-X 团队进行高并发低延迟的 MySQL 分布式相关系统开发工作,目前负责 PolarDB-X 的云原生底座打造、生态系统连接、开源等开放生态构建工作。
PolarDB分布式数据库PolarDB-X,兼容MySQL的集中式分布式一体化的数据库,平替MySQL的国产数据库。
PolarDB分布式数据库PolarDB-X,兼容MySQL的集中式分布式一体化的数据库,平替MySQL的国产数据库。
阿里云PolarDB开发者大会首度召开,让数据库开发像“搭积木”一样简单
1月17日,阿里云PolarDB开发者大会在京举办,中国首款自研云原生数据库PolarDB发布“三层分离”新版本,基于智能决策实现查询性能10倍提升、节省50%成本。PolarDB在过去3年实现400%的增速,目前用户数已超过10000家,广泛落地于政务、金融、电信、物流、互联网等领域的核心业务系统。
MySQL & PostgreSQL 终极大比拼
MySQL、PostgreSQL,乃至各种各样的数据库,孰强孰弱,难以辨别。究其原因,只因”不识庐山真面目,只缘身在此山中“。只需跳出”数据库“三字,一切自然看的分明。本次分享将带你换个维度,发现真相。
PolarDB-X的存储过程&自定义函数
为了满足更多用户和更多场景的需求,PolarDB-X 支持了兼容 MySQL 的存储过程和自定义函数。本期分享将对上述功能进行演示,并简单介绍背后的设计思路及技术原理。
Kubernetes与PolarDB-X开源
Kubernetes是使用PolarDB-X开源版本绕不开的话题,了解Kubernetes不光有助于更好的使用PolarDB-X,还能通过Kubernetes的架构设计去理解分布式系统的资源调度核心思路。本期分享将介绍Kubernetes基础和PolarDB-X开源是如何使用Kubernetes来实现集群管理。
PolarDB开源数据库云上实验室:云时代下的数据库学习新范式
在学习数据库的过程中,一个便捷的练习环境是走向成功的关键第一步。为了方便开发者学习和使用开源数据库,PolarDB提供了免费的在线实验环境,内置PG开源数据库以及PolarDB开源数据库:PostgreSQL版和分布式版的容器镜像。无需下载或安装,只需一键启动,便可立即投入学习。立即体验:https://developer.aliyun.com/adc/scenario/f55dbfac77c0467a9d3cd95ff6697a31
PolarDB-X 备份恢复原理与实践
备份恢复是生产级数据库必不可少的功能,而PolarDB-X 作为一款分布式数据库,备份数据的全局一致也是最基本的要求。本期分享将介绍PolarDB-X 开源版备份恢复功能的背景与原理,以及如何使用 PolarDB-X Operator 实现备份调度。
PG在跨境电商的应用
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 智赢跨境创始人、PG 中国社区 MVP 于培恒带来主题分享《PG在跨境电商的应用》,他说,由于智赢八年积累60亿数据,通过数据处理降低成本被提上日程,本着“省钱的技术才是真本事,不变的技术才是硬通货” 的理念,选择应用 PostgreSQL 数据库。对于智赢的业务场景而言,PostgreSQL 的优点在于数据类型多、索引类型多、函数多、插件多。
从 SQL Server、Oracle 迁移到 PolarDB 的最佳实践
在7月29日PolarDB开源社区南京沙龙中,中启乘数科技创始人唐成分享了《从SQL Server、Oracle迁移到PolarDB的最佳实践》,介绍了PolarDB的产品优势与亮点,从业务需求角度出发,解决企业在数据迁移过程中遇到的痛点。
PolarDB高性能数据库一体机解决方案
《PolarDB高性能数据库一体机解决方案》,主讲人:中启乘数科技创始人唐成。CData是一款高性能数据库云产品平台,支持高可用、高性能、水平拓展等特性。CData搭载PolarDB将发挥出极致的性能优势。
pg4ml 机器学习框架系列课程:实现细节、XOR 模型案例(下)
pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架,本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节,并构建XOR两层网络的模型案例,包括计算图和链式求导设计、训练任务的结构与准备、执行、监控、测试验证等内容。
PolarDB-X v2.2 重磅发布:国产ARM适配和HTAP架构
在2022云栖大会,一体化分布式数据库PolarDB-X 发布里程碑的大版本v2.2,本次版本发布重点包含在分布式数据库金融标准下的企业级和国产ARM适配的特性,包含MySQL存储过程、云原生HTAP等八大特性。点此了解开源版本发布详细内容。
PostgreSQL 内核解读系列第五讲:PostgreSQL 索引介绍(上)
本系列课程将面向DBA、高校学生、内核爱好者,分15个章节,系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和DBA,也可以进行简单的特性开发,更深入理解PG配置和运行原理。本节课将讲述 PostgreSQL 索引基本介绍、B-Tree 索引、Hash 索引、GiS T索引、GIN 索引、TSearch2 全文搜索等内容。
PostgreSQL 内核解读系列第四讲:PostgreSQL 存储管理(二)
本系列课程将面向DBA、高校学生、内核爱好者,分15个章节,系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和DBA,也可以进行简单的特性开发,更深入理解PG配置和运行原理。本节课将讲述PostgreSQL的存储管理,涵盖磁盘管理(Storage Managers、VFD)、 空闲空间映射表(FSM)、可见性映射表(VM)、内存管理等内容。讲师/嘉宾简介漠雪,13年数据库内核开发和架构设计经验,从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发,多年美国、以色列等海外研发经验,了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进,标准化,开源技术等工作。
PostgreSQL 内核解读系列第三讲:PostgreSQL 存储管理(一)
本系列课程将面向DBA、高校学生、内核爱好者,分15个章节,系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习,让没有内核经验的同学和DBA,也可以进行简单的特性开发,更深入理解PG配置和运行原理。本节课将讲述PostgreSQL的存储管理,涵盖主流存储引擎架构和原理(Oracle RAC Cache Fusion、阿里云三层解耦、XEngine 的LSMTree实现)、PG页面和元组(MySQL、PG页面结构对比)、Buffer管理、淘汰算法(常用淘汰算法)等内容。讲师/嘉宾简介漠雪,13年数据库内核开发和架构设计经验,从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发,多年美国、以色列等海外研发经验,了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进,标准化,开源技术等工作。
PolarDB-X云原生分布式数据库的诞生与发展
随着云计算的普及,阿里巴巴很多内部系统都逐渐演变成云产品。作为典型代表,本次分享将结合这个演变过程讲述PolarDB-X的发展历史、架构演进及决策逻辑、关键特性、未来迭代方向等。讲师介绍吴学强(花名:燧木)阿里云高级技师专家个人简介:阿里云PolarDB-X云原生分布式数据库技术负责人之一,毕业于浙江大学计算机学院,兴趣广泛,对操作系统、密码学、分布式系统等均有涉猎。2017加入PolarDB-X团队进行高并发低延迟的MySQL分布式相关系统开发工作,目前负责PolarDB-X的云原生底座打造、生态系统连接、开源等开放生态构建工作。
[PolarDB实操课] 04.通过源码部署PolarDB-X企业版
学姐和你一起学PolarDB-X系列课程,是面向数据库管理员、架构师、开发人员以及对云原生分布式数据库技术有浓厚兴趣的学习者的深度实践课程,旨在帮助学员全面理解和熟练掌握PolarDB-X的核心技术、架构原理以及实际应用操作。本期课程由PolarDB开源架构师王江颖学姐,为大家演示如何通过源码部署PolarDB-X企业版。
[PolarDB实操课] 03.使用PXD部署PolarDB企业版和标准版
学姐和你一起学PolarDB-X系列课程,是面向数据库管理员、架构师、开发人员以及对云原生分布式数据库技术有浓厚兴趣的学习者的深度实践课程,旨在帮助学员全面理解和熟练掌握PolarDB-X的核心技术、架构原理以及实际应用操作。本期课程由PolarDB开源架构师王春雨学姐,为大家示范如何使用PXD部署PolarDB企业版和标准版。
你知道吗?数据误删不再是噩梦!有了PolarDB分布式版,这种糟糕的经历将成为过去式!
你知道吗?数据误删不再是噩梦!有了PolarDB分布式版,这种糟糕的经历将成为过去式!
手把手教你成为PolarDB开源贡献者
开源生态的繁荣,离不开各位开发者的力量。为了帮助更多开发者感受到开源社区的魅力,了解到如何更快的参与开源社区,PolarDB开源社区推出《开源贡献新手指南系列》,本节课程将手把手教学PolarDB-PG/PolarDB-X两大开源项目完整的PR提交过程,即便你不懂编程或代码,也能成为开源贡献者,通过参与开源社区贡献获得自身成长。
高性能PolarDB一体机解决方案
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 中启乘数科技创始人唐成为大家带来《高性能PolarDB一体机解决方案》,他围绕PolarDB的特点、高性能一体机的核心技术、使用场景三个方面来分享了一体机CData的解决方案。他说,CData是将数据库的最佳实践与快速发展的硬件相结合,把计算能力、网络能力、存储能力等各方面做到最佳优化,提供一套高性能、高可靠,最佳性价比的数据库平台,它的使用场景也包括高可用、强一致性、大容量的场景。
Oracle VS PostgreSQL/PolarDB 技术大比拼
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 CUUG负责人、PG中文社区委员、Oracle金牌讲师陈卫星为大家带来主题分享《Oracle VS PostgreSQL/PolarDB功能大比拼》。他从实例结构、数据库体系架构、备份恢复、性能调优、高可用解决方案五个方面进行了对比分享。他说,在PolarDB的体系架构中,计算节点和存储节点分离,存储节点有优势,也就是共享存储。随着用户业务数据量越来越大,业务越来越复杂,传统数据库系列面临巨大挑战,PolarDB 在技术上做了很多优化,如只复制Meta、页面回放优化、DDL锁回放优化,通过这些技术上的突破,极大的降低了复制延迟,实现了读写分离、高可用和稳定性。
OceanBase 4.x 关键特性解读
大咖云集,燃爆夏日。8月5日,由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 OceanBase 内核研发专家李博洋带来了《OceanBase 4.x 关键特性解读》。他从OceanBase 发展历程及构架演进开始讲起,分享了OceanBase 架构发展历程,重点介绍了什么是单机分布式一体化、4.x 的单机分布式一体化能给大家带来了什么?他说,做单机分布式一体化架构实际上有很多方面的挑战,最大最核心的挑战其实是在性能这方面。我们在这方面做了很大的努力,单机性能在单机部署时做到和单机数据库相当;在分布式部署时,我们在保证可扩展性的同时,还能获得更高的性能和更低的时延。
Kubernetes 基础与 PolarDB-X 开源
Kubernetes是使用PolarDB-X开源版本绕不开的话题,了解Kubernetes不光有助于更好的使用PolarDB-X,还能通过Kubernetes的架构设计去理解分布式系统的资源调度核心思路。本期分享将介绍Kubernetes基础和PolarDB-X开源是如何使用Kubernetes来实现集群管理。
PolarDB开源
PolarDB 开源社区是阿里云数据库开源产品PolarDB的技术交流平台。作为一款开源的数据库产品, 离不开用户和开发者的支持, 大家可以在社区针对PolarDB产品提问题、功能需求、交流使用心得、分享最佳实践、提交issue、贡献代码等。为了让社区成员可以更方便的交流, 促进数据库行业的发展, 社区会组织线上和线下的meetup, 举办高校、企业的交流活动, 组织技术类的竞技活动等。欢迎广大的数据库爱好者、用户、开发者加入社区大家庭。