PostgreSQL可拔插存储引擎表定义机制

本文涉及的产品
云原生数据库 PolarDB MySQL 版,Serverless 5000PCU 100GB
简介: PostgreSQL可拔插存储引擎表定义机制

Postgresql12开始支持可拔插存储引擎,即可拔插表访问方法。目前仅仅支持heap一种表访问方法。新增了pg_am和pg_proc系统表用于存储表访问方法的元数据。本文介绍创建表时如何处理这些元数据。

1、定义表的函数为DefineRelation,该函数的入参stmt->accessMethod为表访问方法名。

2、如果创建表时没有指定使用表访问方法,那么会使用默认的表访问方法,即heap

3、调用get_table_am_oid根据表访问方法名获取对应的oid,即pg_am的oid字段:

1)先从SysCache[AMNAME]hash表中检索,即pg_am_name_index的缓存

1)否则顺序扫描pg_am表

4、调用函数heap_create_with_catalog进行初始化表访问方法、创建磁盘物理文件、向pg_class系统表插入一条元数据tuple:

5、需要先判断创建的表是否已存在:从SysCache[RELNAMESP]hash表检索,缓存pg_class_relname_nsp_index;或者从pg_class顺序扫描:relname和relnamespace

6、调用heap_create函数进行初始化表访问方法和创建磁盘物理文件

7、调用AddNewRelationTuple向pg_class插入一条元数据tuple

8、调用AddNewAttributeTuples向pg_attribute插入列元数据信息

9、heap_create函数调用RelationBuildLocalRelation进行初始化表访问方法

  1)申请Relation结构体空间并初始化

  2)rel->rd_rel即pg_class的一个tuple信息申请空间并初始化

  3)将pg_am的oid字段值保存到rel->rd_rel->relam

  4)RelationInitTableAccessMethod初始化表访问方法

  5)将Relation插入RelationIdCache hash表

10、RelationOpenSmgr打开smgr信息,即控制IO层

11、rel->rd_tableam->relation_set_new_filenode创建物理文件,通过rel->rd_tableam得到表访问方法api。

1、RelationInitTableAccessMethod初始化表访问方法

2、RELKIND_SEQUENCE、系统表的函数handler ID为heap的:relation->rd_amhandler = HEAP_TABLE_AM_HANDLER_OID

3、从SysCache[AMOID]或者pg_am顺序扫描,得到表访问方法的handlerID

4、fmgr_builtins[]数组为内置函数元数据,若是内置则&fmgr_builtins[amhandler]得到finfo信息

5、SysCache[PROCOID]或pg_proc查询一部分finfo信息

6、fmgr_info_C_lang加载.so文件并从中读取函数

7、FunctionCallInvoke得到函数地址

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
29天前
|
SQL 关系型数据库 PostgreSQL
把PostgreSQL的表导入SQLite
把PostgreSQL的表导入SQLite
19 0
|
6月前
|
SQL 关系型数据库 数据库
postgresql中连接两张表更新第三张表(updata)
如何结合两张表的数据来更新第三张表
70 0
|
8月前
|
存储 SQL 容灾
PolarDB-X 存储引擎核心技术 | Paxos多副本
PolarDB-X作为PolarDB分布式版,是阿里巴巴自主设计研发的高性能云原生分布式数据库产品,为用户提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。PolarDB-X在架构上可以简单分为CN节点和DN节点。计算节点CN负责SQL的解析和执行,存储节点DN负责数据的分布式事务和高可用存储。本文主要对存储引擎核心中高可用部分详细技术解读。
|
5月前
|
关系型数据库 数据库 PostgreSQL
postgresql | 数据库| 生成2000W条的简单测试表
postgresql | 数据库| 生成2000W条的简单测试表
27 0
|
7月前
|
存储 关系型数据库 Go
《深入PostgreSQL的存储引擎:原理与性能》
《深入PostgreSQL的存储引擎:原理与性能》
220 0
|
8月前
|
存储 关系型数据库 数据库
数据库内核那些事|PolarDB X-Engine:如何构建1/10成本的事务存储引擎?
X-Engine引擎是PolarDB为用户提供的低成本,高性价比的解决方案,LSM-tree分层存储结合标准zstd压缩,在性能和成本做到了很好的平衡。在标准sysbench场景下,存储空间相比InnoDB引擎减少60%,读写性能降低10-20%。
数据库内核那些事|PolarDB X-Engine:如何构建1/10成本的事务存储引擎?
|
8月前
|
关系型数据库 MySQL 分布式数据库
PolarDB MySQL从表回收站中恢复误删的表
PolarDB MySQL提供表回收站的功能,删除的表会被临时转移到表回收站,本案例教您从表回收站恢复误删的表。
223 0
|
10月前
|
关系型数据库 PostgreSQL
PostgreSQL表用户列最大个数
PostgreSQL表用户列最大个数
106 0
|
10月前
|
存储 关系型数据库 PostgreSQL
PostgreSQL表扫描方法解析
PostgreSQL表扫描方法解析
74 0
|
10月前
|
SQL Cloud Native 关系型数据库
ADBPG(AnalyticDB for PostgreSQL)是阿里云提供的一种云原生的大数据分析型数据库
ADBPG(AnalyticDB for PostgreSQL)是阿里云提供的一种云原生的大数据分析型数据库
758 1