PostgreSQL 11 preview - Logical replication support for TRUNCATE

本文涉及的产品
云数据库 RDS SQL Server,基础系列 2核4GB
RDS SQL Server Serverless,2-4RCU 50GB 3个月
推荐场景:
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介:

标签

PostgreSQL , 逻辑订阅 , TRUNCATE


背景

PostgreSQL 11 逻辑订阅支持insert, update, delete, truncate。

后期可能还会增加对DDL的支持,目前的DDL(包括对已有订阅表的结构修改,新增,删除表等操作)通过如下方法来支持:

《PostgreSQL 逻辑订阅 - DDL 订阅 实现方法》

支持TRUNCATE的PATCH如下

Logical replication support for TRUNCATE  
  
author	Peter Eisentraut <peter_e@gmx.net>	  
Sat, 7 Apr 2018 23:24:53 +0800 (11:24 -0400)  
committer	Peter Eisentraut <peter_e@gmx.net>	  
Sat, 7 Apr 2018 23:34:11 +0800 (11:34 -0400)  
commit	039eb6e92f20499ac36cc74f8a5cef7430b706f6  
tree	2cf52aeafb59917d5c7ed396acb6d86325b4a8b0	tree | snapshot  
parent	5dfd1e5a6696b271a2cdee54143fbc209c88c02f	commit | diff  
  
Logical replication support for TRUNCATE  
  
Update the built-in logical replication system to make use of the  
previously added logical decoding for TRUNCATE support.  Add the  
required truncate callback to pgoutput and a new logical replication  
protocol message.  
  
Publications get a new attribute to determine whether to replicate  
truncate actions.  When updating a publication via pg_dump from an older  
version, this is not set, thus preserving the previous behavior.  
  
Author: Simon Riggs <simon@2ndquadrant.com>  
Author: Marco Nenciarini <marco.nenciarini@2ndquadrant.it>  
Author: Peter Eisentraut <peter.eisentraut@2ndquadrant.com>  
Reviewed-by: Petr Jelinek <petr.jelinek@2ndquadrant.com>  
Reviewed-by: Andres Freund <andres@anarazel.de>  
Reviewed-by: Alvaro Herrera <alvherre@alvh.no-ip.org>  
WITH ( publication_parameter [= value] [, ... ] )  
  
This clause specifies optional parameters for a publication. The following parameters are supported:  
  
publish (string)  
  
This parameter determines which DML operations will be published by the new publication to the subscribers. The value is comma-separated list of operations. The allowed operations are insert, update, delete, and truncate. The default is to publish all actions, and so the default value for this option is 'insert, update, delete, truncate'.  
CREATE PUBLICATION insert_only FOR TABLE mydata  
    WITH (publish = 'insert');  
+                                         List of publications  
+        Name        |          Owner           | All tables | Inserts | Updates | Deletes | Truncates   
+--------------------+--------------------------+------------+---------+---------+---------+-----------  
+ testpib_ins_trunct | regress_publication_user | f          | t       | f       | f       | f  
+ testpub_default    | regress_publication_user | f          | f       | t       | f       | f  
 (2 rows)  
  
  
+                                         List of publications  
+        Name        |          Owner           | All tables | Inserts | Updates | Deletes | Truncates   
+--------------------+--------------------------+------------+---------+---------+---------+-----------  
+ testpib_ins_trunct | regress_publication_user | f          | t       | f       | f       | f  
+ testpub_default    | regress_publication_user | f          | t       | t       | t       | f  
 (2 rows)  
  
  
+                        Publication testpub_foralltables  
+          Owner           | All tables | Inserts | Updates | Deletes | Truncates   
+--------------------------+------------+---------+---------+---------+-----------  
+ regress_publication_user | t          | t       | t       | f       | f  
 (1 row)  
  
  
+                              Publication testpub3  
+          Owner           | All tables | Inserts | Updates | Deletes | Truncates   
+--------------------------+------------+---------+---------+---------+-----------  
+ regress_publication_user | f          | t       | t       | t       | t  
  
  
+                              Publication testpub4  
+          Owner           | All tables | Inserts | Updates | Deletes | Truncates   
+--------------------------+------------+---------+---------+---------+-----------  
+ regress_publication_user | f          | t       | t       | t       | t  

参考

https://git.postgresql.org/gitweb/?p=postgresql.git;a=commit;h=039eb6e92f20499ac36cc74f8a5cef7430b706f6

https://www.postgresql.org/docs/devel/static/sql-createpublication.html

https://www.postgresql.org/docs/devel/static/sql-alterpublication.html

相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系,提升产品性能,打磨产品功能,从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手,打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系, 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台,为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案,提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
目录
相关文章
|
5月前
|
分布式计算 DataWorks 关系型数据库
DataWorks操作报错合集之使用连接串模式新增PostgreSQL数据源时遇到了报错"not support data sync channel, error code: 0001",该怎么办
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
|
5月前
|
SQL 监控 关系型数据库
实时计算 Flink版操作报错合集之在设置监控PostgreSQL数据库时,将wal_level设置为logical,出现一些表更新和删除操作报错,怎么办
在使用实时计算Flink版过程中,可能会遇到各种错误,了解这些错误的原因及解决方法对于高效排错至关重要。针对具体问题,查看Flink的日志是关键,它们通常会提供更详细的错误信息和堆栈跟踪,有助于定位问题。此外,Flink社区文档和官方论坛也是寻求帮助的好去处。以下是一些常见的操作报错及其可能的原因与解决策略。
|
7月前
|
监控 关系型数据库 Java
SpringBoot【集成 01】Druid+Dynamic+Greenplum(实际上用的是PostgreSQL的驱动)及 dbType not support 问题处理(附hikari相关配置)
SpringBoot【集成 01】Druid+Dynamic+Greenplum(实际上用的是PostgreSQL的驱动)及 dbType not support 问题处理(附hikari相关配置)
359 0
|
存储 关系型数据库 数据库
How to Optimize PostgreSQL Logical Replication
How to Optimize PostgreSQL Logical Replication
142 0
How to Optimize PostgreSQL Logical Replication
|
SQL 关系型数据库 Java
PostgreSQL增量订阅方案:利用Logical Decoding订阅增量
PostgreSQL增量订阅方案:利用Logical Decoding订阅增量
1146 0
PostgreSQL增量订阅方案:利用Logical Decoding订阅增量
|
关系型数据库 数据库 SQL
PostgreSQL Logical Replication
限制及特性 1、只支持普通表生效,不支持序列、视图、物化视图、外部表、分区表和大对象 2、只支持普通表的DML(INSERT、UPDATE、DELETE)操作,不支持truncate、DDL操作 3、需要同步的表必须设置REPLICA IDENTITY 不能为noting(默认值是default).
8790 0
|
关系型数据库 流计算 PostgreSQL
|
流计算 关系型数据库 网络协议
|
关系型数据库 流计算 PostgreSQL

相关产品

  • 云原生数据库 PolarDB