备案控制台

开发者社区 > 大数据与机器学习 > 正文

大佬有知道 Flink CDC怎么接入tdsql-postgresql 么也就是tbase？

大佬有知道 Flink CDC怎么接入tdsql-postgresql 么也就是tbase？

展开

收起

真的很搞笑 2023-06-04 18:49:27 115 0

1 条回答

写回答

取消提交回答

1941623231718325
- Flink CDC可以接入tdsql-postgresql，实现从tdsql-postgresql中实时读取数据变化，并将其转换为Flink表或流。具体的步骤如下：
  在tdsql-postgresql中开启逻辑复制功能，以便生成wal2json格式的二进制日志。
  在Flink中创建一个PostgreSQL CDC连接器，指定tdsql-postgresql的连接信息、数据库名、表名、用户名、密码等参数。
  在Flink中使用SQL或Table API对PostgreSQL CDC连接器进行操作，比如查询、过滤、转换、输出等。
2023-10-13 10:59:26

赞同 1 展开评论打赏

问答分类：

流计算云原生数据库 PolarDB 实时计算 Flink版

问答标签：

实时计算 Flink版CDC flink PostgreSQL 实时计算 Flink版postgresql cdc PostgreSQL 实时计算 Flink版cdc postgresql

问答地址：

开发者社区 > 大数据与机器学习 > 问答

相关产品：

实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

Flink CDC里请问下支持pgsql内核是TBase吗？

19

0

0

postgresql 只有部分字段权限Flink CDC 这个怎么同步呀？

2

0

0

flink-cdc读取 postgresql，从savepoint重启后一直报这个错误，为什么?

14

1

0

Flink支持postgresql整库同步到adb吗？

41

1

0

flink读写postgresql，任务状态为r时应该如何处理

16

0

0

用flink cdc去读取rds postgresql的日志突然就跑不通了，怎么回事？

34

3

0

Flink cdc同步postgresql的分区表支持？

44

1

0

Flink CDC里我现在想postgresql 能实时入库 hive，并且能实现断点续传，怎么办？

64

2

0

在Flink CDC项目中，我正在使用Flink PostgreSQL CDC功能是否支持断点续传？

79

2

0

各位大佬，请教一下，如果在flink cdc sql客户端使用SQL查询表，怎么能记录原系统的数据

1907

1

0

大数据与机器学习

大数据领域前沿技术分享与交流，这里不止有技术干货、学习心得、企业实践、社区活动，还有未来。

我要提问

相关产品

实时计算 Flink版

文档详情产品详情

热门讨论

热门文章

大数据计算MaxCompute实时同步之前需要ods建表，这几个字段是要建表的时候手动加上去吗？

数据来源：com.alibaba.fastjson.JSONException: syntax er

FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？

Flink sql将数组炸开，实现hive的explode函数的效果，还有什么其他好的方式？

幻兽帕鲁服务器搭建

dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？

DataWorks我该如何访问A项目安装了项目的package资源？

实验中 Elasticsearch、es kibana login 的默认用户和口令是什么？

DataWorks undefined requestID: undefined？

flink怎么能够快速消费kafka数据，需要设置什么参数呢？

展开全部

阿里云开源离线同步工具DataX3.0介绍

DataV 4.0 功能简介

数据库开放权限太危险，又不想写API。DataV给你另外一个选择。

大数据美食——寻找地图上的美味

阿里封神谈hadoop生态学习之路

【玩转数据系列十】利用阿里云机器学习在深度学习框架下实现智能图片分类

每个人都应该知道的25个大数据术语

你刚吃的兰州牛肉面，背后就藏着大数据

大数据环境下该如何优雅地设计数据分层

盘古：阿里云飞天分布式存储系统设计深度解析

展开全部

相关课程

更多

大数据Flink实时旅游平台环境篇 2020版

602

29

去学习

Apache Flink 入门到实战 - Flink开源社区出品

1591

16

去学习

实时计算 Flink 版产品入门与实操

3991

10

去学习

开源 Flink 极速上手教程

1845

7

去学习

大数据实时计算框架Spark快速入门

985

93

去学习

Apache Flink 入门

5076

9

去学习

相关电子书

更多

Flink CDC Meetup PPT - 龚中强 立即下载

Flink CDC Meetup PPT - 王赫 立即下载

Flink CDC Meetup PPT - 覃立辉 立即下载

相关实验场景

更多