备案控制台

开发者社区

开发者社区 > 大数据与机器学习 > 正文

Flink CDC 中mysql全量加增量，表有几十亿条记录，我想把并行度调低一点，有问题吗？调高了

Flink CDC 中mysql全量加增量，表有几十亿条记录，我想把并行度调低一点，有问题吗？调高了怕影响生产？

展开

收起

cuicuicuic 2023-05-14 20:13:57 88 0

1 条回答

写回答

取消提交回答

xin在这

完整日志？有配置参数可以配么？这是无锁的，不知道0.14能不能支持，此回答整理自钉群“Flink CDC 社区”

2023-05-14 20:21:04

赞同展开评论打赏

问答分类：

关系型数据库 MySQL 流计算云数据库 RDS MySQL 版实时计算 Flink版

问答标签：

cdc云数据库 RDS MySQL 版 flink云数据库 RDS MySQL 版实时计算 Flink版cdc mysql 云数据库 RDS MySQL 版flink 云数据库 RDS MySQL 版cdc

问答地址：

开发者社区 > 大数据与机器学习 > 问答

相关产品：

实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答

有遇到过flinkcdc拉取不到mysql的数据吗，表有数据，但是设置了ssl也是获取不到数？

42

1

0

Flink CDC 里mysql 表有个time类型的字段同步到Doris的时候出现这个问题怎么办？

37

1

0

flink mysql cdc 同一个账号多个任务在用同一张表有影响吗？

37

1

0

mysql表有中文时，使用canal-developer-1.1.3传输到kafka 的消息中中文是

100

2

0

各位大佬们，请教下如果mysql表有多个host，需要建多张表才能用cdc吗？

378

1

0

各位大佬，请教一下，如果在flink cdc sql客户端使用SQL查询表，怎么能记录原系统的数据

1850

1

0

那cdc最新版支持到flink的哪个版本，flink1.15还有guava兼容性问题吗？

965

0

0

flink1.13.5 mysql-cdc-2.2.0 mysql 5.6 一次同步90w数据后不同

239

0

0

flink cdc 抽MySQL数据，一开始抽一张表，checkpoint成功了，后面加了一张表，然

2003

2

0

各位大佬才接触flink 麻烦问一下我用mysql cdc 和sqlserver cdc的数据

1035

0

0

大数据与机器学习

大数据领域前沿技术分享与交流，这里不止有技术干货、学习心得、企业实践、社区活动，还有未来。

我要提问

相关产品

实时计算 Flink版

文档详情产品详情

热门讨论

热门文章

flinkcdc3.0整库同步mysql的数据到starrocks中全量能过去增量过不去怎么排查？

幻兽帕鲁服务器搭建

数据服务报429请求次数过多咋办呀

如何高效的往交互建模（dsw）上传较大的文件，有从阿里云盘中直接下载或类似的方法吗？

FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？

数据来源：com.alibaba.fastjson.JSONException: syntax er

DataWorks中HBase Reader使用限制是什么？

大数据计算MaxCompute钉钉机器人发报警webhook调用量到上限了，这个怎么处理？

MaxCompute中执行SQL报错ODPS-0130071

Flink-CDC 文档网站地址是什么？

展开全部

阿里巴巴飞天大数据平台MaxCompute（原名ODPS）全套攻略（持续更新20200109）

阿里云开源离线同步工具DataX3.0介绍

大数据环境下该如何优雅地设计数据分层

拍立淘-以图搜图中的图像搜索算法

MaxCompute 近实时增全量处理一体化新架构和使用场景介绍

优酷背后的大数据秘密

OPPO数据中台之基石：基于Flink SQL构建实数据仓库

【玩转数据系列十五】机器学习PAI为你自动写歌词，妈妈再也不用担心我的freestyle了（提供数据、代码）

【玩转数据系列六】文本分析算法实现新闻自动分类

展开全部

相关课程

更多

实时计算 Flink 版产品入门与实操

3806

10

去学习

开源 Flink 极速上手教程

1752

7

去学习

大数据实时计算框架Spark快速入门

778

93

去学习

Apache Flink 入门

4826

9

去学习

相关电子书

更多

Flink CDC Meetup PPT - 龚中强 立即下载

Flink CDC Meetup PPT - 王赫 立即下载

Flink CDC Meetup PPT - 覃立辉 立即下载

相关实验场景

更多