AI 助理
备案控制台
开发者社区 问答 正文

canal同步binlog到kafka对于数据写入有什么方式可以加快呢？目前写入好像在1k TPS就

canal同步binlog到kafka对于数据写入有什么方式可以加快呢？目前写入好像在1k TPS就达到瓶颈了

原提问者GitHub用户tsywkGo

展开
收起
山海行 2023-04-27 20:11:02 158 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 解决问题123

    建议试试1.1.5版本，wiki里有MQ的peformance说明

    原回答者GitHub用户agapple

    2023-04-28 14:41:34
    赞同 展开评论
问答分类：
消息中间件 canal Kafka 云消息队列 Kafka 版
问答标签：
云消息队列 Kafka 版数据 binlog数据 binlog同步 canal binlog 同步binlog
问答地址：
开发者社区 > 微服务 > 问答
相关问答
canal -adapter只能适配mysql库binlog_format=row模式？
141
1
0
canal server在同步binlog日志的时候表结构发生变化改怎么处理？
320
3
0
flink cdc datastream方式同步mysql数据到kafka，多分区怎么保证有序性？
123
1
0
阿里云实时计算flink，cdc同步数据到kafka，cdas、ctas都失败，大家有遇到吗？
79
1
0
flinksql cdc 是不是只有从mysql同步到kafka 才能截取到这个字段？
96
1
0
如果用flinksql的方式同步mysql数据到kafka，是类似DTS那样吗？
93
1
0
在Flink CDC中，用pipeline 连接器 同步mysql数据到kafka报错了，缺少什么？
143
1
0
有大佬知道这是怎么回事么 flink读不到kafka数据
1199
1
0
请问下当flink集群重启之后 kafka消息还是重复 有什么办法解决吗 kafka sink 已设
1173
4
0
麻烦问一下，我们现在的架构是希望数据统一从 Kafka 中出，但是又想用 Flink CDC，请问
1108
1
0