AI 助理
备案控制台
开发者社区 问答 正文

binlog直接入kafka，ack=all，retries=0

binlog直接入kafka时，默认配置ack=all，retries=0，这种方式在写消息出错时时如何处理的？写错误文件吗？

原提问者GitHub用户fightingsz

展开
收起
Java工程师 2023-05-03 16:02:36 123 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 巴拉巴拉巴拉

    com.alibaba.otter.canal.kafka.CanalKafkaProducer send(MQProperties.CanalDestination canalDestination, Message message, Callback callback) 从这个方法的源码来看,如果是有异常的话,就会走callback的rollback回滚方法,如果成功的话,就会走commit. 这二个方法应该是去修改记录mysql的binlog位置的. Canal: 1.3版本

    原回答者GitHub用户ruY9527

    2023-05-04 17:07:58
    赞同 展开评论
问答分类：
消息中间件 Kafka 云消息队列 Kafka 版 容器服务Kubernetes版
问答标签：
kafka容器服务Kubernetes版 binlog kafka binlog云消息队列 Kafka 版 云消息队列 Kafka 版binlog 云消息队列 Kafka 版retries
问答地址：
开发者社区 > 微服务 > 问答
相关问答
Flink tidb 能吧 类似binlog 的变化 自己发到kafka 吗？
99
2
0
flinkcdc读取binlog后，是直接写入hive，还是先到kafka，写入hive呢？
192
2
0
解读一下这段配置 kafka: listener: ack-mode: manual_immedia
106
0
0
flink cdc采集binlog到kafka极限是多少呀？多并行度，能提升采集性能吗？
181
2
0
如果要将数据实时增量采集到kafka，ob有类似MySQL的binlog的东西吗？
122
2
0
binlog到kafka，进行压测，有部分数据延迟在一秒以上，这是获取日志慢，还是发送kafka慢？
133
0
0
有一个问题，我可以如何确认Flink CDC任务消费 binlog 的延迟呢？就像 kafka 的
190
1
0
请问flink cdc 有没有办法，通过sql的方式，将整库的binlog写到kafka呢？
130
1
0
容器服务ACK集群Pod申请CPU资源失败
95
1
0
容器服务ACK pod有很多服务需要以内网IP+端口对非k8s集群内部对内网开放？
104
1
0