AI 助理
备案控制台登录注册
开发者社区 问答 正文

关于读取 binlog position 延迟问题

线上运行 canal 时候 出现读取日志延迟问题 我们是采用 canal 官方的kafka 模式 机器配置：4C 8G

提问205.png

提问206.png

监控指标如下：

提问207.png

读取日志延迟随着时间的变长延迟会越来越大 canal 的速度追不上日志 线上运行了3周都好好的今天突然出现这个问题，请问这种情况有什么解决办法吗，是我们canal 机器配置不高吗，我们每秒最多产生 1W条操作语句。

原提问者GitHub用户Suaron-Biliu

展开
收起
数据大拿 2023-05-04 10:32:09 105 发布于北京 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 巴拉巴拉巴拉

    1.1.5对于MQ发送有比较大的性能提升

    原回答者GitHub用户agapple

    2023-05-04 18:09:18 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
canal 消息中间件 监控 Kafka 云消息队列 Kafka 版 日志服务
问答标签：
binlog position binlog延迟
问答地址：
开发者社区 > 微服务 > 问答
相关问答
flink-cdc 增量解析binlog 阶段 业务延迟20小时，解析一分钟才几十条记录 这啥情况？
95
2
0
canal的zookeeper里的cursor不更新binlog position
111
0
0
RDS如何查看备份时候binlog的position或GTID
74
1
0
flinkcdc阿里云里面读mysql binlog 单表数据5000条延迟一个小时这个是什么原因？
67
0
0
flinkcdc里面有反应同步binlog 延迟的metrics吗？
58
1
0
Flink CDC增量只能是1,但是binlog数量很大 延迟到小时级别 有什么建议吗？
100
2
0
otter的经常性断开并重连，binlog位点有更新，但是延迟递增。
102
1
0
binlog到kafka，进行压测，有部分数据延迟在一秒以上，这是获取日志慢，还是发送kafka慢？
96
0
0
有一个问题，我可以如何确认Flink CDC任务消费 binlog 的延迟呢？就像 kafka 的
158
1
0
deployer 读取binlog延迟
57
1
0
AI助理

你好，我是AI助理

可以解答问题、推荐解决方案等