开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

关于Flink CDC,两个任务监控同一个mysql表,serverid改了,为啥还会报错重启?

关于Flink CDC,两个任务监控同一个mysql表,serverid改了,为啥还会报错重启?

展开
收起
wenti 2023-03-13 12:48:01 439 0
2 条回答
写回答
取消 提交回答
  • CSDN全栈领域优质创作者,万粉博主;InfoQ签约博主;华为云享专家;华为Iot专家;亚马逊人工智能自动驾驶(大众组)吉尼斯世界纪录获得者

    在Flink CDC中,如果两个任务(source和sink)监控同一个MySQL表,并且MySQL的server-id(也称为数据库ID)发生了变化,那么可能会导致一些问题。

    当server-id发生变化时,MySQL会重新分配一个新的server-id给连接。如果源任务和目标任务使用相同的server-id连接到MySQL数据库,那么它们之间的通信将会失败。因此,您需要确保源任务和目标任务使用的MySQL server-id是不同的。

    如果您已经确认了MySQL server-id没有变化,但仍然遇到重启问题,那么可能是由于其他原因导致的。例如,可能存在以下情况:

    1. 数据源或目标出现了故障或异常,导致任务无法正常运行。您可以检查任务的日志文件或监控指标来确定是否存在此类问题。

    2. Flink CDC插件版本不兼容或存在bug,导致任务无法正常工作。您可以尝试升级或降级Flink CDC插件版本,并重新启动任务以查看是否解决了问题。

    3. 数据库连接池配置不正确,导致连接超时或断开。您可以检查数据库连接池的配置参数,并根据需要进行调整。

    综上所述,如果您遇到了Flink CDC任务重启的问题,建议您先检查MySQL server-id是否正确设置,并检查任务的日志文件和监控指标以确定是否存在其他故障或异常。如果问题仍然存在,请尝试升级或降级Flink CDC插件版本,并检查数据库连接池的配置参数。

    2023-05-11 12:26:14
    赞同 展开评论 打赏
  • GitHub https://github.com/co63oc/cloud

    查看错误信息显示内容

    2023-03-15 08:22:13
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载