开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC中mysql cdc 的那个server_id 设置的话,一般是怎么设置的?

Flink CDC中mysql cdc 的那个server_id 设置的话,一般是怎么设置的来,我设置 44200 报超出范围了,这个的设置范围不太了解?image.png

展开
收起
真的很搞笑 2023-12-01 11:16:33 937 0
5 条回答
写回答
取消 提交回答
  • 可以设置范围。
    build.serverId("6400-8400")
    往下翻源码可以看到。他是有获取个随机值。
    ServerIdRange(int,int)方法。
    如果传一个比如5400.方法传入是ServerIdRange(5400,5400).如果传范围的话比如写(6400-8400)。方法ServerIdRange(6400,8400)。随机取一个。
    image.png

    2024-07-01 11:15:15
    赞同 展开评论 打赏
  • 在 Flink CDC 中,MySQL CDC 的 server_id 参数用于标识 MySQL 服务器的唯一 ID。通常情况下,这个值是一个介于 1 和 4294967295 之间的整数。

    如果你设置的 server_id 为 44200,超出了这个范围,那么就会出现超出范围的错误。你可以尝试将 server_id 设置为一个在这个范围内的值,例如:

    BinlogSource.<String>builder()
        .hostname("localhost")
        .port(3306)
        .database("mydb")
        .table("mytable")
        .username("root")
        .password("password")
        .serverId(4294967294L) // 将 server_id 设置为一个在范围内的值
        .deserializer(new StringDebeziumDeserializationSchema())
        .build();
    

    注意,这里的 serverId 类型是 Long,因为 server_id 是一个大于等于 4 位数的整数。

    2023-12-02 15:41:32
    赞同 展开评论 打赏
  • 在 Flink CDC 中使用 MySQL CDC 进行数据同步时,需要设置 server_id 参数来唯一标识 MySQL 实例。下面是一些常见的设置方法:

    1. 随机生成:可以生成一个随机的 server_id 值,确保每个 MySQL 实例都有不同的值。可以使用以下语句生成一个 4 字节的随机整数:

      SELECT FLOOR(RAND() * POWER(2, 32)) AS server_id;
      
    2. 手动指定:手动指定一个唯一的 server_id 值。确保每个 MySQL 实例都使用不同的值,范围为 1 到 2^32-1。

    3. 使用 IP 地址:将 MySQL 实例的 IP 地址转换为整数,并用作 server_id 值。这样可以确保每个实例都有不同的 server_id,但需要注意当 IP 地址发生变化时,可能需要更新相应的 server_id

    无论您选择哪种方法,都要确保每个 MySQL 实例的 server_id 值是唯一的,以避免冲突和数据同步问题。

    在配置 Flink CDC 的 MySQL CDC 连接参数时,将所选的 server_id 值传递给 debezium.snapshot.server-id 参数即可,例如:

    database.server.name: my-server
    debezium.snapshot.server-id: 12345678
    
    2023-12-02 10:05:10
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    在 Flink CDC 中,MySQL CDC 的 server_id 设置是用于区分不同数据源实例的标识。这个值应该是一个唯一的整数,并且在同一网络环境中不能重复。

    要设置 MySQL CDC 的 server_id,请遵循以下步骤:

    1. 确定当前已分配的 server-id
      • 登录到您的 MySQL 数据库。
      • 运行命令 SHOW VARIABLES LIKE 'server_id' 来查看当前数据库的 server_id
    2. 选择一个新的 server-id
      • 根据已经分配的 server_id 选择一个尚未使用的唯一整数作为新的 server-id
    3. 配置 Flink CDC
      • 在 Flink CDC 配置文件中(例如 mysql-cdc.properties),将 server-id 设置为所选的唯一整数值。
      • 如果您使用的是 SQL API,可以在创建 source 表的时候指定 server_id 属性,如:CREATE TABLE ... WITH ('connector' = '...', 'server-id' = <your_unique_server_id>).
    2023-12-01 17:10:14
    赞同 展开评论 打赏
  • image.png
    ,此回答整理自钉群“Flink CDC 社区”

    2023-12-01 11:44:51
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关镜像