开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink的Mysql Catalog未来会考虑源表批读吗?

Flink的Mysql Catalog未来会考虑源表批读吗?lQLPJwIVuJ_F8XfNA5XNA4ew_8ophKqv9hcGpZqzbeWwAA_903_917.png

展开
收起
三分钟热度的鱼 2024-08-21 19:04:14 54 0
1 条回答
写回答
取消 提交回答
  • 使用MySQL Catalog
    从MySQL源表中读取数据。

    INSERT INTO ${other_sink_table}
    SELECT ...
    FROM ${mysql_catalog}.${db_name}.${table_name} /+ OPTIONS('server-id'='6000-6018') /;
    说明
    在使用MySQL Catalog中的表时,可以通过Table Hints语法给表指定MySQL数据库服务器时区参数。例如mycatalog.mytable /+ OPTIONS('server-time-zone'='Asia/Shanghai') /。

    如果将MySQL Catalog作为MySQL CDC源表,建议使用Table Hints来为作业指定不同的 server-id。如果源表需要多并发读取,server-id还需要配置成范围格式,范围中的server-id个数需要大于等于并发度。例如mycatalog.mytable /+ OPTIONS('server-time-zone'='Asia/Shanghai', 'server-id' = '6000-6008') /。
    image.png

    参考文档https://help.aliyun.com/zh/flink/user-guide/manage-mysql-catalogs

    2024-08-23 08:56:13
    赞同 7 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载

    相关镜像