开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink什么参数可以让多张表同时写入,而不是一张接一张写入?

Flink什么参数可以让多张表同时写入,而不是一张接一张写入?

展开
收起
三分钟热度的鱼 2024-03-20 14:46:19 133 0
2 条回答
写回答
取消 提交回答
  • Flink本身支持多流并行处理,不同的表可以对应不同的数据流,它们可以并行写入不同的目标。但在sink端,如需多张表同时写入一个数据库且不是按照顺序逐个写入,关键在于sink connector的设计以及并发写入的配置。例如,如果sink是JDBC connector,可以通过设置bulk.flush.max.actions等参数控制批量提交大小,间接影响写入并发度。

    2024-03-20 16:08:54
    赞同 展开评论 打赏
  • 您好
    1 给作业添加并发试下
    2 您server-id 这个参数是设置的单个数值还是一个区间,如果是单数值的话,给个区间试下,区间数值的个数需要大于并发数
    3 以上方法还是串行的话,作业链接麻烦提供下。此回答整理自钉群“实时计算Flink产品交流群”

    2024-03-20 14:58:21
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载