开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink这种类型的作业有什么好建议吗?

Flink这种类型的作业有什么好建议吗?消费速度跟不上生产,目前资源也消耗的比较高该作业为读取kakfa数据,一条大约10MB,写入hologres,同时与两张小维表进行关联lQLPJxfI6i7QOf_NBE7NBdawwzO9nQudP5sGpFiBeN_AAQ_1494_1102.png
lQLPJx4SuGwQ2f_NASPNBCiwpCSJpoMA_dUGpFiBeN_AAA_1064_291.png

展开
收起
三分钟热度的鱼 2024-08-21 19:04:14 42 0
1 条回答
写回答
取消 提交回答
  • 1、增加资源,加大并发
    2、可以开启holo的批写入
    3、应该可以采用广播流方式,将维表数据预加载。此回答整理自钉群“实时计算Flink产品公有云外部客户交流群”

    2024-08-21 20:33:45
    赞同 9 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载