开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

我的一个sink操作很慢 火焰图显示 消耗主要集中在rocksdb的操作上 有啥调整思路吗

image.png

展开
收起
游客6vdkhpqtie2h2 2022-09-27 09:56:45 561 0
1 条回答
写回答
取消 提交回答
  • 你的状态数据很大是吗,你要不调整下rockdb 的刷写大小和刷写线程数,看能不能加快刷写,按你的火焰图,你的put 和get 的运行时长很长。state.backend.rocksdb.memory.partitioned-index-filters:true 看看开启分区索引后的效果(此答案整理自【③群】Apache Flink China社区)

    2022-09-27 10:16:38
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
图计算优化技术探索 立即下载
动态、高效,蚂蚁动态卡片的内核逻辑 立即下载
Quanta:Quora的HBase分层计数系统 立即下载