开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

大佬们,请教个问题,下面问题是什么情况呀?

大佬们,请教个问题,使用了 RocksDB状态后端,状态使用了 MapState,如果在这个MapState存了大量的数据,比如十几个G的数据,那么在 遍历这个MapState的时候,是把这十几G的数据全部都读取到内存中吗?

展开
收起
圆葱猪肉包 2023-03-21 14:36:04 156 0
1 条回答
写回答
取消 提交回答
  • mapState,它每一个 key 在 rocksDB中都是一条单独的 key,磁盘 IO 的代价就会小很多。

    应该是跟Hbase差不多 key value形式吧 一般都不会全读取到内存吧。此回答整理自钉群“【③群】Apache Flink China社区”

    2023-03-21 15:58:11
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载