开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink CDC这个Managed Memory这个内存是干嘛的吗?

Flink CDC这个Managed Memory这个内存是干嘛的吗?image.png
一直为0,我设置的是rocksdbimage.png
设置的不对,大佬,帮我看下?

展开
收起
真的很搞笑 2023-12-05 20:30:50 116 0
2 条回答
写回答
取消 提交回答
  • 托管内存,状态是 rocksdb 就 不是0 了,托管内存,用在状态上面的,默认应该是tm除jvm相关的0.4,你要是没用状态,可以把这个改小 ,此回答整理自钉群“Flink CDC 社区”

    2023-12-06 13:42:22
    赞同 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    Flink CDC的Managed Memory是由Flink负责分配和管理的本地(堆外)内存。在流处理作业中,Managed Memory可以用于RocksDB State Backend、排序、哈希表以及缓存中间结果等场景。此外,托管内存也可以用于在Python进程中执行用户自定义函数。

    Flink的总内存由多个部分组成,包括Total Flink Memory,Framework Heap,Task off-heap memory,Managed Memory和Network Memory。具体来说,可以通过taskmanager.memory.managed.size明确指定托管内存的大小,也可以通过taskmanager.memory.managed.fraction指定其在Flink总内存中的占比。如果同时指定了这两者,会优先采用指定的大小。若二者均未指定,会根据默认占比进行计算。

    2023-12-05 20:55:04
    赞同 展开评论 打赏

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

相关产品

  • 实时计算 Flink版
  • 相关电子书

    更多
    Flink CDC Meetup PPT - 龚中强 立即下载
    Flink CDC Meetup PPT - 王赫 立即下载
    Flink CDC Meetup PPT - 覃立辉 立即下载