AI 助理
备案控制台
开发者社区 问答 正文

各位大佬，flink state mapstate 保存数据100g 采用rocksdb增量更新 job 任务运行一段时间就死了。磁盘采用非ssd 。对于large state value 任务 有什么好的建议。

各位大佬，flink state mapstate 保存数据100g 采用rocksdb增量更新 job 任务运行一段时间就死了。磁盘采用非ssd 。对于large state value 任务 有什么好的建议。

展开
收起
flink小助手 2018-11-23 11:44:23 5118 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • cyanide147

    请问lz解决了吗，遇到了同样的问题

    2021-08-16 16:24:48
    赞同 展开评论
问答分类：
固态存储 流计算 实时计算 Flink版
问答标签：
实时计算 Flink版任务 实时计算 Flink版数据 实时计算 Flink版rocksdb 实时计算 Flink版job 实时计算 Flink版增量
问答地址：
开发者社区 > 大数据 > 问答
相关问答
Flink-CDC 2.4.0版本增量快照模式不生效
139
1
0
如何实现 Flink CDC 中全量和增量日志的并行读取？
166
1
0
Flink mysql的5.6版本的备库不支持做增量的实时同步么？
56
0
0
在Flink CDC中，我加了那个参数，初始化拉取的时候是返回了clob类型的数据，增量变更数据？
119
0
0
在Flink CDC中，api的checkpoint就会出现失败，等增量快照结束就恢复正常？
74
0
0
在Flink CDC中增量快照阶段checkpoint失败有啥排查方式吗？
84
1
0
Flink任务的jar包打的是最小包，如何指定这个本地磁盘lib目录，能有效加载这些依赖包呢？
181
1
0
在Flink CDC中启动两个表数据库端磁盘读速率 40M/s ，请问这个有参数可以限制吗？
71
1
0
各位大佬，请教一下，如果在flink cdc sql客户端 使用SQL查询表，怎么能记录原系统的数据
2076
1
0
那cdc最新版支持到flink的哪个版本，flink1.15还有guava兼容性问题吗？
1203
0
0