AI 助理
备案控制台
开发者社区 大数据与机器学习 实时计算 Flink 正文

打扰下，请教个问题，checkpoint 使用file://存储在本地磁盘时，flink集群中tas

打扰下，请教个问题，checkpoint 使用file://存储在本地磁盘时，flink集群中taskmanager和jobmanager所在的节点都会储存checkpoint 信息，这个是jobmanager保存的是一份完整的，taskmanager存自己的一部分嘛，没找到相关资料，有大佬做过本地存储的嘛

展开
收起
游客3oewgrzrf6o5c 2022-08-05 14:18:00 1937 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客bcfx2q4kttgbm

    你是rockdb嘛。。。fs的状态tm是在内存的，check时刷到本地，jm记录的是tm的状态信息，即check的元数据（此答案整理自Flink CDC 社区）

    2022-08-05 14:40:52
    赞同 展开评论
问答分类：
存储 流计算 实时计算 Flink版
问答标签：
实时计算 Flink版checkpoint 实时计算 Flink版集群 实时计算 Flink版存储 checkpoint实时计算 Flink版 存储实时计算 Flink版
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关问答
实时计算 Flink版
Flink DLF Catalog是否支持HDFS存储
85
1
0
在Flink Table Store中，哪些操作适合在Service中进行，哪些适合在湖存储中进行？
74
1
0
在Flink CDC中，pgsqlcdc 导致数据库服务器存储满了 怎么解决？
100
1
0
Pravega流批一体的存储设计如何与Flink的发展方向相契合？
80
1
0
Flink任务的jar包打的是最小包，如何指定这个本地磁盘lib目录，能有效加载这些依赖包呢？
178
1
0
Flink MySQL cdc 同步时状态存储的是全表的数据吗？
103
4
0
在Flink CDC中启动两个表数据库端磁盘读速率 40M/s ，请问这个有参数可以限制吗？
71
1
0
在Flink CDC中读取oracle 数据库端反馈磁盘io读的很高 请问这个应该如何解决？
131
0
0
Flink下游存储存在性能瓶颈如何优化
78
1
0
Flink中OSS是会存储什么数据
66
1
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问
收录在圈子:
阿里云实时计算Flink
199212
+ 订阅
实时计算 Flink 版（Alibaba Cloud Realtime Compute for Apache Flink，Powered by Ververica）是阿里云基于 Apache Flink 构建的企业级、高性能实时大数据处理系统，由 Apache Flink 创始团队官方出品，拥有全球统一商业化品牌，完全兼容开源 Flink API，提供丰富的企业级增值功能。

相关文章

  • 零代码2小时搭建一套轻量级ERP系统
  • 从“字”到“画”：基于Elasticsearch Serverless 的多模态商品搜索实践
  • WordPress果果文件优化插件
  • RFID助力电力巡检迈向新时代

    • 热门讨论

    热门文章

  • Flink CDC任务从savepoint/checkpoints状态中恢复作业错误问题
  • flink的1cu是指1cpu还是1cpu+4g存储？
  • 请问如何用flink sql客户端用yarn application模式提交任务呢？
  • 请问下大家有没有遇到过这个错:Caused by: java.lang.ClassNotFoundE
  • Flink-CDC 文档网站地址是什么？
  • 在斗鱼，实时计算发展的历程如何？
  • 2018spark技术问答集锦，希望能给喜欢spark的同学一些帮助
  • 请问flink-connector-jdbc在sink时，如何设置批量写入？
  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
  • Flink获取消费kafka的时候始终获取不到topic列表是啥原因啊？
    • 展开全部
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
  • 阿里云实时计算产品案例&解决方案汇总
  • 流计算精品翻译: The Dataflow Model
  • Apache Flink 的迁移之路，2 年处理效果提升 5 倍
  • Flink Checkpoint 问题排查实用指南
  • Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析
  • 如何正确使用 Flink Connector？
  • Apache Flink 漫谈系列(04) - State
  • Flink SQL 功能解密系列 —— 数据去重的技巧和思考
  • 使用 Kafka 和 Flink 构建实时数据处理系统
    • 展开全部
    还有其他疑问?
    咨询AI助理