备案控制台
探索云世界
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 正文

Flink设置checkpoint的保存目录，怎么设置HadoopHA的位置呀？每次启动Hadoop

Flink设置checkpoint的保存目录，怎么设置HadoopHA的位置呀？每次启动HadoopHA的时候，NameNode不一定是哪个主机 ae9c56073245eb9162afdaf1f5aa0348.png

展开
收起
爱喝咖啡嘿 2023-01-04 11:16:21 330 0
1 条回答
写回答
取消 提交回答
  • 范zzhaha

    只要hadoop集群启动了，不出现故障是不会随便切换主从的，还有就是高可用设置时候，我记得不直接指定主机nm了啊——该回答整理自钉群“【③群】Apache Flink China社区”

    2023-01-06 11:50:19
    赞同 展开评论 打赏
问答分类：
分布式计算 Hadoop 流计算 实时计算 Flink版
问答标签：
实时计算 Flink版设置 实时计算 Flink版checkpoint目录 实时计算 Flink版目录 hadoop目录 hadoop flink
问答地址：
开发者社区 > 大数据与机器学习 > 实时计算 Flink > 问答
相关产品：
实时计算 Flink版

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

相关问答
实时计算 Flink版
请教下Flink CDC 中，3.0提示这个怎么回事啊？
42
1
0
Flink CDC里是需要配置hadoop的环境变量这些吗？
36
1
0
flink 1.15.4 /tmp目录，看每天都会生成10多个flink-这个是什么情况呢？
67
1
0
Flink中appliction 模式怎么从 checkpoint 保存的地方 启动？
24
2
0
Flink CDC全量是要等读取完所有才能完成checkpoint吗？
26
1
0
Flink独立集群与hdfs集群不在一起，flink如何配置checkpoint目录为hdfs？
13
1
0
Flink的任务取消之后，检查点目录直接被删除了，该如何避免呢？
14
1
0
Flink CDC里 rocksdb 全量checkpoint开启了ttl，为什么文件还会增大？
53
3
0
Flink CDC里 一定要有dfs ？如果用linux本地目录呢？
20
0
0
把mysql-cdc的jar挂到/opt/flink/lib目录下提示找不到该连接器？
25
2
0
大数据与机器学习

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎，提高作业开发运维效率。

我要提问

相关产品

  • 实时计算 Flink版
    文档详情 产品详情

    • 热门讨论

    热门文章

  • FlinkCDC MySQL 中 scan.startup.mode 用的是什么模式啊？
    1631
  • flinkcdc3.0整库同步mysql的数据到starrocks中全量能过去增量过不去怎么排查？
    312
  • Caused by: org.apache.kafka.common.errors.TimeoutE
    2145
  • flink1.15启动后无法访问webui的问题有人遇到过吗
    9673
  • Flink1.17为什么需要JDK 11呢？JDK8我试了也能运行
    634
  • Flink CDC有遇见这个问题的吗？
    367
  • Flink这个未授权访问漏洞有什么解决方案吗？
    383
  • flink 1.18必须配套JDK11吗 1.8是不是不行了呢？
    793
  • Flink-CDC 文档网站地址是什么？
    18106
  • flink都是100%占用，请问是什么情况呢？
    401
    • 展开全部
  • 数据仓库介绍与实时数仓案例
    40073
  • 权威详解 | 阿里新一代实时计算引擎 Blink，每秒支持数十亿次计算
    22070
  • 独家专访阿里集团副总裁贾扬清：我为什么选择加入阿里巴巴？
    17087
  • 实时计算 Flink SQL 核心功能解密
    18529
  • Flink SQL 功能解密系列 —— 维表 JOIN 与异步优化
    26158
  • Flume+Kafka+Flink+Redis构建大数据实时处理系统：实时统计网站PV、UV展示
    21456
  • 阿里云实时计算产品案例&解决方案汇总
    24290
  • 流计算精品翻译: The Dataflow Model
    18524
  • 回顾 | Kafka x Flink Meetup 与世界人工智能大会大数据 AI 专场精彩回顾（附PPT下载）
    13627
  • Apache Flink 的迁移之路，2 年处理效果提升 5 倍
    9546
    • 展开全部

    相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
    125
    32
    去学习
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段
    180
    21
    去学习
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
    324
    9
    去学习
  • 大数据Hadoop快速入门
    3740
    18
    去学习
  • Hadoop快速入门
    2815
    39
    去学习
  • Hadoop企业优化及扩展案例
    350
    7
    去学习

    • 相关文章

  • 【Spark】Spark基础教程知识点
  • DataWorks操作报错合集之DataWorks ODPS数据同步后，timesramp遇到时区问题，解决方法是什么
  • InfluxDB的连续查询与数据聚合技术详解
  • 流计算引擎数据正确性的挑战
  • 【Python机器学习专栏】联邦学习：保护隐私的机器学习新趋势

    • 相关电子书

    更多
    • 《构建Hadoop生态批流一体的实时数仓》 立即下载
    零基础实现hadoop 迁移 MaxCompute 之 数据 立即下载
    CIO 指南:如何在SAP软件架构中使用Hadoop 立即下载

    相关实验场景

    更多
  • 搭建Hadoop环境
    11912
    1.0小时
    去实验
  • 使用PolarDB-X与Flink搭建实时数据大屏
    185
    1.0小时
    去实验
  • 使用Flink实时发现最热Github项目
    842
    1.0小时
    去实验
  • 5分钟上手Flink MySQL连接器
    227
    1.0小时
    去实验
  • 基于Flink+Tair搭建实时监控大屏
    37
    1.0小时
    去实验