开发者社区> 问答> 正文

SQL clinet端,checkpoint 恢复执行

版本:flink1.13

运行: flink sql

源表: 基于kafka建表

处理逻辑:简单过滤输出到hive

问题:

每1分钟做一次checkpoint,然后由于某原因需要取消任务,再次运行job如何继续从最新的checkpoint继续处理,在客户端设置了参数:

execution.savepoint.path=hdfs:///user/flink/checkpoints/68e103c6ec9d8bfe459cb6c329ec696c

execution.checkpoint.path=hdfs:///user/flink/checkpoints/68e103c6ec9d8bfe459cb6c329ec696c

重新 运行后依然是从开始消费处理,未从checkpoint恢复执行

从 Windows 版邮件https://go.microsoft.com/fwlink/?LinkId=550986发送*来自志愿者整理的flink邮件归档

展开
收起
moonlightdisco 2021-12-02 17:14:29 805 0
1 条回答
写回答
取消 提交回答
  • execution.checkpoint.path 这个参数不存在,只有

    execution.savepoint.path。另外是通过什么方式设置参数的呢?是写在 flink-conf.yaml 里吗?还是通过 SET 语句?*来自志愿者整理的FLINK邮件归档

    2021-12-02 17:41:14
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
SQL Server在电子商务中的应用与实践 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载