开发者社区 问答 正文

Driver 进程宕机解决方案是什么?

Driver 进程宕机解决方案是什么?

展开
收起
芯在这 2021-12-08 21:42:42 261 分享 版权
1 条回答
写回答
取消 提交回答
  • 监控机器机器是否存活,如果机器宕机,重启服务机器和 spark 集群

    通过 spark job 的 history 服务监控应用是否执行成功,如果执行失败,通过开发人员重启服务即可

    SparkStreaming 中,重启spark应用后,可通过 checkpoint 进行job数据恢复

    2021-12-08 21:42:57
    赞同 展开评论
问答标签:
问答地址: