开发者社区 问答 正文

如何设置流式数据checkpoint的周期 ?

如何设置流式数据checkpoint的周期 ?

展开
收起
芯在这 2021-12-06 01:04:15 293 分享 版权
1 条回答
写回答
取消 提交回答
  • 对于一个需要做checkpoint的DStream结构,可以通过调用DStream.checkpoint(checkpointInterval)来设置ckeckpoint的周期,经验上一般将这个checkpoint周期设置成batch周期的5至10倍。

    2021-12-06 01:04:27
    赞同 展开评论
问答地址: