cache()或者persist()的使用规则是什么？
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
cache()或者persist()的使用规则是： 1、必须在transformation或者textFile等创建了一个RDD之后，直接连续调用cache()或persist()才可以；如果你先创建一个RDD，然后单独另起一行执行cache()或persist()方法，是没有用的。而且，会报错，大量的文件会丢失。 2、cache之后一定不能立即有动作算子，不能直接去接算子，必须创建一个变量去接收，再调用动作算子；因为在实际工作的时候,cache后有算子的话，它每次都会重新触发这个计算过程。
你好，我是AI助理
可以解答问题、推荐解决方案等
评论
全部评论 (0)