开发者社区> 问答> 正文

spark中避免创建重复的RDD该怎么做?

spark中避免创建重复的RDD该怎么做?

展开
收起
游客ahv54x37wvm7u 2021-12-07 20:27:51 420 0
1 条回答
写回答
取消 提交回答
  • 需要对名为“hello.txt”的HDFS文件进行一次map操作,再进行一次reduce操作。也就是说,需要对一份数据执行两次算子操作。

    2021-12-07 20:28:05
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载