Spark中的获取RDD的方法有什么?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文
阿里云
为了无法计算的价值
打开APP
阿里云APP内打开

Spark中的获取RDD的方法有什么?

2021-12-10 14:06:29 266 1

Spark中的获取RDD的方法有什么?

取消 提交回答
全部回答(1)
  • 游客daliwbfb2wo66
    2021-12-10 14:07:09

    1.从共享的文件系统获取,(如:HDFS)

    2.通过已存在的RDD转换

    3.将已存在scala集合(只要是Seq对象)并行化 ,通过调用SparkContext的parallelize方法实现

    4.改变现有RDD的持久性,RDD是懒散,短暂的。(RDD的固化:cache缓存至内错;save保存到分布式文件系统)

    0 0
相关问答

1

回答

spark中的RDD的特性是什么?

2021-12-07 06:48:49 370浏览量 回答数 1

1

回答

spark中的RDD有什么特性?

2021-12-06 23:27:50 117浏览量 回答数 1

1

回答

Spark Streaming 原理是什么?

2022-01-13 15:54:26 1113浏览量 回答数 1

1

回答

Spark Streaming中的DStream的输出操作是什么?

2021-12-07 20:17:49 129浏览量 回答数 1

1

回答

Spark Streaming中的DStream的转化操作是什么?

2021-12-07 20:17:05 107浏览量 回答数 1

1

回答

spark streaming中的foreachRDD(func)方法是什么?

2021-12-07 08:05:05 287浏览量 回答数 1

1

回答

spark streaming是怎么收集和处理数据的?

2021-12-07 22:52:45 109浏览量 回答数 1

1

回答

使用Spark Streaming SQL进行 PV/UV统计的准备工作?

2020-12-28 11:39:00 409浏览量 回答数 1

1

回答

如何使用Spark Streaming SQL进行 PV/UV统计?

2020-12-28 11:38:30 475浏览量 回答数 1

1

回答

spark streaming实时程序 进程总是运行三四个小时左右不知道原因挂掉

2019-12-20 21:25:15 861浏览量 回答数 1
0
文章
4805
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载