开发者社区> 问答> 正文

Spark程序中使用SQL语句加载数据文件并创建一个RDD的方法是什么?

Spark程序中使用SQL语句加载数据文件并创建一个RDD的方法是什么?

展开
收起
游客qzzytmszf3zhq 2021-12-09 20:11:19 493 0
1 条回答
写回答
取消 提交回答
  • scala> val yahoo_stocks =sc.textFile("hdfs://SZB-L0023776:8020/tmp/yahoo_stocks.csv")

    yahoo_stocks: org.apache.spark.rdd.RDD[String] =

    hdfs://SZB-L0023776:8020/tmp/yahoo_stocks.csv MapPartitionsRDD[2] at textFile at :30

    2021-12-09 20:11:36
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
SQL Server在电子商务中的应用与实践 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载