开发者社区> 问答> 正文

Spark程序中使用SQL语句加载数据文件并创建一个RDD的方法是什么?

Spark程序中使用SQL语句加载数据文件并创建一个RDD的方法是什么?

展开
收起
游客qzzytmszf3zhq 2021-12-09 20:11:19 513 0
1 条回答
写回答
取消 提交回答
  • scala> val yahoo_stocks =sc.textFile("hdfs://SZB-L0023776:8020/tmp/yahoo_stocks.csv")

    yahoo_stocks: org.apache.spark.rdd.RDD[String] =

    hdfs://SZB-L0023776:8020/tmp/yahoo_stocks.csv MapPartitionsRDD[2] at textFile at :30

    2021-12-09 20:11:36
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
PolarDB NL2SQL: 帮助您写出准确、优化的SQL 立即下载
基于 Flink SQL + Paimon 构建流式湖仓新方 立即下载
SQL智能诊断优化产品SQLess蚂蚁最佳实践 立即下载