spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解(java、python、r和scala)之环境准备(图文详解)

简介:

关于下载,这两个spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包不多赘述。

http://archive.apache.org/dist/spark/spark-1.6.1/spark-1.6.1-bin-hadoop2.6.tgz

http://archive.apache.org/dist/spark/spark-2.2.0/spark-2.2.0-bin-hadoop2.6.tgz

 

 

  我是解压在D:\SoftWare方便为了导入其中的所需jar包

 

 

 

 

这里,我是在Scala IDEA for Eclipse里,手动来构建spark-1.6.1-bin-hadoop2.6和spark-2.2.0-bin-hadoop2.6发行包的scala代码环境

 

 

 

 

 

 

 

 

 

这里,我是在Scala IDEA for Eclipse里,手动来构建spark-1.6.1-bin-hadoop2.6发行包的java代码环境

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

  D:\SoftWare\spark-1.6.1-bin-hadoop2.6\lib下的所有

 

 

 

 

 

 

 

 

 

  

  zhouls.bigdata.Basic、zhouls.bigdata.sql、zhouls.bigdata.streaming、zhouls.bigdata.ml、zhouls.bigdata.mllib

 

 

 

  然后,再分别复制进去,不多说。

 

 

 

 

 

 

 

 

 

 

 

这里,我是在Scala IDEA for Eclipse里,手动来构建java代码环境

 D:\SoftWare\spark-2.2.0-bin-hadoop2.6\jars

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

zhouls.bigdata.Basic、zhouls.bigdata.sql、zhouls.bigdata.streaming、zhouls.bigdata.ml、zhouls.bigdata.mllib

 

 

 

 

   成功!


本文转自大数据躺过的坑博客园博客,原文链接:http://www.cnblogs.com/zlslch/p/7454674.html,如需转载请自行联系原作者

相关文章
|
3月前
|
人工智能 安全 Java
Java和Python在企业中的应用情况
Java和Python在企业中的应用情况
108 7
|
3月前
|
Java 程序员 开发工具
在比较Java和Python哪个更易学
在比较Java和Python哪个更易学
52 4
|
3月前
|
Java 程序员 Python
Java和Python
Java和Python
35 2
|
3月前
|
机器学习/深度学习 人工智能 自然语言处理
比较Python和Java哪个更好
比较Python和Java哪个更好
95 5
|
4月前
|
分布式计算 Hadoop 大数据
大数据体系知识学习(一):PySpark和Hadoop环境的搭建与测试
这篇文章是关于大数据体系知识学习的,主要介绍了Apache Spark的基本概念、特点、组件,以及如何安装配置Java、PySpark和Hadoop环境。文章还提供了详细的安装步骤和测试代码,帮助读者搭建和测试大数据环境。
124 1
|
4月前
|
Java Python
如何通过Java程序调用python脚本
如何通过Java程序调用python脚本
62 0
|
4月前
|
安全 Java Python
基于python-django的Java网站全站漏洞检测系统
基于python-django的Java网站全站漏洞检测系统
51 0
|
4月前
|
数据采集 缓存 Java
Python vs Java:爬虫任务中的效率比较
Python vs Java:爬虫任务中的效率比较
|
4月前
|
存储 SQL 消息中间件
Hadoop-26 ZooKeeper集群 3台云服务器 基础概念简介与环境的配置使用 架构组成 分布式协调框架 Leader Follower Observer
Hadoop-26 ZooKeeper集群 3台云服务器 基础概念简介与环境的配置使用 架构组成 分布式协调框架 Leader Follower Observer
72 0
|
分布式计算 Java 关系型数据库
云栖社区2019年1月技术活动:PG, Java,Spark等30+场预告【持续更新】
云栖社区月度技术活动预告:技术直播、系列公开课、Meetup、峰会、钉群分享等。欢迎分享给更多开发者。
9322 0
云栖社区2019年1月技术活动:PG, Java,Spark等30+场预告【持续更新】

热门文章

最新文章

推荐镜像

更多