spark环境搭建(idea版本)

简介: spark环境搭建(idea版本)

环境需求

环境:win10


开发工具:IntelliJ IDEA 2021.2


maven版本:3.6.3


正文


image.png

创建【maven】空项目的步骤我就省略了啊。直接进入主题:


步骤一:安装【Scala】插件

点击【左上角】的【File】,选择【Settings...】


image.png


选择【Plugins】在输入框中输入【Scala】等待几秒后,看到显示【Scala】点击【Install】当显示为【Installed】代表安装成功了。


image.png


步骤二、maven引包

打开【pom.xml】


image.png


初始状态:


image.png


输入以下编码内容:


 

<!-- 基础配置 -->
    <build>
        <plugins>
            <plugin>
                <groupId>net.alchim31.maven</groupId>
                <artifactId>scala-maven-plugin</artifactId>
                <version>3.2.2</version>
                <executions>
                    <execution>
                        <goals>
                            <goal>testCompile</goal>
                        </goals>
                    </execution>
                </executions>
            </plugin>
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-assembly-plugin</artifactId>
                <version>3.1.0</version>
                <configuration>
                    <descriptorRefs>
                        <descriptorRef>jar-with-dependencies</descriptorRef>
                    </descriptorRefs>
                </configuration>
                <executions>
                    <execution>
                        <id>make-assembly</id>
                        <phase>package</phase>
                        <goals>
                            <goal>single</goal>
                        </goals>
                    </execution>
                </executions>
            </plugin>
        </plugins>
    </build>

粘贴位置:



image.png

需要重新加载一下maven

image.png



这里别急,需要等待,可能3分钟哦。


步骤三、创建Scala类

这里需要在创建位置点击【鼠标右键】依次选择【New】-【Scala Class】


image.png


输入个类名,并且需要选择【Object】类型,键盘敲击【Enter】回车即可。


image.png


项目结构如下:


image.png


输入以下编码:


def main(args: Array[String]): Unit = {
    print("hello world!")
  }


image.png

【鼠标右键】点击【Run】执行即可,第一次执行需要的时间比较长,请耐心等待,可能【1分钟】后才能出来结果哦。


image.png


最终效果如下:


image.png


恭喜你,搭建环境结束,您的第一个大数据【spark】的【Hello World】打印出来了。  


相关文章
|
1月前
|
开发工具 git
记IDEA Git版本回退并push到远程操作
记IDEA Git版本回退并push到远程操作
30 1
记IDEA Git版本回退并push到远程操作
|
2月前
|
Java Maven
idea中项目和module的环境版本设置
idea中项目和module的环境版本设置
24 0
|
8天前
|
分布式计算 Hadoop Scala
Spark【环境搭建 01】spark-3.0.0-without 单机版(安装+配置+测试案例)
【4月更文挑战第13天】Spark【环境搭建 01】spark-3.0.0-without 单机版(安装+配置+测试案例)
15 0
|
4月前
|
分布式计算 监控 Java
Note_Spark_Day02:Standalone集群模式和使用IDEA开发应用程序
Note_Spark_Day02:Standalone集群模式和使用IDEA开发应用程序
51 0
|
22天前
|
Java 数据库连接 Maven
ssm整合idea版本
ssm整合idea版本
|
1月前
|
Java 应用服务中间件 nginx
idea打war包时,JDK版本的问题解决方式
idea打war包时,JDK版本的问题解决方式
17 0
|
1月前
|
开发工具 git
IDEA通过git回滚到某个提交节点或某个版本的操作方法
IDEA通过git回滚到某个提交节点或某个版本的操作方法
26 0
|
1月前
IDEA代码行数统计插件Statistic对应idea版本以及安装后无法使用问题解决
IDEA代码行数统计插件Statistic对应idea版本以及安装后无法使用问题解决
23 0
|
1月前
|
分布式计算 Ubuntu Java
Spark环境搭建与使用
Spark环境搭建与使用
36 0
|
2月前
|
分布式计算 Java Scala
spark 与 scala 的对应版本查看、在idea中maven版本不要选择17,弄了好久,换成11就可以啦
spark 与 scala 的对应版本查看、.在idea中maven版本不要选择17,弄了好久,换成11就可以啦
112 2