备案控制台
探索云世界
开发者社区 大数据与机器学习 文章 正文

spark 与 scala 的对应版本查看、在idea中maven版本不要选择17，弄了好久，换成11就可以啦

2024-02-24 110
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
实时计算 Flink 版，5000CU*H 3个月
推荐场景：
实时发现最热Github项目
检索分析服务 Elasticsearch 版，2核4GB开发者规格 1个月
推荐场景：
数据可视化分析航班信息
大数据开发治理平台 DataWorks，不限时长
推荐场景：
Github实时数据分析与可视化
简介： spark 与 scala 的对应版本查看、.在idea中maven版本不要选择17，弄了好久，换成11就可以啦

1 ，思路 ：

去 maven 查看


2 ，网址 ：

https://mvnrepository.com/artifact/org.apache.spark/spark-core


3 ，看到 ：

image.png


4 ，总结 ：

1 ，spark3.0 以后，不再支持 scala2.11

2 ，spark3.0 以后，只能用 scala2.12

3.在idea中maven版本不要选择17，弄了好久，换成11就可以啦



文章标签：
分布式计算
Spark
Scala
Java
Maven
关键词：
Maven版本
Maven idea
Idea maven
Idea版本
版本Maven
建模sister
目录
相关文章
Sunny_yiyi
|
1月前
|
开发工具 git
记IDEA Git版本回退并push到远程操作
记IDEA Git版本回退并push到远程操作
Sunny_yiyi
30 1
记IDEA Git版本回退并push到远程操作
真题OK撒
|
1月前
|
分布式计算 Java Scala
使用Maven对Scala独立应用程序进行编
使用Maven对Scala独立应用程序进行编
真题OK撒
19 0
一ang
|
2天前
|
存储 安全 Java
maven仓库的版本列举
这段代码是Java程序，用于分析本地Maven项目的依赖版本。它遍历指定路径下的文件，提取groupId和version信息，并存储到HashSet中。最终，这些信息被写入到一个Excel文档。主要类`test`包含一个静态内部类`Version`来封装groupId和version字段。通过递归方法`func`处理文件夹结构，获取Maven坐标信息。
一ang
12 3
程序三两行
|
20天前
|
Java 数据库连接 Maven
ssm整合idea版本
ssm整合idea版本
程序三两行
29 0
穆雄雄.
|
1月前
|
Java 应用服务中间件 nginx
idea打war包时，JDK版本的问题解决方式
idea打war包时，JDK版本的问题解决方式
穆雄雄.
17 0
zhishijike
|
1月前
|
开发工具 git
IDEA通过git回滚到某个提交节点或某个版本的操作方法
IDEA通过git回滚到某个提交节点或某个版本的操作方法
zhishijike
21 0
hhzz
|
1月前
IDEA代码行数统计插件Statistic对应idea版本以及安装后无法使用问题解决
IDEA代码行数统计插件Statistic对应idea版本以及安装后无法使用问题解决
hhzz
22 0
华章计算机
|
机器学习/深度学习 分布式计算 资源调度
《Scala机器学习》一一3.5　Spark的性能调整
本节书摘来自华章出版社《Scala机器学习》一 书中的第3章，第3.5节，作者：[美]　亚历克斯·科兹洛夫（Alex Kozlov）著 ，更多章节内容可以访问云栖社区“华章计算机”公众号查看。
华章计算机
1344 0
华章计算机
|
机器学习/深度学习 分布式计算 调度
《Scala机器学习》一一3.5　Spark的性能调整
华章计算机
1383 0
about云
|
SQL 消息中间件 分布式计算
如何查看spark与hadoop、kafka、Scala、flume、hive等兼容版本【适用于任何版本】
如何查看spark与hadoop、kafka、Scala、flume、hive等兼容版本【适用于任何版本】
about云
671 0
如何查看spark与hadoop、kafka、Scala、flume、hive等兼容版本【适用于任何版本】

大数据与机器学习

热门文章

最新文章

  • 1
    MaxCompute 近实时增全量处理一体化新架构和使用场景介绍
  • 2
    阿里巴巴飞天大数据平台MaxCompute（原名ODPS）全套攻略（持续更新20200109）
  • 3
    阿里云开源离线同步工具DataX3.0介绍
  • 4
    【玩转数据系列十】利用阿里云机器学习在深度学习框架下实现智能图片分类
  • 5
    盘古：阿里云飞天分布式存储系统设计深度解析
  • 6
    odps是什么?
  • 7
    【玩转数据系列二】机器学习应用没那么难，这次教你玩心脏病预测
  • 8
    【技术实验】mysql准实时同步数据到Elasticsearch
  • 9
    数据仓库介绍与实时数仓案例
  • 10
    美柚：最懂女性App背后的混合云架构与大数据服务
  • 1
    Golang深入浅出之-HTTP客户端编程：使用net/http包发起请求
    6
  • 2
    Havenask入门系列【集群扩分片】
    5
  • 3
    Havenask入门系列【集群扩备份】
    8
  • 4
    Havenask入门系列【使用hape部署分布式版Havenask】
    7
  • 5
    Flink DataStream API 批处理能力演进之路
    12
  • 6
    人工智能平台PAI产品使用合集之机器学习PAI EasyRec训练时，怎么去除没有意义的辅助任务的模型，用于部署
    5
  • 7
    Haskell 实现京东优惠券爬取的详细步骤解析
    4
  • 8
    人工智能平台PAI产品使用合集之负采样版本DSSM双塔模型训练好之后，怎么分别获取user tower的embedding和item tower的embedding
    7
  • 9
    人工智能平台PAI产品使用合集之机器学习PAI EasyRec中的eval_config的使用方法是什么
    5
  • 10
    人工智能平台PAI产品使用合集之机器学习PAI的学习方法不知道如何解决
    7

    • 相关课程

    更多
  • Scala核心编程 - 进阶
  • 项目管理工具Maven学习
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第六阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段

    • 相关电子书

    更多
  • Just Enough Scala for Spark
  • 蚂蚁金服高级开发工程师萧恺：IDEA 插件开发入门教程
  • JDK8新特性与生产-for“华东地区scala爱好者聚会”

    • 相关实验场景

    更多
  • 基于 IntelliJ IDEA 插件部署微服务应用

    • 推荐镜像

    更多
  • maven
  • eclipse
  • jenkins
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）