我提交spark作业的时候，如果我不想每次都打spark镜像，而是我把jar包放到oss上，然后能在
我提交spark作业的时候，如果我不想每次都打spark镜像，而是我把jar包放到oss上，然后能在作业pod启动时，把jar包传到作业所在的pod里面的去，这个应该怎么做呢？
展开
收起
1
条回答
写回答
写回答
-
你可以先试一下配置 spark.jars=oss://xxxx/ ，这种方式可以加载oss的jar，但是这个是运行时加载，所以要看你使用jar包的场景，不一定完全能满足。如果不行，还是建议构建镜像，如果要自定义镜像，我可以给你个操作文档。（此答案整理自EMR on ACK 用户技术交流群）
2022-07-22 14:22:53赞同 展开评论 打赏
问答地址：
开发者社区
>
大数据与机器学习
>
开源大数据平台 E-MapReduce
>
问答
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。
热门讨论
热门文章
阿里云E-MapReduce notebook 大概什么时候会正式上线？
46
阿里云E-MapReduce 版本2.5.3添加一个fe节点，启动报如下错误，是什么原因呢？
87
阿里云E-MapReduce存算一体和存算分离并不冲突,为什么不能在BE的基础上添加S3的读写能力？
50
阿里云E-MapReduce是不是你们的集群环境中缺少了相关的jar包，还是怎么的？
39
EMR的dataworks是不是还要单独付费？
51
旧版EMR上也有推荐 EMR Workflow迁移，Workflow和DataWorks有什么区别？
45
阿里云E-MapReduce用存算分离模式是不是也可以进行数据湖分析？
73
阿里云E-MapReduce中jindo work 节点，可以指定SSD盘容量调度吗？
82
阿里云E-MapReduce客户端 调用一次flush 就会触发oss一次真正的flush是吧？
74
阿里云E-MapReduce中 workflow里面资源中心的文件 怎么跨域复制？
43
展开全部
开源大数据周刊-第80期
3290
E-MapReduce集群支持预装Phoenix
2917
钉钉群直播【Spark Relational Cache 原理和实践】
2449
钉钉群直播【Migration to Apache Spark】
1522
浅谈 Spark 的多语言支持（修订版）
1585
EMR Serverless Spark：结合实时计算 Flink 基于 Paimon 实现流批一体
60315
EMR Serverless StarRocks体验报告
413
Data Lake 三剑客——Delta、Hudi、Iceberg 对比分析
14707
阿里巴巴的通义千问大模型
680
深度分析：Apache Kafka及其在大数据处理中的应用
64
展开全部
