DataWorks中spark作业时是集群环境嘛，该怎么做才能保证每台服务器都有相应的文件呢？
DataWorks中spark作业时是集群环境嘛，每次作业的机器都不一样，如果我在spark jar里往服务器写文件，该怎么做才能保证每台服务器都有相应的文件呢？
展开
收起
1
条回答
写回答
写回答
-
可以通过添加资源参数的方式 您参考看下
https://github.com/aliyun/MaxCompute-Spark/wiki/ ，此回答整理自钉群“DataWorks交流群(答疑@机器人)”2024-05-27 19:43:17赞同 1 展开评论 打赏
问答地址：
开发者社区
>
大数据与机器学习
>
大数据开发治理DataWorks
>
问答
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
热门讨论
热门文章
DataWorks如何通过spark访问外网呢？
296
DataWorks这个errcode是什么意思？
356
请教一下DataWorks，doris和starRocks 选型，选哪个？
671
数据来源：com.alibaba.fastjson.JSONException: syntax er
3477
DataWorks我该如何访问A项目安装了项目的package资源？
848
运维中心有这个运行到该节点的功能么?
550
dataworks里面的stg层、ods层、dwd层、dws层、是怎么分层的呢？
1244
DataWorks数据服务 使用时 出现了canceling的情况 要怎么解决？
370
Dataphin和 Dataworks 有啥区别呢？
1033
阿里云有敏感词检测的API吗？可以用在PyODPS吗？
597
展开全部
DataWorks重磅推出Serverless通用型资源组，实现低成本灵活付费和动态平滑扩缩容
53958
大数据公共数据集上线，免费试用TB级数据分析
7263
数据中台的智能进化—阿里巴巴十二年数据平台发展历程
8300
2万字揭秘阿里巴巴数据治理平台DataWorks建设实践
26412
DataWorks售前咨询
5994
【2023云栖】田奇铣：大模型驱动DataWorks数据开发治理平台智能化升级
58589
《一站式大数据开发治理DataWorks使用宝典》官方电子书开放下载
38892
大数据&AI的16种可能，2020阿里云客户最佳实践合集下载
72108
DataWorks产品使用合集之如何判断资源组的数据源是否已经打通内网
471
欢迎加入DataWorks产品钉钉交流群
36318
展开全部
