AI 助理
备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 正文

阿里云E-MapReduce，SHELL任務有能力可以寫檔案至oss或是修改資源中心內的文件嗎?

想請問一下阿里云E-MapReduce，SHELL任務有能力可以寫檔案至oss或是修改資源中心內的文件嗎?

展开
收起
夹心789 2024-05-20 17:07:51 123 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 芯在这

    shell任务，打开提交到yarn的开关，然后使用hdfs dfs -put examplefile.txt oss://xxx/ 可以上传文件到oss ，此回答整理自钉群“EMR Workbench（原EMR Studio）用户交流群”

    2024-05-20 21:53:44
    赞同 展开评论
问答分类：
Shell 对象存储 对象存储 开源大数据平台 E-MapReduce
问答标签：
阿里云对象存储 对象存储文件 Shell文件 mapreduce任务 shell任务
问答地址：
开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 问答
相关问答
阿里云E-MapReduce的OSS-HDFS中，是否有便捷的方法来创建目录结构？
122
1
0
阿里云E-MapReduce是否可以在 SHELL 任務中去 access EMR 的內置 MySQ
57
1
0
如何在Shell脚本中将一个TXT文件中的数据上传到MaxCompute的表中
47
1
0
阿里云E-MapReduce客户端 调用一次flush 就会触发oss一次真正的flush是吧？
128
1
0
在视觉智能平台中抠图的能力，可否是一个公网的图片URL，目标图片是必须存在oss的吗？
52
1
0
阿里云E-MapReduce读写 oss 文件时，api 的调用次数和文件层级有关系吗？
92
1
0
阿里云E-MapReduce 有人在mac 上配置 jindo sdk，用命令行访问 oss hdf
92
0
0
阿里云E-MapReduce中在spark里使用jingdo访问oss， 是啥原因？
136
1
0
请问大数据计算MaxCompute，odps shell 如何将echo 变量的结果集合写入文件？
70
1
0
阿里云E-MapReduce的jindodata写数据到oss，是单线程还是多线程阿？
110
1
0
大数据与机器学习

开源大数据平台 E-MapReduce

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

我要提问

相关文章

  • 【Azure K8S | AKS】在AKS的节点中抓取目标POD的网络包方法分享
  • 定期备份数据库：基于 Shell 脚本的自动化方案
  • Linux常见根目录详释
  • Bilibili直播信息流：连接方法与数据解析
  • 阿里云安全体检工具使用体验评测

    • 热门讨论

    热门文章

  • hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？
  • sprak是什么
  • EMR StarRocks有hive或spark的炸裂函数，类似explode可以用吗?
  • Databricks 和 Dataworks 都是一站式的数据分析平台，两者的区别是什么？
  • 咨询个问题，starrocks，如何像mysql一样，查询有无锁以及造成锁的sql？
  • starrocks通过DLF2.0建立外部表，可以进行delete或者update表数据的操作吗？
  • Hologres 是对标 ClickHouse + Hbase + ...？,是如何把这些能力全部都
  • Lakehouse是什么？
  • 我想问一下阿里云E-MapReduce，为什么会报错这个信息呢？
  • Ray是什么？
    • 展开全部
  • 漫谈分布式计算框架
  • 11月14日Spark社区直播【 Spark on Kubernetes & YARN】
  • 使用E-MapReduce服务将Kafka数据导入OSS
  • 开源大数据周刊-第88期
  • 尝新阿里云E-MapReduce MetaService服务
  • Spark Operator浅析
  • 开源大数据周刊-第55期
  • 开源大数据周刊-第78期
  • SparkSQL ThriftServer 安全相关功能的现状分析
  • Spark on Kubernetes原生支持浅析
    • 展开全部
    还有其他疑问?
    咨询AI助理