AI 助理
备案控制台
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 正文

请问下列问题该如何解决呢？

28866976d6e0ef8cce7816cf94267d51.png882cce99abe09ce8c644abf2edd19665.png 367eea34f1e46661e513a04d076c5953.png我们2种存储在本地hdfs上的文件，使用jindo-distcp-tool，上到oss，结果在oss只创建了对应的文件夹目录，读取的数据皆没传上去，请问怎么解决好？

展开
收起
圆葱猪肉包 2023-03-21 13:11:35 334 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 我是三好学生

    使用distcp的时候，--src不用文件路径，用目录的路径试试5a5388807e21bb3b29785a8fb00b1da2.png这里报错了，路径是不是配置错了查看下mapreduce.application.framework.path这个配置，这个${hdp.version}环境变量看起来没找到这个bucket应该是专有云使用的，JindoDistCp没有在这类bucket验证过，可以考虑其他上云方式 此回答整理自“JindoData 用户交流群”

    2023-03-21 15:41:40
    赞同 展开评论
问答分类：
存储 对象存储 开源大数据平台 E-MapReduce 对象存储
问答地址：
开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 问答
相关问答
this xml file does not appear to have any style in
47564
10
0
请问下 我访问接口不通 什么原因 Provisional headers are shown
1596
0
0
OSS的endpoint如何查看
36140
6
0
购买阿里国外的云服务器是否可以访问谷歌？
80269
47
0
通过www和不带www的网址输入最终都指向www.我的域名.com，求指教
123452
28
0
sql server的用户名和密码怎么查啊？
35392
21
0
配置了安全组规则，端口还是无法访问
32172
25
0
域名在腾讯云备案成功，解析到阿里云服务器，提示仍需备案？
59398
30
0
设置域名解析如何指向我的服务器url包括端口号
17515
2
0
Connection reset by peer的常见原因及解决办法
3698
1
0
大数据与机器学习

开源大数据平台 E-MapReduce

阿里云EMR是云原生开源大数据平台，为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎，计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

我要提问
收录在圈子:
阿里云E-MapReduce
2323
+ 订阅

相关文章

  • 数据湖 vs 数据仓库：大厂为何总爱“湖仓并用”？
  • RFID让办公资产管理更轻松
  • 开源赋能：重塑能源管理安全范式，驱动企业低碳转型新革命
  • 《Ceph集群数据同步异常的根因突破与恢复实践》
  • 基于密集型复杂城市场景下求解无人机三维路径规划的Q-learning 算法研究（Matlab代码实现）

    • 热门讨论

    热门文章

  • Mem usage has exceed the limit of BE - com.mysql.j
  • 升级完，现有spark起不来了
  • NeuSoft是什么？
  • Apache Spark 3.0 是什么？
  • 请问hive 的hive-site.xml文件在哪啊
  • 想问问大家clickhouse 怎么查嵌套了多重的json数据 ？
  • 阿里云E-MapReduce中flinkui在哪看，入口是哪？
  • 核桃编程是什么？
  • hdfs 文件块过多（1亿）每个datanode 占3000万块(分16G内),某时刻内存陡然增加？
  • 阿里云E-MapReduce会 继续把之前write到本地磁盘的数据 异步上传到oss 是吗？
    • 展开全部
  • 阿里封神谈hadoop生态学习之路
  • 现代流式计算的基石：Google DataFlow
  • 如何使用Kafka Connect实现同步RDS binlog数据
  • 首次揭秘|为6.4亿人次出行提供无线网络的技术架构
  • JindoFS概述：云原生的大数据计算存储分离方案
  • 5W1H(六何分析法)全景洞察大数据
  • 助力云上开源生态 - 阿里云开源大数据平台的发展
  • 基于Spark Streaming 进行 MySQL Binlog 日志准实时传输
  • 在 Apache Spark 中利用 HyperLogLog 函数实现高级分析
  • 从数砖开源 Delta Lake 说起
    • 展开全部
    还有其他疑问?
    咨询AI助理