开发者社区 > 大数据与机器学习 > 开源大数据平台 E-MapReduce > 正文

阿里云E-MapReduce的环境,办公网络本地开发环境依赖jindo包写数据的时候报错,怎么处理?

环境是阿里云E-MapReduce的环境,hudi + oss-hdfs , jindo版本是4.3.1。办公网络本地开发环境依赖jindo包写数据的时候报错,怎么处理?调试的时候发现调用了JindoNativeWriter的write方法出错了,但是因为是native函数,没法定位问题。只知道错误信息是: Caused by error 30005: IO error: Failed to open local temp file at any local path, please check local path configd13cf669682324fc806d266a4483b9aa.png 这边有确认过写入的目标文件时存在的。![70cddce709fb1b3cc888d909ba218a7c.png](https://ucc.alicdn.com/pic/developer-ecology/

展开
收起
三分钟热度的鱼 2023-06-28 10:17:34 179 0
1 条回答
写回答
取消 提交回答
  • 写入时,会在fs.oss.tmp.data.dirs配置的目录中产生一些临时文件,默认是/tmp。一般是/tmp磁盘问题。此回答整理自钉群“JindoData用户交流群”

    2023-06-28 14:03:54
    赞同 展开评论 打赏

阿里云EMR是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、Flink、Presto、ClickHouse、StarRocks、Delta、Hudi等开源大数据计算和存储引擎,计算资源可以根据业务的需要调整。EMR可以部署在阿里云公有云的ECS和ACK平台。

相关产品

  • 开源大数据平台 E-MapReduce
  • 相关电子书

    更多
    基于E-MapReduce梨视频推荐系统 立即下载
    大数据解决方案构建详解 以阿里云E-MapReduce为例 立即下载
    阿里云E-MapReduce 立即下载