开发者社区> 问答> 正文

用odps client跑mapreduce任务失败,报错如下,多进程后台同时起几个任务,resource文件用的是同一个,有些任务成功,有些任务失败

用odps client跑mapreduce任务失败,报错如下,多进程后台同时起几个任务,resource文件用的是同一个,有些任务成功,有些任务失败,
FAILED: Copy file to shared cache failed: PanguOpen4Read4R PANGU_FILE_NOT_FOUND PANGU_FILE_NOT_FOUND The file does not exist W
    hen PanguOpen4Read4R pangu://AY64A:10240/product/odps/dw_datagrand_proj//resources/58F8377737E08A90B9011ED9_default_cf.conf
117 
118 Exception in thread "main" com.aliyun.odps.OdpsException: Copy file to shared cache failed: PanguOpen4Read4R PANGU_FILE_NOT_FO
    UND PANGU_FILE_NOT_FOUND The file does not exist When PanguOpen4Read4R pangu://AY64A:10240/product/odps/dw_datagrand_proj//res
    ources/58F8377737E08A90B9011ED9_default_cf.conf

展开
收起
123ya 2017-05-15 10:39:43 5656 0
1 条回答
写回答
取消 提交回答
  • 问题是由并发调度的时候多次执行了add file xxx.conf -f; 这种操作导致的。
    如果文件的内容是一样的,您只需要add一次就可以了。

    2019-07-17 21:10:18
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
阿里云EMR2.0 平台:让大数据更简单 立即下载
阿里云EMR 2.0:重新定义新一代开源大数据平台 立即下载
2022年开源大数据热力报告 立即下载