求助:深度学习PAI‘格式转换’组件运行失败!-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

求助:深度学习PAI‘格式转换’组件运行失败!

2017-09-28 18:02:32 5388 1

我要使用Caffe 框架进行图片识别,使用前要先对图片进行转换,但是设置好后运行失败,具体的配置如下:

1.在oss中传入图片放在‘tp01’文件夹中,
0003
(图片大小无论怎么调都是不行)
并设置图片列表list文本
内容如下:
caffe001/tp01/2cvk.jpg 0
caffe001/tp01/2ec4.jpg 5
caffe001/tp01/2evd.jpg 2

设置好‘格式转换组件’的配置后开始运行,但是运行失败!
001

错误代码如下:
[1] [2017-09-28 17:49:30] start subjob: #1[odpscmd]
[1] Start OdpsCmdHandler:jobId=20170928174929363744
[1] user accessId :LTAIGNwul9bnb7Y9
[1] execute command : set biz_id=1507574453097172^alipay^LTAIGNwul9bnb7Y9^2017-09-28; PAI -name convert_image_oss2oss_ext -project algo_public -DossOutputDir="caffe001.oss-cn-shanghai-internal.aliyuncs.com/002/" -DimageMeanFile="true" -DresizeWidth="224" -Dshuffle="true" -DresizeHeight="224" -DencodeType="png" -Darn="acs:ram::1507574453097172:role/aliyunodpspaidefaultrole" -DdataFilePrefix="data_" -DossImageList="caffe001.oss-cn-shanghai-internal.aliyuncs.com/test1_file_list.txt" -DossHost="oss-cn-shanghai-internal.aliyuncs.com" -DisGray="false";
[1] execute endpoint : http://service.odps.aliyun.com/api
[1] OK
[1] ID = 20170928094933752gesfz6jc2
[1] Odps Instance Id = 20170928094933752gesfz6jc2
[1] Sub Instance ID = 2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f
[1] http://logview.odps.aliyun.com/logview/?h=http://service.odps.aliyun.com/api&p=caffe_001&i=2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f&token=TUoxRVBrTHMwSTk0YUpJNXB5SGVaWVJwRVJZPSxPRFBTX09CTzoxNTA3NTc0NDUzMDk3MTcyLDE1MDcxOTY5NzkseyJTdGF0ZW1lbnQiOlt7IkFjdGlvbiI6WyJvZHBzOlJlYWQiXSwiRWZmZWN0IjoiQWxsb3ciLCJSZXNvdXJjZSI6WyJhY3M6b2RwczoqOnByb2plY3RzL2NhZmZlXzAwMS9pbnN0YW5jZXMvMjAxNzA5MjgxNzQ5MzYwNWJlNmE5N19iNGI1XzRmOWVfYTA3ZV8xOTU3NmM1ZmUzMWYiXX1dLCJWZXJzaW9uIjoiMSJ9
[1] convert: 2017-09-28 17:49:39 MapTask_job:0/0/0[0%] ReduceTask_job:0/0/0[0%]
[1] convert: 2017-09-28 17:49:44 MapTask_job:0/0/0[0%] ReduceTask_job:0/0/0[0%]
[1] Instance 20170928094933752gesfz6jc2 Failed.
[1] FAILED: Failed 2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f:ODPS-1202005:Algo Job Failed-WorkerRestart errCode:6,errMsg:WorkerCrashedWithCorefile
DMS logs: Please check the logview. And send it to the algorithm author.
[1] Execute Odpscmd Failed!
[1] [2017-09-28 17:49:55] ERROR: run subjob: #1[odpscmd] failed!


0002

运行失败,但是在设置的生成目录中会有 data数据文件,但是没有对应的配置文件,而且组件显示失败!
0004

不知为何,还望大家能够帮助看下。。

取消 提交回答
全部回答(1)
  • 验证码识别
    2019-07-17 21:37:18

    问题已找到,原因是图片数量少于100,所以在转换图片的时候 图片数量不能少于100张!!
    不过还有一个问题,怎转换多层输出的?
    例如:
    caffe001/tp01/85h3_cb5ef0588f87edb7b189c7948d0c6bef.jpg 12 22 18 23
    caffe001/tp01/tsqi_699bee04c462cdb59634c165d56250a6.jpg 13 9 27 24
    caffe001/tp01/yizz_8c67aa76be1b5331a0c50d91db80e8f9.jpg 25 24 2 2
    caffe001/tp01/54ea_bfda336e35a2b368fe9d772fcb03f39a.jpg 22 15 5 1
    caffe001/tp01/78v4_bf0c545f1337a4a911157744f66630b1.jpg 8 12 10 15
    caffe001/tp01/7vg2_9c7a3629320a516b7e2ef8f19759bed9.jpg 8 10 20 16
    caffe001/tp01/ccxx_5c259c56f15c565d47821c6ea78fb692.jpg 29 29 31 31
    caffe001/tp01/zetj_0e849511fe20e7efea8458bdbbe22dff.jpg 2 5 13 4
    caffe001/tp01/ttd4_a7492964b8a55452ee13a84027274c31.jpg 13 13 14 15
    caffe001/tp01/xhq9_66755ef86fd7c66aa4b7506fb11ec5a7.jpg 31 18 27 0
    caffe001/tp01/cqrz_77d06da43cf0ed9e337d14ce8b793527.jpg 29 27 30 2
    caffe001/tp01/pbxs_434d0a859407c1e7c953594396f9f821.jpg 6 21 31 9
    caffe001/tp01/uk9e_0e60a36c1f485f425f3ac8c60cf22282.jpg 3 19 0 5
    caffe001/tp01/zs9u_81285acd34439eac2ed059c872a34968.jpg 2 9 0 3
    caffe001/tp01/gnr3_ede4d1bc2cd2f3675feba9ed2d5dcc7f.jpg 20 7 30 23
    caffe001/tp01/zfu7_529f3f597cef47bc4d6ea40fdc1d481f.jpg 2 11 3 8
    caffe001/tp01/jcfv_9a33d1a1691e872aeed4bd46b9bc0711.jpg 4 29 11 10
    caffe001/tp01/2qxn_66e531a9850f411cbd99cf18783978f6.jpg 16 27 31 7
    caffe001/tp01/3j9i_d1cf0a89bc50df7870d8dae293de3f97.jpg 23 4 0 24
    caffe001/tp01/zife_a97520677f19d11e8d6669eed86ab9e4.jpg 2 24 11 5
    caffe001/tp01/tj4c_ca83c48ca4f834a78e4a15a7229e15aa.jpg 13 4 15 29

    因为要做 验证码识别,需要做多层输出!现在转换失败!!求解答。。。

    0 0
相关问答

1

回答

Spark的组件是运行在什么基础上的呢?

2022-08-03 08:28:06 41浏览量 回答数 1

1

回答

RegionServer的组件有什么?

2021-12-08 14:54:41 75浏览量 回答数 1

0

回答

UDP转发未过,防火墙组件已经添加了

2021-11-12 09:25:22 203浏览量 回答数 0

1

回答

Yarn 集群的组件有哪些

2021-01-05 23:31:16 690浏览量 回答数 1

1

回答

本地深度学习项目用阿里云跑实验,选择哪个产品?

2020-04-12 12:35:12 469浏览量 回答数 1

0

回答

最近遇到一个死锁,我搞不懂这个ExclusiveLock是怎么来的,看PG文档说是创建物理视图会申请

2019-09-27 19:01:30 577浏览量 回答数 0

3

回答

有谁知道学习数据结构与算法比较好的网站或软件?

2018-07-19 17:15:01 1132浏览量 回答数 3

1

回答

js调用出错,firebug的控制台一直加载js文件

2016-07-05 16:41:07 1986浏览量 回答数 1

1

回答

web项目后台读取文件中文乱码的问题

2016-03-25 16:03:50 1817浏览量 回答数 1

1

回答

求助邮箱收邮件有问题

2015-09-09 13:00:12 6482浏览量 回答数 1
0
文章
2
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载