开发者社区> 问答> 正文

求助:深度学习PAI‘格式转换’组件运行失败!

我要使用Caffe 框架进行图片识别,使用前要先对图片进行转换,但是设置好后运行失败,具体的配置如下:

1.在oss中传入图片放在‘tp01’文件夹中,
0003
(图片大小无论怎么调都是不行)
并设置图片列表list文本
内容如下:
caffe001/tp01/2cvk.jpg 0
caffe001/tp01/2ec4.jpg 5
caffe001/tp01/2evd.jpg 2

设置好‘格式转换组件’的配置后开始运行,但是运行失败!
001

错误代码如下:
[1] [2017-09-28 17:49:30] start subjob: #1[odpscmd]
[1] Start OdpsCmdHandler:jobId=20170928174929363744
[1] user accessId :LTAIGNwul9bnb7Y9
[1] execute command : set biz_id=1507574453097172^alipay^LTAIGNwul9bnb7Y9^2017-09-28; PAI -name convert_image_oss2oss_ext -project algo_public -DossOutputDir="caffe001.oss-cn-shanghai-internal.aliyuncs.com/002/" -DimageMeanFile="true" -DresizeWidth="224" -Dshuffle="true" -DresizeHeight="224" -DencodeType="png" -Darn="acs:ram::1507574453097172:role/aliyunodpspaidefaultrole" -DdataFilePrefix="data_" -DossImageList="caffe001.oss-cn-shanghai-internal.aliyuncs.com/test1_file_list.txt" -DossHost="oss-cn-shanghai-internal.aliyuncs.com" -DisGray="false";
[1] execute endpoint : http://service.odps.aliyun.com/api
[1] OK
[1] ID = 20170928094933752gesfz6jc2
[1] Odps Instance Id = 20170928094933752gesfz6jc2
[1] Sub Instance ID = 2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f
[1] http://logview.odps.aliyun.com/logview/?h=http://service.odps.aliyun.com/api&p=caffe_001&i=2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f&token=TUoxRVBrTHMwSTk0YUpJNXB5SGVaWVJwRVJZPSxPRFBTX09CTzoxNTA3NTc0NDUzMDk3MTcyLDE1MDcxOTY5NzkseyJTdGF0ZW1lbnQiOlt7IkFjdGlvbiI6WyJvZHBzOlJlYWQiXSwiRWZmZWN0IjoiQWxsb3ciLCJSZXNvdXJjZSI6WyJhY3M6b2RwczoqOnByb2plY3RzL2NhZmZlXzAwMS9pbnN0YW5jZXMvMjAxNzA5MjgxNzQ5MzYwNWJlNmE5N19iNGI1XzRmOWVfYTA3ZV8xOTU3NmM1ZmUzMWYiXX1dLCJWZXJzaW9uIjoiMSJ9
[1] convert: 2017-09-28 17:49:39 MapTask_job:0/0/0[0%] ReduceTask_job:0/0/0[0%]
[1] convert: 2017-09-28 17:49:44 MapTask_job:0/0/0[0%] ReduceTask_job:0/0/0[0%]
[1] Instance 20170928094933752gesfz6jc2 Failed.
[1] FAILED: Failed 2017092817493605be6a97_b4b5_4f9e_a07e_19576c5fe31f:ODPS-1202005:Algo Job Failed-WorkerRestart errCode:6,errMsg:WorkerCrashedWithCorefile
DMS logs: Please check the logview. And send it to the algorithm author.
[1] Execute Odpscmd Failed!
[1] [2017-09-28 17:49:55] ERROR: run subjob: #1[odpscmd] failed!


0002

运行失败,但是在设置的生成目录中会有 data数据文件,但是没有对应的配置文件,而且组件显示失败!
0004

不知为何,还望大家能够帮助看下。。

展开
收起
验证码识别 2017-09-28 18:02:32 6360 0
1 条回答
写回答
取消 提交回答
  • 问题已找到,原因是图片数量少于100,所以在转换图片的时候 图片数量不能少于100张!!
    不过还有一个问题,怎转换多层输出的?
    例如:
    caffe001/tp01/85h3_cb5ef0588f87edb7b189c7948d0c6bef.jpg 12 22 18 23
    caffe001/tp01/tsqi_699bee04c462cdb59634c165d56250a6.jpg 13 9 27 24
    caffe001/tp01/yizz_8c67aa76be1b5331a0c50d91db80e8f9.jpg 25 24 2 2
    caffe001/tp01/54ea_bfda336e35a2b368fe9d772fcb03f39a.jpg 22 15 5 1
    caffe001/tp01/78v4_bf0c545f1337a4a911157744f66630b1.jpg 8 12 10 15
    caffe001/tp01/7vg2_9c7a3629320a516b7e2ef8f19759bed9.jpg 8 10 20 16
    caffe001/tp01/ccxx_5c259c56f15c565d47821c6ea78fb692.jpg 29 29 31 31
    caffe001/tp01/zetj_0e849511fe20e7efea8458bdbbe22dff.jpg 2 5 13 4
    caffe001/tp01/ttd4_a7492964b8a55452ee13a84027274c31.jpg 13 13 14 15
    caffe001/tp01/xhq9_66755ef86fd7c66aa4b7506fb11ec5a7.jpg 31 18 27 0
    caffe001/tp01/cqrz_77d06da43cf0ed9e337d14ce8b793527.jpg 29 27 30 2
    caffe001/tp01/pbxs_434d0a859407c1e7c953594396f9f821.jpg 6 21 31 9
    caffe001/tp01/uk9e_0e60a36c1f485f425f3ac8c60cf22282.jpg 3 19 0 5
    caffe001/tp01/zs9u_81285acd34439eac2ed059c872a34968.jpg 2 9 0 3
    caffe001/tp01/gnr3_ede4d1bc2cd2f3675feba9ed2d5dcc7f.jpg 20 7 30 23
    caffe001/tp01/zfu7_529f3f597cef47bc4d6ea40fdc1d481f.jpg 2 11 3 8
    caffe001/tp01/jcfv_9a33d1a1691e872aeed4bd46b9bc0711.jpg 4 29 11 10
    caffe001/tp01/2qxn_66e531a9850f411cbd99cf18783978f6.jpg 16 27 31 7
    caffe001/tp01/3j9i_d1cf0a89bc50df7870d8dae293de3f97.jpg 23 4 0 24
    caffe001/tp01/zife_a97520677f19d11e8d6669eed86ab9e4.jpg 2 24 11 5
    caffe001/tp01/tj4c_ca83c48ca4f834a78e4a15a7229e15aa.jpg 13 4 15 29

    因为要做 验证码识别,需要做多层输出!现在转换失败!!求解答。。。

    2019-07-17 21:37:18
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
GPU在超大规模深度学习中的发展和应用 立即下载
基于Spark的面向十亿级别特征的 大规模机器学习 立即下载
基于Spark的大规模机器学习在微博的应用 立即下载