开发者社区> 问答> 正文

WebMagic 如何正确的处理报错的请求??报错

有部分请求失败,可能是网络的原因,对于这部分请求我应该如何正确的去处理?因为是初探爬虫这一块,不是太懂。

展开
收起
爱吃鱼的程序员 2020-06-05 13:54:46 488 0
1 条回答
写回答
取消 提交回答
  • https://developer.aliyun.com/profile/5yerqm5bn5yqg?spm=a2c6h.12873639.0.0.6eae304abcjaIB
                        <p>没找到轮子,错误就重试,重试三次后不行就放弃,把错误的URL记录到文本文件中</p>
    
    2020-06-05 13:54:59
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载