scrapy和requests的使用情况?-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

scrapy和requests的使用情况?

珍宝珠 2019-11-11 11:17:13 275

scrapy和requests的使用情况?

Python
分享到
取消 提交回答
全部回答(1)
  • 珍宝珠
    2019-11-11 12:52:50

    requests 是 polling 方式的,会被网络阻塞,不适合爬取大量数据

    scapy 底层是异步框架 twisted ,并发是最大优势

    0 0
开发与运维
使用钉钉扫一扫加入圈子
+ 订阅

集结各类场景实战经验,助你开发运维畅行无忧

推荐文章
相似问题
推荐课程
  • 111
    学习人数:0