开发者社区 问答 正文

scrapy和requests的使用情况?

scrapy和requests的使用情况?

展开
收起
珍宝珠 2019-11-11 11:17:13 2659 分享 版权
1 条回答
写回答
取消 提交回答
  • requests 是 polling 方式的,会被网络阻塞,不适合爬取大量数据

    scapy 底层是异步框架 twisted ,并发是最大优势

    2019-11-11 12:52:50
    赞同 展开评论
问答分类:
问答地址: