AI 助理
备案控制台
开发者社区 问答 正文

scrapy和scrapy-redis有什么区别？

scrapy和scrapy-redis有什么区别？

展开
收起
真的很搞笑 2021-11-02 23:18:37 395 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 芯在这

    scrapy是一个Python爬虫框架，爬取效率极高，具有高度定制性，但是不支持分布式。而scrapy-redis一套基于redis数据库、运行在scrapy框架之上的组件，可以让scrapy支持分布式策略，Slaver端共享Master端redis数据库里的item队列、请求队列和请求指纹集合。

    2021-11-02 23:18:51
    赞同 展开评论
问答分类：
Python 云数据库 Tair（兼容 Redis）
问答标签：
云数据库 Tair（兼容 Redis）区别 scrapy云数据库 Tair（兼容 Redis） Scrapy scrapy-redis
问答地址：
开发者社区 > 开发与运维 > 问答
相关问答
Redis的16G8分片和4G4分片有什么区别
265
1
0
云数据库Tair企业版和Redis云数据库区别，性能怎么样？
58
1
0
Redis事务与数据库事务的主要区别是什么？
92
1
0
redis内存使用率和持久内存使用率的区别？
102
1
0
Redis与Memcached的主要区别是什么？
84
1
0
Seata Redis模式和db模式有什么区别？
253
1
0
RDS，DRDS，REDIS，ADS，ODPS之间的联系和区别是什么？
9877
9
0
RDS和REDIS的关联和区别是什么
2455
4
0
云数据库Redis版的内网和外网区别
819
3
0
阿里云的云数据库 Redis 版和原生的redis有啥区别？
1408
4
0