AI 助理
备案控制台
开发者社区 问答 正文

分布式原理是什么？

分布式原理是什么？

展开
收起
芯在这 2021-12-08 23:11:22 394 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 真的很搞笑

    分布式爬虫的关键是共享一个requests队列，维护该队列的主机称为master，而从机则负责数据的抓取，数据处理和数据存储，那么队列用什么维护呢，这里我们选用Redis队列进行存储，Redis是一种高效的非关系型数据库，以key-value的形式存储，结构灵活，它是内存中的数据结构存储系统，处理速度快，性能好，同时，提供了队列，集合等多种存储结构，方便队列维护。

    2021-12-08 23:11:40
    赞同 展开评论
问答标签：
分布式原理
问答地址：
开发者社区 > 云计算 > 问答
相关问答
分布式事务原理是什么？
89
1
0
dataworks这个分布式同步 如果数据源是MYSQL 原理是什么 根据主键进行任务拆分吗？
107
4
0
需要了解数据库原理才能做分布式事物嘛？
510
1
0
分布式链路跟踪Sleuth原理是什么啊？
543
1
0
分布式链路跟踪Zipkin原理是什么啊？
505
1
0
深入理解分布式事务:原理与实战 电子书全章谁有
4244
1
0
分布式系统的原子广播原理是什么？
791
1
0
分布式去重原理是什么？
381
1
0
Flink 分布式快照的原理是怎样的？
644
1
0
Flink 分布式快照的原理是什么啊？
501
1
0