Zookeeper解读

本文涉及的产品
云原生网关 MSE Higress,422元/月
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
注册配置 MSE Nacos/ZooKeeper,118元/月
简介: Zookeeper解读

Zookeeper是一种重量级的针对分布式的大型协调系统,是Hadoop的子项目。

他有如下几个功能:

1.选举出leader,所有的写请求都会被转发的leader,然后由leader广播给所有follower,保证数据的一致性

2.如果leader挂掉,用选举算法,会再选举出leader,

3.配置文件的同步更新,类似isync的功效

4.分布式锁服务,应该是用了Fast Paxos算法。

缺陷:

需要给每个zookeeper 1G左右的内存,如果可能的话,最好有独立的磁盘。 (独立磁盘可以确保zookeeper是高性能的。

提高了对运维的要求,和维护时的复杂度

由于zookeeper的写入需要通过leader,然后这个写入的消息需要传播到半数以上的follower通过才能是完整写入,所以整个集群中写入的性能无法通过增加服务器数量达到目的,相反,整个集群中follower数量越多,整个集群写入的性能越差。

zookeeper集群中的每一台服务器可以提供数据的读取服务,所有整个集群中的服务器数量越多,读取的性能就约好。但follower增加又会降低整个集群的写的能力

发生故障的时,排查问题加大了难度,底层不是自己实现的

他的优势在我们的服务器中使用必要性并不大,使用它带来的内存占用,磁盘的要求,对运维的要求,维护代价的提高,都不是我们想要的。

相关实践学习
基于MSE实现微服务的全链路灰度
通过本场景的实验操作,您将了解并实现在线业务的微服务全链路灰度能力。
目录
相关文章
|
6月前
|
存储 容灾 算法
深入理解Zookeeper系列-1.初识Zoookeeper
深入理解Zookeeper系列-1.初识Zoookeeper
98 0
|
5月前
|
消息中间件 分布式计算 负载均衡
ZooKeeper在哪些场景中被使用?
【6月更文挑战第21天】ZooKeeper在哪些场景中被使用?
115 38
|
6月前
|
存储 消息中间件 负载均衡
Zookeeper 简单介绍
Zookeeper 简单介绍
|
6月前
|
存储 分布式计算 资源调度
ZooKeeper详解
ZooKeeper是大数据组件中的协调器,确保高可用性和一致性。它用于监控主备节点切换(如Hadoop YARN的ResourceManager,HBase的RegionServer,Spark的Master)并实现数据同步。设计基于文件系统和通知机制,通过Znodes的状态变化(创建、删除、更新、子节点变化)进行协调。ZooKeeper使用观察者模式,当Znode变化时,通知客户端。其数据结构为树形,提供CLI工具如`zkCli.sh`进行交互。ZooKeeper有三个默认端口:2181(客户端连接),2888(服务器间同步),3888(选举)。选举采用半数机制,确保集群稳定性。
103 1
ZooKeeper详解
|
JSON Linux Shell
zookeeper
zookeeper
159 0
|
存储 域名解析 负载均衡
Zookeeper—应用
前言 在前面的几篇文章中,我们讲解了ZooKeeper的组成,基本功能,集群选举,ZAB协议和数据一致性。所有的设计都因应用场景而生,不结合场景的方案都是耍流氓。在今天的文章中,我们将要去了解ZK的应用,加深对ZK的认识。
118 0
|
存储 监控 Unix
一文了解Zookeeper
一文了解Zookeeper
256 0
一文了解Zookeeper
|
存储 分布式计算 数据管理
|
SQL 存储 关系型数据库
|
消息中间件 存储 分布式计算
初识ZooKeeper
特点、应用场景
586 0