Zookeeper集群的搭建与调试

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
简介:

Zookeeper的下载地址:https://github.com/apache/zookeeper/archive/master.zip

zkclient的下载地址:https://github.com/sgroschupf/zkclient


至于zookeeper的作用和原理我这里就不多赘述了,大家有兴趣可以去查查,这里主要就是动手操作。


搭建集群

首先先看一下本次zk实验服务器的名称和IP情况,这里我们选择了三台服务器作zkserver,因为三台是标配,一台的话就只有leader没有follower,不是很稳定的结构,当然啦如果你的公司土豪的话是可以玩三十台:

dvl-mrszk-001 10.117.0.125
dvl-mrszk-002 10.117.1.158
dvl-mrszk-003 10.168.152.227

对这三台服务器要进行如下的步骤:

1)先把zookeeper.zip传到linux里,然后解压到/usr文件夹下;

2)进入 /usr/zookeeper/conf文件夹,#vim zoo.cfg,在最下面补充上面的三个zkserver,见图:

wKioL1hvPw_jqddTAAEsCsJGnek721.png

3)再来到/usr/zookeeper/data文件夹,如果里面有文件就清空所有文件,如果是1号zkserver就# echo 1 > myid,如果当前机器是2号zkserver就# echo 2 > myid,依次类推,这里一定要注意,不可以都写一样。

4)#vim /etc/hosts,还要把这三台机器的ip地址和名字都写进去,如下:

1
2
3
4
5
127.0.0.1 localhost
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
10.117.0.125 dvl-mrszk-001
10.117.1.158 dvl-mrszk-002
10.168.152.227 dvl-mrszk-003

5)再来/usr/zookeeper/bin文件夹,#./zkServer.sh start启动zk,然后再#./zkServer.sh status查看进程情况,如图看见第一台和第三台zkserver的身份是follower,第二台是leader:

1.png

wKiom1hvQXWQsW7GAABVF8iSiXs863.png

wKiom1hvQcnyJRLvAABVaQSSoYI199.png

至此整个zk集群就搭建并且启动完成了。

注意:zookeeper集群时,zookeeper要求半数以上的机器可用,zookeeper才能提供服务。


如果这里有启动失败的情况,比如'Error contacting service. It is probably not running.'这样的字样,那么有三种可能:

1)data文件夹下的myid有数字重复或者是数字漏写的情况;

2)zoo.cfg里的指定日志文件夹没有手动创建;

3)/etc/hosts下的名字与zoo.cfg里的server字段不相符,注意一下,/etc/hosts里的127.0.0.1的名字不要与本ip后面的名字一模一样,不然zk也无法识别!

4)/etc/hosts名字使用了中文,java系对中文是很不友好的。


验证成果

Zookeeper的配置工具叫Zooinspector,下载地址是:

https://issues.apache.org/jira/secure/attachment/12436620/ZooInspector.zip,下载完直接解压缩就可以在windows里使用。


我们实验的这三台服务器只有内网,但是如果要连接zooinspector,还是需要通过外网权限连接的,这里可以配一个iptables转发规则,配iptables的步骤在这里:http://chenx1242.blog.51cto.com/10430133/1875950,照葫芦画瓢即可,但是要注意,zk的端口是2181。


当然,如果不想费事的话,就直接给zkserver 配一个外网IP,直接连接。


成功连接到zooinspector,就会看到这样的内容,这里的lcconfig是手动添加的,右击鼠标,选择add node,然后直接写上lcconfig就行,这个名字是根据实际需要填写的:

wKiom1hvRZfwqGh5AABTbgg-CK0609.png


上面我们已经配置了zkserver集群而且还启动zkserver进程,现在还需要zkclient,zkclient就是请求发起的一方,然后我们可以在各个的模块服务器上部署zkclient服务,通过启动zkclient服务,来让这些模块统一从zooinspector里取值,这样就达到了批量配置,同时保证一致性的效果。


zk的模板文件是_tpl.properties为结尾的文件,我这里模块的名字叫mrs,那么在实验里这个模板文件就是mrs_tpl.properties,这个mrs_tpl.properties里有这样的一个字段,如图:

wKiom1hvTfXSvaAtAABQm_XNalo985.png


而我们在zooinspector里对应就这么填写:

wKioL1hvTjnx9a6eAAAeVS4GXp4605.png


保存zooinspector,然后从windows返回到linux,启动zkclient服务和对应的模块进程,如果配置都正常的话,那么程序就会正常启动,# ps -ef|grep java就会看到一个叫“lczk.AppServerDaemon”的进程。这个时候在去看一下mrs的配置文件:

wKioL1hvTsqAlL33AAAgLK9xHvY968.png

可以看到areaAk取得值就是zk里面data_center里面access_key里面的ak的值,其他的几个值也是同理。可见整个zk已经配置成功,模块都进行了统一配置,而且这些配置既然能被一个接受,同时也会被其他相同的模块服务器所接受。



拓展阅读:http://ibruce.info/2014/10/23/zookeeper/


 本文转自 苏幕遮618 51CTO博客,原文链接:http://blog.51cto.com/chenx1242/1889715

相关实践学习
基于MSE实现微服务的全链路灰度
通过本场景的实验操作,您将了解并实现在线业务的微服务全链路灰度能力。
相关文章
|
6月前
|
网络安全 虚拟化
zookeeper集群不能通讯
zookeeper集群不能通讯
|
6月前
|
消息中间件 存储 Kubernetes
Helm方式部署 zookeeper+kafka 集群 ——2023.05
Helm方式部署 zookeeper+kafka 集群 ——2023.05
239 0
|
4月前
|
存储 Java Linux
【Zookeeper】基于3台linux虚拟机搭建zookeeper集群(二)
【Zookeeper】基于3台linux虚拟机搭建zookeeper集群
73 1
【Zookeeper】基于3台linux虚拟机搭建zookeeper集群(二)
|
1月前
|
消息中间件 存储 Kafka
Kafka【环境搭建 02】kafka_2.11-2.4.1 基于 zookeeper 搭建高可用伪集群(一台服务器实现三个节点的 Kafka 集群)
【2月更文挑战第19天】Kafka【环境搭建 02】kafka_2.11-2.4.1 基于 zookeeper 搭建高可用伪集群(一台服务器实现三个节点的 Kafka 集群)
140 1
|
5月前
|
消息中间件 数据可视化 Kafka
消息中间件系列教程(21) -Kafka- 集群搭建(自带Zookeeper)
消息中间件系列教程(21) -Kafka- 集群搭建(自带Zookeeper)
67 0
|
5月前
|
算法 Linux
分布式系列教程(14) -分布式协调工具Zookeeper(集群选举策略)
分布式系列教程(14) -分布式协调工具Zookeeper(集群选举策略)
56 0
|
5月前
|
Java Linux
Zookeeper集群搭建
Zookeeper集群搭建
|
2月前
|
网络协议 中间件 数据库
Zookeeper学习系列【三】Zookeeper 集群架构、读写机制以及一致性原理(ZAB协议)
Zookeeper学习系列【三】Zookeeper 集群架构、读写机制以及一致性原理(ZAB协议)
92 0
|
2月前
|
网络协议
Zookeeper学习系列【二】Zookeeper 集群章节之集群搭建
Zookeeper学习系列【二】Zookeeper 集群章节之集群搭建
34 0
|
3月前
|
Java
搭建Zookeeper集群的搭建
搭建Zookeeper集群的搭建
30 1