ZooKeeper集群搭建

一、zookeeper集群简介

Zookeeper集群中只要有过半的节点是正常的情况下,那么整个集群对外就是可用的。正是基于这个特性,要将 ZK 集群的节点数量要为奇数(2n+1),如 3、5、7 个节点)较为合适。

二、环境准备

IP

端口

用户

192.168.31.154

2181、2881、3881

dreyer03

192.168.31.117

2182、2882、3882

dreyer04

192.168.31.146

2183、2883、3883

dreyer05

三、具体安装步骤

1、 修改每台机器的/etc/hosts 文件,添加 IP 与主机名映射:

1

# vi /etc/hosts

增加:

192.168.31.154 dreyer-zk-01 
192.168.31.117 dreyer-zk-02 
192.168.31.146 dreyer-zk-03

2、 下载或上传 zookeeper-3.4.6.tar.gz 到/home/dreyer/zookeeper 目录:

1

$ wget http://apache.fayea.com/zookeeper/zookeeper-3.4.6/zookeeper-3.4.6.tar.gz

3、解压zookeeper安装包,并对照节点号对zookeeper目录进行重命名 解压安装包:

1

$ tar -zxvf zookeeper-3.4.6.tar.gz

将服务器1的zookeeper目录重命名为node-01:

1

$ mv zookeeper-3.4.6 node-01

将服务器2的zookeeper目录重命名为node-02:

1

$ mv zookeeper-3.4.6 node-02

将服务器3的zookeeper目录重命名为node-03:

1

$ mv zookeeper-3.4.6 node-03

4、在各个zookeeper节点目录创建data、logs目录

$ CD /家庭/ dreyer03 /动物园管理员/节点-0X /(X代表节点号1,2,3,以下同解)
$ MKDIR数据
$ MKDIR日志

5、将zookeeper/node-0X/conf目录下的zoo_sample.cfg文件拷贝一份,并命名为zoo.cfg

1

$ cp zoo_sample.cfg zoo.cfg

6、修改zoo.cfg配置文件 zookeeper/node-01的配置如下:

滴答时间= 2000 
initLimit = 10 
同步限值为5 
DATADIR = /家庭/ dreyer03 /动物园管理员/节点-01 /数据
dataLogDir = /家庭/ dreyer03 /动物园管理员/节点-01 /日志
客户端端口= 2181 
server.1 = Dreyer的-ZK-01: 2881:3881 
server.2 = Dreyer的-ZK-02:2882:3882 
server.3 = Dreyer的-ZK-03:2883:3883

zookeeper/node-02的配置如下:

滴答时间= 2000 
initLimit = 10 
同步限值为5 
DATADIR = /家庭/ dreyer04 /动物园管理员/节点-02 /数据
dataLogDir = /家庭/ dreyer04 /动物园管理员/节点-02 /日志
客户端端口= 2182 
server.1 = Dreyer的-ZK-01: 2881:3881 
server.2 = Dreyer的-ZK-02:2882:3882 
server.3 = Dreyer的-ZK-03:2883:3883

zookeeper/node-03的配置如下:

滴答时间= 2000 
initLimit = 10 
同步限值为5 
DATADIR = /家庭/ dreyer05 /动物园管理员/节点-03 /数据
dataLogDir = /家庭/ dreyer05 /动物园管理员/节点-03 /日志
客户端端口= 2183 
server.1 = Dreyer的-ZK-01: 2881:3881 
server.2 = Dreyer的-ZK-02:2882:3882 
server.3 = Dreyer的-ZK-03:2883:3883

参数说明:

  • tickTime=2000:tickTime 这个时间是作为 Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每各tickTime 时间就会发送一个心跳。
  • initLimit=10:initLimit 这个配置项是用来配置 Zookeeper 接受客户端(这里所说的客户端不是用户连接 Zookeeper 服务器的客户端, 而是Zookeeper 服务器集群中连接到 Leader 的 Follower服务器)初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过10个心跳的时间(也就是 tickTime)长度后 Zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒。
  • syncLimit=5:syncLimit 这个配置项标识Leader与Follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime 的时间长度,总的时间长度就是 5*2000=10 秒。
  • dataDir=/home/dreyer05/zookeeper/node-03/data: dataDir 顾名思义就是 Zookeeper 保存数据的目录,默认情况下 Zookeeper 将写数据的日志文件也保存在这个目录里。
  • clientPort=2181:clientPort 这个端口就是客户端(应用程序)连接 Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求。
  • server.A=B:C:D
server.1 =德雷尔-ZK-01:2881:3881 
server.2 = Dreyer的-ZK-02:2882:3882 
server.3 = Dreyer的-ZK-03:2883:3883

A 是一个数字,表示这个是第几号服务器; B 是这个服务器的 IP 地址(或者是与 IP 地址做了映射的主机名); C 第一个端口用来集群成员的信息交换,表示这个服务器与集群中的 Leader 服务器交换信息的端口; D 是在 leader 挂掉时专门用来进行选举 leader 所用的端口。 注意:如果是伪集群的配置方式,不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不 同的端口号。

7、在dataDir=/home/dreyer03/zookeeper/node-0X/data下创建myid文件 编辑myid文件,并在对应的IP机器上输入对应的编号,比如说node-01上,myid文件的内容就是1,node-02上,myid的内容就是2,node-03上,myid的内容就是3

1

$ vi /home/dreyer03/zookeeper/node-01/data/myid #输入1

1

$ vi /home/dreyer04/zookeeper/node-02/data/myid #输入2

1

$ vi /home/dreyer05/zookeeper/node-03/data/myid #输入3

8、在每台机器的防火墙中打开要用到的端口,218X、288X、388X 切换到root用户后:

1

# vi /etc/sysconfig/iptables

在服务器1号中增加:

##饲养员
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2181 -j ACCEPT 
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2881 -j ACCEPT 
-一个INPUT -m状态--state NEW -m tcp -p tcp --direction 3881 -j ACCEPT

在服务器2号中增加:

##饲养员
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2182 -j ACCEPT 
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2882 -j ACCEPT 
-一个INPUT -m状态--state NEW -m tcp -p tcp --direction 3882 -j ACCEPT

在服务器3号中增加:

##饲养员
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2183 -j ACCEPT 
-A INPUT -m状态--state NEW -m TCP -p tcp的--dport 2883 -j ACCEPT 
-一个INPUT -m状态--state NEW -m tcp -p tcp --date 3883 -j ACCEPT

以上,防火墙中增加端口后要记得重启防火墙 重启防火墙:

1

# service iptables restart

查看防火墙状态:

1

# service iptables status

9、启动并测试zookeeper(用普通用户启动,不要用root用户)

1

$ /home/dreyer03/zookeeper/node-01/bin/zkServer.sh start

1

$ /home/dreyer04/zookeeper/node-02/bin/zkServer.sh start

1

$ /home/dreyer05/zookeeper/node-03/bin/zkServer.sh start

注意: zookeeper的启动日志在/bin目录下的zookeeper.out文件 在启动第一个节点后,查看日志信息会看到如下异常:

java.net.ConnectException:连接被拒绝
        在java.net.PlainSocketImpl.socketConnect(本机方法)
        在java.net.AbstractPlainSocketImpl.doConnect(AbstractPlainSocketImpl.java:339)
        在java.net.AbstractPlainSocketImpl.connectToAddress(AbstractPlainSocketImpl.java:200)
        在java.net.AbstractPlainSocketImpl.connect(AbstractPlainSocketImpl.java:182)
        在java.net.SocksSocketImpl.connect(SocksSocketImpl.java:392)
        在java.net.Socket.connect(Socket.java:579)
        在org.apache。 zookeeper.server.quorum.QuorumCnxManager.connectOne(QuorumCnxManager.java:368)
        在org.apache.zookeeper.server.quorum.QuorumCnxManager.connectAll(QuorumCnxManager.java:402)
        在org.apache.zookeeper.server.quorum.FastLeaderElection.lookForLeader(FastLeaderElection.java:840)
        在org.apache.zookeeper.server.quorum.QuorumPeer.run(QuorumPeer.java:762)
2016年7月30日17时13分:16.032 [本身份识别码:1] - INFO [仲裁对等体[本身份识别码= 1] / 0:0:0:0:0:0:0:0:2181:几乎领导人选举@ 849] -通知超时:51200

这是正常的,因为配置文件中配置了此节点是属于集群中的一个节点,zookeeper集群只有在过半的节点是正常的情况下,此节点才会正常,它是一直在检测集群其他两个节点的启动的情况。 那在我们启动第二个节点之后,我们会看到原先启动的第一个节点不会在报错,因为这时候已经有过半的节点是正常的了。

10、查看zookeeper的状态

1

$ /home/dreyer03/zookeeper/node-01/bin/zkServer.sh status

会看到输出信息:

默认情况下启用JMX 
使用配置:/home/dreyer03/zookeeper/node-01/bin/../conf/zoo.cfg 
时尚:关注

follower表示此节点为从节点;leader表示此节点为主节点

11、停止zookeeper进程

1

$ /home/dreyer04/zookeeper/node-02/bin/zkServer.sh stop

在我们停止主节点之后,我们查看另外另个从节点的状态可以看到,原先的一个从节点会被重新选举为主节点。

12、设置zookeeper开机启动 编辑node-01、node-02、node-03节点所在服务器的/etc/rc.local文件,分别加入:

1

su - dreyer03-c '/home/dreyer03/zookeeper/node-01/bin/zkServer.sh start'

1

su - dreyer04-c '/home/dreyer04/zookeeper/node-02/bin/zkServer.sh start'

1

su- dreyer05-c '/home/dreyer05/zookeeper/node-03/bin/zkServer.sh start

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏Netkiller

PHP高级编程之守护进程

PHP高级编程之守护进程 摘要 2014-09-01 发表 2015-08-31 更新 2015-10-20 更新,增加优雅重启 ---- 目录 1. 什么是守...

3234
来自专栏openshift持续集成

jenkins邮件插件中的内容参数设置

众所周知,Jenkins默认提供了一个邮件通知,能在构建失败、构建不稳定等状态后发送邮件。但是它本身有很多局限性,比如它的邮件通知无法提供详细的邮件内容、无法定...

8208
来自专栏Netkiller

Linux 系统安全与优化配置

Linux 系统安全与优化配置 Linux 系统安全问题 ---- 目录 1. Openssh 安全配置 1.1. 禁止root用户登录 1.2. 限制SSH验...

4155
来自专栏JavaEdge

Shiro实战(五) - 会话管理

Shiro提供了完整的企业级会话管理功能,不依赖于底层容器(如web容器Tomcat),不管JavaSE还是JavaEE环境都可以使用,提供了会话管理、会话事件...

2653
来自专栏漫漫前端路

前端安全知识

xss: 跨站脚本攻击(Cross Site Scripting)是最常见和基本的攻击 WEB 网站方法,攻击者通过注入非法的 html 标签或者 javasc...

1042
来自专栏Golang语言社区

Leaf 游戏服务器框架简介

下载地址: https://github.com/name5566/leaf/blob/master/TUTORIAL_ZH.md Leaf 游戏服务器框架简介...

5948
来自专栏Netkiller

PHP高级编程之守护进程

PHP高级编程之守护进程 摘要 2014-09-01 发表 2015-08-31 更新 2015-10-20 更新,增加优雅重启 ---- 目录 1. 什么是守...

3087
来自专栏恰同学骚年

.NET Core微服务之基于Consul实现服务治理(续)

上一篇发布之后,很多人点赞和评论,不胜惶恐,这一篇把上一篇没有弄到的东西补一下,也算是给各位前来询问的朋友的一些回复吧。

1355
来自专栏大魏分享(微信公众号:david-share)

Oracle11g RAC双NFS仲裁容错方案

说明: 整理文档时发现自己在2010年写的一个RAC容灾方案,觉得有一些用,分享出来。当时为了验证此方案,做了很多PoC。方案相对比较复杂,但是也提供了一种思路...

5019
来自专栏北京马哥教育

神技能 | 手把手教您把CentOS7服务器变成上网路由器

*声明:推送内容及图片来源于网络,部分内容会有所改动,版权归原作者所有,如来源信息有误或侵犯权益,请联系我们删除或授权事宜。

3323

扫码关注云+社区