Fork me on GitHub

zookeeper集群部署

字数统计: 1.9k字   |   阅读时长≈ 8分 
1
因为公司的业务发展，需要搭建codis集群（一个由国内豌豆荚开发的redis集群解决方案），但是codis集群是依赖与zookeeper集群的。所以这篇文章，我们主要介绍有关zookeeper集群的搭建。

Zookeeper介绍

1
2
3
4
5
zookeeper是一个分布式的开源框架，它能很好的管理集群，而且提供协调分布式应用的基本服务。

它向外部应用暴露一组通用服务——分布式同步（Distributed Synchronization）、命名服务（Naming Service）、集群维护（Group Maintenance）等，简化分布式应用协调及其管理的难度，提供高性能的分布式服务。

zookeeper本身可以以standalone模式（单节点状态）安装运行，不过它的长处在于通过分布式zookeeper集群（一个leader，多个follower），基于一定的策略来保证zookeeper集群的稳定性和可用性，从而实现分布式应用的可靠性。

zookeeper集群节点个数

1
2
3
4
5
一个zookeeper集群需要运行几个zookeeper节点呢？

zookeeper节点部署的越多，服务的可靠性也就越高。当然建议最好是部署奇数个，偶数个不是不可以。但是zookeeper集群是以宕机个数过半才会让整个集群宕机的，所以奇数个集群更佳。

你需要给每个zookeeper 1G左右的内存，如果可能的话，最好有独立的磁盘，因为独立磁盘可以确保zookeeper是高性能的。如果你的集群负载很重，不要把zookeeper和RegionServer运行在同一台机器上面，就像DataNodes和TaskTrackers一样。

安装部署

环境

1
2
OS: CentOS7 
数量: 3台

安装jdk

1
2
3
yum search jdk |grep openjdk
yum install -y java-1.6.0-openjdk.x86_64
java -version     #查看java版本

安装zookeeper

1
2
3
4
5
6
7
8
9
10
11
下载最新稳定版zookeeper
wget https://archive.apache.org/dist/zookeeper/stable/zookeeper-3.4.10.tar.gz

解压
tar -xf zookeeper-3.4.10.tar.gz -C /usr/local/
cd /usr/local/
mv zookeeper-3.4.10 zookeeper
useradd zookeeper -s /sbin/nologin -M
chown -R zookeeper:zookeeper zookeeper
cd zookeeper
cp conf/zoo_sample.cfg conf/zoo.cfg
1
2
3
4
5
6
配置zookeeper环境变量
tail -1 /etc/profile
export PATH=$PATH:/usr/local/zookeeper/bin

source /etc/profile
env |grep zookeeper

单机启动zookeeper测试

1
2
3
4
5
6
7
8
9
10
11
12
在任意一台服务器上启动zookeeper
zkServer.sh start       #启动zookeeper
ss -lntup |grep 2181    #查看端口
cat ./zookeeper.out     #查看日志

[root@localhost ~]# zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg
Mode: standalone
可以很明显的看到zookeeper监听的是TCP的2181端口，是以standalone单机模式运行的，而且通过zookeeper日志也可以看到目前zookeeper是正常运行的。

zkServer.sh stop  #停止单机模式zookeeper服务

集群部署

1
2
3
zookeeper搭建完毕后，我们现在来配置zookeeper集群。

注意：在搭建zookeeper集群时，一定要停止已经启动的zookeeper。

修改zookeeper配置文件

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
创建日志和数据存放目录并授权
[root@localhost conf]# mkdir /var/log/zookeeper -p
[root@localhost conf]# chown -R zookeeper:zookeeper /var/log/zookeeper
[root@localhost zookeeper]# mkdir /usr/local/zookeeper/data -p
[root@localhost zookeeper]# chown -R zookeeper.zookeeper /usr/local/zookeeper/data

cd /usr/local/zookeeper/conf/
编辑配置文件zoo.cfg
[root@localhost conf]# egrep -v "^#|^$" zoo.cfg 
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/usr/local/zookeeper/data
clientPort=2181
dataLogDir=/var/log/zookeeper
server.1= 10.0.10.57:2888:3888
server.2= 10.0.10.58:2888:3888
server.3= 10.0.10.59:2888:3888
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
配置文件-参数说明:

tickTime这个时间是作为zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是说每个tickTime时间就会发送一个心跳。

initLimit这个配置项是用来配置zookeeper接受客户端（这里所说的客户端不是用户连接zookeeper服务器的客户端,而是zookeeper服务器集群中连接到leader的follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。

当已经超过10个心跳的时间（也就是tickTime）长度后 zookeeper 服务器还没有收到客户端的返回信息,那么表明这个客户端连接失败。总的时间长度就是 10*2000=20秒。

syncLimit这个配置项标识leader与follower之间发送消息,请求和应答时间长度,最长不能超过多少个tickTime的时间长度,总的时间长度就是5*2000=10秒。

dataDir顾名思义就是zookeeper保存数据的目录,默认情况下zookeeper将写数据的日志文件也保存在这个目录里；

clientPort这个端口就是客户端连接Zookeeper服务器的端口,Zookeeper会监听这个端口接受客户端的访问请求；

server.A=B:C:D中的A是一个数字,表示这个是第几号服务器,B是这个服务器的IP地址，C第一个端口用来集群成员的信息交换,表示这个服务器与集群中的leader服务器交换信息的端口，D是在leader挂掉时专门用来进行选举leader所用的端口。

创建ServerID标识

1
2
3
4
5
6
7
8
9
10
注：zookeeper集群模式下还要配置一个myid文件,这个文件需要放在dataDir目录下。

(1)在10.0.10.57服务器上创建myid文件,并设置值为1,同时需要与zoo.cfg文件里面的server.1对应
   echo "1" > /usr/local/zookeeper/data/myid
   
(2)在10.0.10.58服务器上创建myid文件,并设置值为2,同时需要与zoo.cfg文件里面的server.2对应
   echo "2" > /usr/local/zookeeper/data/myid
   
(3)在10.0.10.59服务器上创建myid文件,并设置值为3,同时需要与zoo.cfg文件里面的server.3对应
   echo "3" > /usr/local/zookeeper/data/myid

启动并查看zookeeper集群

1
2
3
4
5
分别启动三台zookeeper服务器服务
zkServer.sh start

在任意一台查看zookeeper集群服务状态(注：需要所有成员服务器均启动服务后才能查看，否则会报错)
zkServer.sh status
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
IP地址: 10.0.10.57/24
[root@localhost ~]# zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg
Mode: follower

IP地址: 10.0.10.58/24
[root@localhost ~]# zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg
Mode: leader

IP地址: 10.0.10.59/24
[root@localhost ~]# zkServer.sh status
ZooKeeper JMX enabled by default
Using config: /usr/local/zookeeper/bin/../conf/zoo.cfg
Mode: follower

出现以上信息说明：zookeeper集群已经成功部署。

连接zookeeper集群

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
对于客户端来说，zookeeper集群是一个整体，连接到zookeeper集群实际上感觉在独享整个集群的服务，所以，你可以在任何一个结点上建立到服务集群的连接。例如：

在其中10.0.10.57节点使用zkCli.sh命令连接zookeeper服务器10.0.10.59:2181,如下
[root@localhost ~]# zkCli.sh -server 10.0.10.59:2181
Connecting to 10.0.10.59:2181
2017-11-28 02:12:42,232 [myid:] - INFO  [main:Environment@100] - Client environment:zookeeper.version=3.4.10-39d3a4f269333c922ed3db283be479f9deacaa0f, built on 03/23/2017 10:13 GMT
2017-11-28 02:12:42,238 [myid:] - INFO  [main:Environment@100] - Client environment:host.name=localhost

WatchedEvent state:SyncConnected type:None path:null
[zk: 10.0.10.59:2181(CONNECTED) 0] 
[zk: 10.0.10.59:2181(CONNECTED) 0] ls /            
[zookeeper]
[zk: 10.0.10.59:2181(CONNECTED) 1] 
[zk: 10.0.10.59:2181(CONNECTED) 1]

到此有关zookeeper集群搭建就完全结束。

开机自启

脚本如下：

1
2
3
4
5
6
7
8
9
10
11
#!/bin/bash  
#chkconfig:2345 20 90  
#description:zookeeper  
#processname:zookeeper
case $1 in  
        start) /usr/local/zookeeper/bin/zkServer.sh start;;  
        stop) /usr/local/zookeeper/bin/zkServer.sh stop;;  
        status) /usr/local/zookeeper/bin/zkServer.sh status;;  
        restart) /usr/local/zookeeper/bin/zkServer.sh restart;;  
        *) echo "require start|stop|status|restart" ;;  
esac

chkconfig –add zookeeper && chkconfig –list |grep zookeeper

参考： 烂泥行天下

扫一扫，分享到微信

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia-plus根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true


不论我写了什么...
其实都是错的......