zookeeper集群搭建

2.1环境准备

       在需要安装zookeeper的机器上安装java，配置JAVA_HOME

       准备zookeeper的源码包，配置zookeeper的环境变量ZOOKEEPER_HOME(可选)

       需要打开使用到的防火墙的相应端口

2.2安装

       注：以下涉及到的目录和端口可修改、可自定义

 

 

       在所有zookeeper机器上解压zookeeper的源码包到指定目录

mkdir -p /local/software/zookeeper/

tar –xzfzookeeper-3.4.6.tar.gz  -C  /local/software/zookeeper/

 

2.3配置

这里以三台机器的配置为例，具体配置如下：

第一步：

建立数据目录

 mkdir  -p  /local/software/zookeeper/zookeeper-3.4.6/data

第二步：

编辑配置文件

vi  /local/software/zookeeper/zookeeper-3.4.6/conf/zoo.cfg

 

dataDir=/local/software/zookeeper/zookeeper-3.4.6/data

clientPort=2181 

initLimit=10 

syncLimit=5 

tickTime=2000 

server.1= IP1:2888:3888 

server.2= IP2:2888:3888 

server.3= IP3:2888:3888

 

其中server.X代表组成整个服务的机器，当服务启动时，会在数据目录下查找这个文件myid,这个文件中存有服务器的号码。下面会讲myid文件的配置。

      

第三步：

       在每个机器的数据目录（ /local/software/zookeeper/zookeeper-3.4.6/data）下，创建myid文件。编辑该“myid”文件，并在对应的IP的机器上输入对应的编号。如在IP1上，“myid”文件内容就是1，在IP2上，内容就是2，在IP3上，内容就是 3。

2.4启动集群

       分别在三台机器上启动zookeeper

       cd /local/software/zookeeper/zookeeper-3.4.6/bin

       执行./zkServer.sh start

       无限定先后顺序，但三台机器上的指令间隔时间不宜太久，因为有timeout时间限定

没有出错信息，则成功启动

2.5执行测试

       三台机器都启动成功后可进行测试

在一台机器如server.2上进行一个写操作：

＄bin/zkCli.sh -server 127.0.0.1:2181

[zk: 127.0.0.1:2181(CONNECTED) 1] create /mytest test

[zk: 127.0.0.1:2181(CONNECTED) 3] ls /

[mytest, zookeeper]

[zk: 127.0.0.1:2181(CONNECTED) 5] get /mytest

test

cZxid = 0x100000002

ctime = Mon Jul 19 03:30:20 EDT 2010

mZxid = 0x100000002

mtime = Mon Jul 19 03:30:20 EDT 2010

pZxid = 0x100000002

cversion = 0

dataVersion = 0

aclVersion = 0

ephemeralOwner = 0x0

dataLength = 4

numChildren = 0

 

在其他机器上查询：（如ssh:// server.3）

[zk: 127.0.0.1:2181(CONNECTED) 1] ls /

[mytest, zookeeper]

[zk: 127.0.0.1:2181(CONNECTED) 2] ls /mytest

[]

[zk: 127.0.0.1:2181(CONNECTED) 3] get /mytest

test

cZxid = 0x100000002

ctime = Mon Jul 19 03:30:20 EDT 2010

mZxid = 0x100000002

mtime = Mon Jul 19 03:30:20 EDT 2010

pZxid = 0x100000002

cversion = 0

dataVersion = 0

aclVersion = 0

ephemeralOwner = 0x0

dataLength = 4

numChildren = 0

 

$bin/zkServer.sh status

JMX enabled by default

Using config:/local/software/zookeeper/zookeeper-3.3.1/bin/../conf/zoo.cfg

2010-07-19 04:09:49,862 - INFO  [NIOServerCxn.Factory:0.0.0.0/0.0.0.0:2181:NIOServerCnxn$Factory@250]- Accepted socket connection from /127.0.0.1:42234

2010-07-19 04:09:49,864 - INFO [NIOServerCxn.Factory:0.0.0.0/0.0.0.0:2181:NIOServerCnxn@1236] -Processing stat command from /127.0.0.1:42234

2010-07-19 04:09:49,866 - INFO [Thread-20:NIOServerCnxn$StatCommand@1152] - Stat command output

2010-07-19 04:09:49,866 - INFO  [Thread-20:NIOServerCnxn@1434]- Closed socket connection for client /127.0.0.1:42234 (no session establishedfor client)

Mode: follower

 

 注意事项

     通过shell脚本在每个机器上启动zookeeper的时候，可能会显示错误信息“Cannot open channel toX at election address”。这是由于zoo.cfg文件中指定的其他zookeeper服务找不到所导致。所有机器的zookeeper服务启动之后该错误提示将会消失。

 

 

3.    常用配置参数说明

•     tickTime：这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime 时间就会发送一个心跳。

•     dataDir：顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。

•     clientPort：这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。

•     initLimit：这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper 服务器的客户端，而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。当已经超过 10 个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，那么表明这个客户端连接失败。总的时间长度就是 5*2000=10 秒

•     syncLimit：这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=4 秒

•     server.A=B：C：D：其中 A 是一个数字，表示这个是第几号服务器；B 是这个服务器的 ip 地址；C 与Leader 服务器交换信息的端口；D选举端口，选出一个新的 Leader