在CentOS上安装ZooKeeper集群

创建用户

一般我倾向于把需要启动daemon进程，对外提供服务的程序，即服务器类的程序，安装在单独的用户下面。这样可以做到隔离，运维方面，安全性也提高了。
创建一个新的group,
$ sudo groupadd zookeeper
创建一个新的用户，并加入group,
$ sudo useradd -g zookeeper zookeeper
给新用户设置密码，
$ sudo passwd zookeeper
1. 单机模式(Standalone mode)

单机模式

单机模式在开发和调试阶段很有用。
1.1 下载，解压

$ wget http://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz

$ tar zxf zookeeper-3.4.5.tar.gz -C ~/local/opt
1.2 启动

默认就是单机模式，
$ mv conf/zoo_sample.cfg conf/zoo.cfg

$ ./bin/zdServer.sh start
1.3 使用java 客户端连接ZooKeeper

$ ./bin/zkCli.sh -server 127.0.0.1:2181
然后就可以使用各种命令了，跟文件操作命令很类似，输入help可以看到所有命令。
1.4 关闭

$ ./bin/zdServer.sh stop

2 分布式模式(Replicated mode)

在生产环境中，要配置成分布式模式，才能发挥威力。
ZooKeeper集群一般被称为ZooKeeper ensemble，或者 quorum.

2.1 准备3台机器

假设有三台机器，hostname和ip对应关系是：
192.168.40.107 hadoop107
192.168.40.104 hadoop104
192.168.40.108 hadoop108

ZooKeeper不存在明显的master/slave关系，各个节点都是服务器，leader挂了，会立马从follower中选举一个出来作为leader.
由于没有主从关系，也不用配置SSH无密码登录了，各个zk服务器是自己启动的，互相之间通过TCP端口来交换数据。

2.2 修改hadoop107的配置文件conf/zoo.cfg

tickTime=2000 initLimit=10 syncLimit=5 dataDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/datadataLogDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/logsclientPort=2181server.1=hadoop107:2888:3888 server.2=hadoop104:2888:3888server.3=hadoop108:2888:3888

修改完后拷贝到hadoop104,以及hadoop108上

2.3 myid文件

要在每台机器的dataDir下，新建一个myid文件，里面存放一个数字，用来标识当前主机。
hadoop107:$ echo "1" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid
hadoop104:$ echo "2" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid
hadoop108:$ echo "3" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid

2.4 启动每台机器

hadoop107:$ zookeeper-3.4.6/bin/zkServer.sh start
hadoop104:$ zookeeper-3.4.6/bin/zkServer.sh start
hadoop108:$ zookeeper-3.4.6/bin/zkServer.sh start
因为3个节点的启动是有顺序的，所以在陆续启动三个节点的时候，前面先启动的节点连接未启动的节点的时候会报出一些错误。可以忽略。
2.5 查看状态
$ zookeeper-3.4.6/bin/zkServer.sh status

hadoop107的状态

hadoop104的状态

3 使用java客户端连接ZooKeeper集群

找一台机器，解压zookeeper压缩包，不用配置，就可以使用java客户端连接ZooKeeper集群中的任意一台服务器了。
$ ./bin/zkCli.sh -server hadoop104:2181