Zookeeper一

来源:互联网 发布:手机怎么查mac地址 编辑:程序博客网 时间:2024/06/05 07:33
1.Zookeeper的简介
   1. Zookeeper本身就是分布式的 , 可以为我们的应用程序和应用请求提供分布式的协调服务,是典型的分布式数据一致性的解决方案 , 我们可以基于ZK在分布式系统中实现更高级服务(或者说基于ZK能帮我干那些事情), 比如:数据的发布/订阅 , 分布式协调/通知 , 分布式锁 ,分布式队列 , 分布式配置 , 负载均衡管理 , 统一的命名服务 , Master 选举 ;
   2.在解决分布式数据一致性方面 , 采用了ZAB(zookeeper atomic broadcast)的一致性协议;
   3.越来越多的分布式计算开始依赖ZK , 比如 Storm , Hbase 等 ;
   4.特点:
      a:zk的数据结构简单: 类似于文件系统的目录树结构 , 由多个znode 组成znode 树 ;
      b:顺序的一致性:严格按照客户端发送请求的顺序来进行更新数据(为客户端请求分配全局唯一的ID) ;
      c:原子性:对事务请求处理的结果要么全部应用到集群中的每一台机器上 , 要么都不应用到集群中的机器上 , 不会出现集群中一部分应用到 , 一部分没有应用到 ;
      d:单一视图性:无论客户端连接那个服务端 ,看到服务端数据模型都是一致的;
      e:可靠性:一旦服务端数据更新成功 ,将一直保持 , 直到有新数据更新 ;

       f:实时性:ZK保证了在一定的时间段内 ,客户端能够获得服务端上的最新数据 ;

2.Zookeeper安装
    1. http://zookeeper.apache.org/doc/r3.4.6/ 下载 zookeeper3.4.6版本
    2. tar -xzvf zookeeper-3.4.6.tar.gz 解压缩到到相应的目录
    3. 修改 zoo.cfg 配置文件
       3-1: 将zookeeper-3.4.6\conf\ zoo_sample.cfg 拷贝一份并命名为 zoo.cfg


4.Zookeeper安装
1.创建dataDir、dataLogDir目录
•mkdir -p /home/zookeeperdir/zookeeper-data1
•mkdir -p /home/zookeeperdir/logs1
2.设置myid
•在dataDir目录下创建myid文件,该文件的内容根据server定义的不同而不同,如server.1 该文件的内容是1,server.2 该文件内容是 2,以此类推.


server.A=B:C:D:其中 A 是一个数字,表示这个是第几号服务器;B 是这个服务器的 ip 地址;C 表示的是这个服务器与集群中的 Leader 服务器交换信息的端口;D 表示的是万一集群中的 Leader 服务器挂了,需要一个端口来重新进行选举,选出一个新的 Leader,而这个端口就是用来执行选举时服务器相互通信的端口。如果是伪集群的配置方式,由于 B 都是一样,所以不同的 Zookeeper 实例通信端口号不能一样,所以要给它们分配不同的端口号。

在dataDir目录下创建一个myid文件,然后分别在myid文件中按照zoo.cfg文件的server.A中A的数值,在不同机器上的该文件中填写相应的值。


3.启动zookeeper
•在每个节点上执行zookeeper/bin目录命令
•[usr1@node1 bin]$ ./zkServer.sh start
•JMX enabled by default
•Using config: /usr1/zookeeper/bin/../conf/zoo.cfg
•Starting zookeeper ... STARTED

4.验证
•[usr1@node4 bin]$ ./zkServer.sh status
•JMX enabled by default
•Using config: /usr1/zookeeper/bin/../conf/zoo.cfg
•Mode: leader
•注:通过shell脚本在每个机器上启动zookeeper的时候,可能会显示错误信息“Cannot open channel to X at electionaddress”。这是由于zoo.cfg文件中指定的其他zookeeper服务找不到所导致,是由于部分zookeeper服务器还没有启动连接不上报的错,在所有机器zookeeper服务启动之后该错误提示将会消失。

4.Zookeeper运行
ZooKeeper有三种运行模式:集群模式 , 单机模式 , 伪集群模式
1.集群模式
在集群模式下 , 集群中的每台机器都需要感知到整个集群中是由那几台机器组成的 , 在每台机器的 配置文件中 , 可以按照这样的格进行配置 , 每一行都代表一台机器 server.id = host:port1:port2
id: id被称为server id , 用来标识机器在集群中的机器序号 , 存储在myid文件中 ,
且 id 的范围1到255之间
port1: follower服务器与leader服务器运行进行通信时的端口
port2: leader选举过程中投票通信时的端口
集群中的每台机器的配置是相同的
比如:ip1 , ip2 , ip3 做集群
server.1= ip1:2800:3800
server.2= ip2:2800:3800
server.3= ip3:2800:3800
2.单机模式
在单机模式下 , 在zoo.cfg 配置文件中 , 只有 一个 server.1 的配置
3.伪集群模式
在伪集群模式下 , 在zoo.cfg 配置文件中 , 配置同一个IP不同的端口
比如:
server.1=ip1:2800:3800
server.2=ip1:2801:3801
server.3=ip1:2802:3802

5.Zookeeper的命令

1. 启动ZK服务: sh bin/zkServer.sh start
2. 查看ZK服务状态: sh bin/zkServer.sh status
3. 停止ZK服务: sh bin/zkServer.sh stop
4. 重启ZK服务: sh bin/zkServer.sh restart
5.连接zookeeper服务:zkCli.sh –server 192.168.179.131:2181
6.创建节点:create [-s] [-e] path data acl 比如: create /zk myData
7.获取节点信息:get path [watch] 比如: get /zk
8.查看节点信息:ls path [watch] 比如: ls path [watch] 比如: ls /
9. 查看节点第一级的子节点和节点的状态信息: ls2 path [watch] 比如: ls2 /
10.更改节点信息:set path data [version] 比如: set /zk myData2
11.删除节点:delete path [version] 比如: delete /zk
12.递归删除节点: rmr path 比如: rmr /zookeeper
13.验证zookeeper启动
telnet 127.0.0.1 2181
status
14.用sh zkCli.sh -server ip:port 后 , 敲任意键 , 会出现zk的client端的命令帮助
15. 获取某个节点的状态 :stat path [watch]
16. 为某个节点设置 acl 的访问控制 setAcl path acl
17.获取某个节点的acl 访问控制 getAcl path

6.Zookeeper配置