zookeeper重点总结

Zookeeper概要总结

1、zookeeper概述

Zookeeper是一个基于观察者模式的分布式服务管理框架，主要为分布式应用提供协调服务。

 

2、zookeeper的特点

1）Zookeeper集群：一个领导者（leader），多个跟随者（follower）组成的集群。

2）Leader负责进行投票的发起和决议，更新系统状态。

3）Follower用于接收客户请求并向客户端返回结果，在选举Leader过程中参与投票。

4）集群中只要有半数以上节点存活，Zookeeper集群就能正常服务。

5）全局数据一致：每个server保存一份相同的数据副本，client无论连接到哪个server，数据都是一致的。

6）更新请求顺序进行，来自同一个client的更新请求按其发送顺序依次执行。

7）数据更新原子性，一次数据更新要么成功，要么失败。

8） 实时性，在一定时间范围内，client能读到最新数据。

9）投票选举机制：半数通过即为leader。

 

3、zookeeper的安装

（1）  本地模式步骤：

1）、安装好JDK

2)、上传zookeeper.tar.gz到linux，解压到安装目录

3）、把conf目录下的zoo_sample.cfg修改为zoo.cfg

4）、编辑zoo.cfg，修改一下数据存储路径dataDir为自己指定的路径

5）、进入bin，启动zookeeper，./zkServer.shstart(若配置了zookeeper环境变量，直接执行脚本即可)

 

（2）  集群模式步骤：（完全分布式）

1）、将本地模式安装好的zookeeper稍作修改

2）、编辑zoo.cfg文件设置dataDir为自己指定的路径/opt/module/zookeeper-3.4.10/zkData

3）、在目录zkData下新建文件myid，myid文件中书写对应zookeeper服务器的编号，必须唯一

4）、编辑zoo.cfg,增加集群服务器的配置

增加如下配置

##############cluster#################（有几台配置几台）

server.2=hadoop102:2888:3888（内部通讯端口和选举端口）

server.3=hadoop103:2888:3888

server.4=hadoop104:2888:3888

5）、将配置好的zookeeper整体分发到其它服务器上（shell脚本，scp都可以）

6)、依次启动每台zookeeper服务器 ./zkServer.sh start（shell脚本一次全启也可以）

 

4、zookeeper的数据结构

ZooKeeper数据模型的结构与Unix文件系统很类似，整体上可以看作是一棵树，每个节点称做一个ZNode。每一个ZNode默认能够存储1MB的数据，每个ZNode都可以通过其路径唯一标识。

 

5、Znode节点类型（两种类型-四种形式）

1）Znode有两种类型：

短暂（ephemeral）：客户端和服务器端断开连接后，创建的节点自己删除

持久（persistent）：客户端和服务器端断开连接后，创建的节点不删除

2）Znode有四种形式的目录节点（默认是persistent ）

（1）持久化目录节点（PERSISTENT）

客户端与zookeeper断开连接后，该节点依旧存在。

（2）持久化顺序编号目录节点（PERSISTENT_SEQUENTIAL）

客户端与zookeeper断开连接后，该节点依旧存在，只是Zookeeper给该节点名称进行顺序编号。

（3）临时目录节点（EPHEMERAL）

客户端与zookeeper断开连接后，该节点被删除。

（4）临时顺序编号目录节点（EPHEMERAL_SEQUENTIAL）

客户端与zookeeper断开连接后，该节点被删除，只是Zookeeper给该节点名称进行顺序编号。

 

6、Znode节点的stat元数据结构体（部分重要点）

       主要有   id

       版本       version

       数据长度       dataLength

       子节点数量   numChildren

 

7、zookeeper监听器原理 （重点）

 

8、zookeeper的运用场景（主要）

（1）统一命名服务

（2）统一配置管理

（3）统一集群管理

（4）服务器节点动态上下线

（5）软负载均衡

统一命名服务 

统一配置管理

统一集群管理

服务器节点动态上下线

软负载均衡