Zookeeper 运维

来源:互联网 发布:osx数据恢复 编辑:程序博客网 时间:2024/06/05 10:38
一、运维配置

        参考:http://zookeeper.apache.org/doc/r3.4.6/zookeeperAdmin.html#sc_configuration

基础配置

        tickTime:最小事件间隔的长度。 
        dataDir:数据快照目录

高级配置

        dataLogDir:Zookeeper服务器存储事务日志文件的目录,默认和快照数据存储在同一个目录,我们应该尽量分开,尽量给事务日志的目录配置到一个单独的磁盘。可以极大的提高Zookeeper的整体性能。因为事务日志的记录多磁盘性能要求非常高, 为了保证数据的一致性,Zookeeper在返回客户端事务请求响应之前, 必须将本次请求对应的事务写入到磁盘中,因此事务日志写入的性能直接决定了Zookeeper在处理事务请求时的吞吐量,针对同一个磁盘的其他并发读写操作,尤其是快照操操作会极大的影响事务日志的写入性能。 
        globalOutstandingLimit:配置Zookeeper服务器最大请求堆积数。
        preAllocSize:配置Zookeeper事务日志文件预分配的磁盘空间的大小,默认为64m。
        snapCount:配置相邻两次数据快照之间的事务操作的次数,事务操作之后进行一次数据快照。 
        maxClientCnxns:socket层面上来限制单个客户端与单个服务器之间的并发连接数, 通过ip对连接进行限制。0:不做限制(只针对单台客户机和单台服务器的限制,不可以对集群进行总数的限制)
        clientPortAddress:针对多网卡的机器,可以为每个ip地址指定不同的监听端口。
        minSessionTimeout、maxSessionTimeout:服务器对客户端会话的超时时间进行限制(两数的范围内)。
        fsync.warningthresholdms:用于配置事务日志同步操作时消耗事件的报警阀值,一旦进行同步操作,消耗的事件大于这个参数的值,那么就会在日志中打印报警日志。
        autopurge.snapRetainCount:历史事务日志和快照日志自动清理。自动清理的时候需要保存的快照数据文件数量,和对应的事务日志文件 。最小值是3,配置的比3小的话会自动设置为3,至少需要保存3个快照数据文件和事务日志文件。 
        autopurge.purgeInterval:和上面一起使用,配置历史文件自动清理的频率,如果是0或者负数表示不需要开启定时清理的功能, 默认是0。
        electionAlg:配置Zookeeper的lender选举算法。3.4.0后只有一中选举算法,所以这个参数现在是没用了。 
        leaderServes:配置lender服务器是否接收客户端的连接,默认是可以接收的。(Zookeeper的lender是用来进行事务更新请求的协调,和集群本身的运行时的协调。这里可以设置不接收客户端的连接)
        syncLimit:lender和flower之间心跳检测的最大延迟时间。用来判断flower是否存活。默认5s,可以根据网络环境来调整。

二、ZooKeeper 4字命令

        因为很多命令都是4个字,所以叫4字命令。 

        判断Zookeeper是否启动
        telnet 192.168.10.5 2181
        连接成功后输入:stat,就可以查看到相关信息了。
        也可以通过nc的方式来实现:echo stat | nc 192.168.10.5 2181
        效果是一样的。
    
        其他命令
        stat:获取Zookeeper服务器运行时的状态信息。 

        srvr:和stat类似,仅仅输出服务器的自身信息,没有客户端的连接信息。
        
        conf:Zookeeper服务器运行时使用的基本配置信息。
        
        cons:输出当前服务器的所有客户的连接信息等

        crst:功能性的指令,用于重置所有客户端的连接统计信息。 

        dump:用于输出当前集群的会话信息,包括这么会话的会话id, 以及每个会话创建的临时节点等信息。 

        envi:输出Zookeeper所在服务器的运行时环境信息。 

        ruok:输出当前Zookeeper服务器是否正在运行。 

        wcsh输出当前服务器管理的watcher管理的概要信息 。 

        wchc:输出当前服务器上管理的watcher管理的详细信息。 

        wchp:和wchc类似,不同在于wchp已节点路径为单位。 

        mntr:输出比stat更为相信的服务器信息

三、在运维中使用 JMX

        对外提供运行时数据信息。

1. 需要修改Zookeeper服务器的启动脚本
    vim zkServer.sh,ZOOMSIN=修改为:
    ZOOMAIN="
-Dcom.sun.management.jmxremote
-Dcom.sun.management.jmxremote.local.only=true
-Djava.rmi.server.hostname=192.168.84.141
-Dcom.sun.management.jmxremote.port=8899
-Dcom.sun.management.jmxremote.ssl=false
-Dcom.sun.management.jmxremote.authenticate=false
org.apache.zookeeper.server.quorum.QuorumPeerMain"
    重启Zookeeper。(如果要管理多台服务器,需要对每一台服务器都进行类似的修改。 )

2. 使用JConsole来管理Zookeeper
    JConsole是jdk的工具,需要安装jdk
    运行:C:\Program Files\Java\jdk1.8.0_60\bin\jconsole.exe

    连接:输入上面配置的的ip和端口。

    这里我们主要关注MBean,是Zookeeper服务器对外暴露的MBean,点击进去可以查看详细信息
    


四、监控平台搭建和使用

1. netflix的exhibitor
    Netflix公司也开源的一套ZooKeeper客户端框架Curator。    

2. zabbix
    zabbix业界比较出色的服务器监控软件。

exhibitor的安装和使用

1. github下载源代码
    https://github.com/Netflix/exhibitor,下载zip包。

2. 编译
    进入目录:exhibitor-master\exhibitor-master\exhibitor-standalone\src\main\resources\buildscripts\standalone\maven>
    执行命令:mvn clean package 【我编译好的:http://pan.baidu.com/s/1slF2gVz 】
    把编译好的target下的jar上传到服务器,执行:java -jar exhibitor-1.5.6.jar -c file
    打开浏览器:http://192.168.84.141:8080/exhibitor/v1/ui/index.html 

3. 使用
    可以重启集群中的Zookeeper、查看节点信息、配置集群中的Zookeeper、查看log等操作
    
    例子:
    制作一份集群中都共享的配置(需要在集群中的服务器都安装exhibitor的jar)
    

0 0
原创粉丝点击