【ZooKeeper Notes 25】ZooKeeper运维之使用SnapshotFormatter可视化快照数据
来源:互联网 发布:汕头网店美工培训sina 编辑:程序博客网 时间:2024/05/16 07:31
在ZooKeeper的运维过程中,我们经常会碰到这样的问题,就是快照数据文件越来越大,但是ZooKeeper上的数据节点数量并没有相应的增加。
这说明什么问题:一定是有客户端在将ZooKeeper当数据库使用了。长此以往,必然会引起ZooKeeper内存数据过大而影响性能及集群间的数据同步。
那么有没有办法能够排查此类问题呢?解决方法是有的,我们首先需要使用SnapshotFormatter可视化快照数据。
数据快照机制是ZooKeeper用来定时进行内存全量数据dump,每次数据快照都会生成磁盘上的一个snapshot文件,例如:snapshot.300000007。
但是令人沮丧的是,这个文件是二进制格式的,无法看出任何有意义的数据信息。
幸好,ZooKeeper提供给我们一个可视化快照数据的工具:SnapshotFormatter
使用方法如下:
java SnapshotFormatter 快照数据文件
例如我们对上面提到的事务日志对应的快照数据文件进行可视化转换:
java SnapshotFormatter snapshot.300000007
输出内容如下:
ZNode Details (count=7):----/ cZxid = 0x00000000000000 ctime = Thu Jan 01 08:00:00 CST 1970 mZxid = 0x00000000000000 mtime = Thu Jan 01 08:00:00 CST 1970 pZxid = 0x00000300000003 cversion = 2 dataVersion = 0 aclVersion = 0 ephemeralOwner = 0x00000000000000 dataLength = 0----/test_log cZxid = 0x00000300000003 ctime = Tue Sep 03 07:08:40 CST 2012 mZxid = 0x00000300000004 mtime = Tue Sep 03 08:13:54 CST 2012 pZxid = 0x00000300000006 cversion = 1 dataVersion = 1 aclVersion = 0 ephemeralOwner = 0x00000000000000 dataLength = 2----……
从上面的输出中,我们就可以看到ZooKeeper上的所有节点信息了,其中会看到有个dataLength属性,这个就是该数据节点的数据大小了。排序就可以排查出异常节点了。
0 0
- 【ZooKeeper Notes 25】ZooKeeper运维之使用SnapshotFormatter可视化快照数据
- ZooKeeper运维之使用SnapshotFormatter可视化快照数据
- 【ZooKeeper Notes 4】可视化zookeeper的事务日志
- 【ZooKeeper Notes 4】可视化ZooKeeper的事务日志
- Zookeeper日志文件&事务日志&数据快照
- zookeeper的日志文件和快照的可视化
- 【ZooKeeper Notes 3】ZooKeeper Java API 使用样例
- 【ZooKeeper Notes 3】ZooKeeper Java API 使用样例
- 【ZooKeeper Notes 15】Watcher使用的注意事项
- zookeeper日志及快照
- zookeeper清除快照命令
- (大数据之zookeeper)ZooKeeper安装说明
- ZooKeeper之zkClient使用
- 【ZooKeeper Notes】系列文章
- 【ZooKeeper Notes 14】数据模型
- 【ZooKeeper Notes 14】数据模型
- 【ZooKeeper Notes】系列文章
- 【ZooKeeper Notes】系列文章
- (九)模板方法模式
- Ubuntu12.04下OpenCV-2.4.10安装
- SVM训练结果参数说明 训练参数说明 归一化加快速度和提升准确率 归一化还原 核函数
- 新产品上市的一些建议
- POJ 2312 Battle City (BFS状态搜索)
- 【ZooKeeper Notes 25】ZooKeeper运维之使用SnapshotFormatter可视化快照数据
- 大二上,java基础结束了
- PostgreSQL 9.4文档 第7章 查询
- hdu4296 Buildings 贪心
- DevExpress.XtraEditors.DataNavigator用法
- N-Queens
- 【ZooKeeper Notes 24】Leader选举杂记1
- Metro UI CSS 学习笔记之组件(进度条、按钮组和评分)
- mtk 7620 编译 没定义 rint函数问题