<转>Ganglia的Python扩展模块开发
来源:互联网 发布:游戏编程步骤 编辑:程序博客网 时间:2024/06/02 03:51
1. 概述
Ganglia 项目是由加州大学发起的,现在已经成为一个应用非常广泛集群监控软件。可以监视和显示集群中的节点的各种状态信息,比如如:cpu 、mem、硬盘利用率, I/O负载、网络流量情况等,同时可以将历史数据以曲线方式通过php页面呈现。同时具有很好的扩展性,允许用户加入自己所要监控的状态信息。根据可视化的相关数据,很容易知道集群的健康状态,并且也可以分析出集群的可优化的地方。
所有这些数据收集会多次影响节点性能。网络中的“ 抖动( Jitter ) ” 发生在大量小消息同时出现,通过ntp服务将节点的时钟保持一致,就可以避免这个问题。
Ganglia的工作原理如下图
更多关于Ganglia工作原理请参考http://flyerlee.diandian.com/post/2013-06-03/40051002657,本文重点是讲述如何使用Ganglia提供的Python接口开发自己想要的metric。
2. Ganglia的Metrics
何为metric,在字典中其翻译为标准,度量之意。在ganglia的Web界面中我们看得最多的是如下这些图:
这些图还不能算是真正的metric,其只是各个种类的metric的汇总后通过rrdtool画出来的图,便于总体观察。下面这些才是本文要讲述的metric(CPU的metrics):
每一个小图表代表着cpu相关信息的一个数据类型,这些数据都是通过对应的部署在各个集群节点的程序模块搜集,而这个搜集模块的开发就是本文要重点讲解的。
3. 自定义metrics开发
向ganglia加入自定义metric有两种方法,一种是通过命令行的方式运行gmetric,另一种是通过ganglia提供的面向c和python的扩展模块,加入自定义的模块支持。下面使用Python开发一个简单的metric实例:
在/usr/lib64/ganglia/python_modules/中创建random_number.py并添加如下代码
在上面的代码中Ganglia运行的时候会调用metric_init和metric_cleanup两个函数,从这两个函数的名字我们就能得知前一个是做初始化工作,后面一个是做结束资源清理工作的。在Ganglia加载相关模块来运行时,只会调用这两个函数。这里的main函数入口只是为了做调试而写在这里的。
在/etc/ganglia/conf.d/中创建random_number.conf文件,并添加如下代码
modules {module {#这里的name值一定要与/usr/lib64/ganglia/python_modules/random_number.py的文件名保持一致,否则将无法正确运行name = "random_number"language = "python"}}collection_group {collect_every = 2time_threshold = 90metric {#这里的name值要与random_number.py中的d1里的name保持一致name = "random_number_1"title = "random number 1"value_threshold = 0}metric {#这里的name值要与random_number.py中的d2里的name保持一致name = "random_number_2"title = "random number 2"value_threshold = 0}}
配置好文件后重启服务
service gmond restartservice gmetad restartservice httpd restart
4. 效果
在浏览器中输入127.0.0.1/ganglia即可看到监控效果,如果不出问题,则在Metric下拉框中会有如下两个选项:
选择其中一项则在当前页面的最下端显示如下信息:
5. 总结
本文只是讲述了最为简单的Ganglia metric开发,如果想深入了解可以参考Ganglia的官方文档,或者去https://github.com/ganglia上直接查看源码,其中gmond_python_modules项目里提供了大量常见项目的metrics示例。
Ganglia为集群提供了高可视化的监控,不仅能让运维人员快速的清楚集群当前的状态,而且还能让开发人员清楚系统的相关运行状态,从而针对性的做出更好的优化。
0 0
- <转>Ganglia的Python扩展模块开发
- 每天进步一点点——Ganglia的Python扩展模块开发
- python扩展模块开发
- Python扩展模块的细节(
- python的soap模块扩展
- Ganglia 扩展之Python实现方法
- Ganglia 扩展之 Python 实现方法
- Gmond扩展Python度量模块开发
- 存储系统python api扩展模块开发
- (Python编程)扩展模块的细节
- C语言实现的Python扩展模块
- 写python的扩展模块(C)
- Distutils发布C++扩展的Python模块
- Python一些扩展模块
- ctypes模块扩展python
- Python扩展模块
- python的markdown扩展开发
- <转>分布式Ganglia自定义扩展监控及集群环境下的实施
- 带缓存IO和不带缓存IO
- 一点一滴学习Spring(二)之装配bean简单方式
- 文本聚类算法总结
- Robot Framework使用Phantomjs进行无界面UI自动化测试
- IAR for STM8 右键go to definition无法跳转
- <转>Ganglia的Python扩展模块开发
- 你不知道的javascript(一)
- Jmeter组件介绍
- 一些概念
- 利用LR做性能测试中出现的常见问题解决方案
- 算法训练 2的次幂表示
- Android群英传笔记——第九章:Android系统信息和安全机制
- CAFFE 参数可视化
- c#解决 控制台一闪而过的方法