监控系统

1、JMXtrans + InfluxDB + Grafana实现Kafka性能指标监控
2、influxdb+grafana+heapster
3、zabbix
4、collectd C 语言写的一个系统性能采集工具
5、新一代监控平台整合telegraf、influxdb、garafana

目前监控hadoop集群的主要工具有ganglia，nagios，zabbix等。其中ganglia最方便，hadoop中有自带jmx接口，启用了就行，但使用默认的监控方式，监控服务器磁盘会吃不消，并产生大量数据，故需要进行过滤（支持正则表达式），能过滤大量无用信息，但效果没有想象的好，个人觉得主要原因在于ganglia默认界面太丑，重复图片过多，一个监控项有四个图，占位置，且默认使用rrd数据库，数据完整性无法保证。
使用jmxtrans+influxdb+granafa主要原因在于自由度高，按监控所需自由搭配，数据完整性得到保证，界面漂亮。