Ganglia配置教程、监控hadoop 单机配置
来源:互联网 发布:手机捕鱼干扰软件 编辑:程序博客网 时间:2024/05/20 17:06
出处:西西整理 作者:西西 日期:2013-1-8 8:33:26 [大 中 小] 评论: 0 | 我要发表看法
Ganglia是一个跨平台可扩展的,高性能计算系统下的分布式监控系统,如集群和网格。它是基于分层设计,它使用广泛的技术,如XML数据代表,便携数据传输,RRDtool用于数据存储和可 视化。
配置信息:
ubuntu 12.04 x64
hadoop版本1.0.4
首先需要安装ganglia,ubuntu下通过apt-get安装即可:
sudo apt-get install ganglia-monitor ganglia-webfront gmetad
安装完成后修改/etc/ganglia/gmond.conf文件
将globals模块下的setuid=yes修改为setuid=no,cluster模块下的name修改为hadoop
然后修改/etc/ganglia/gmetad.conf文件
找到data_source, 将其修改为 data_source "hadoop" 127.0.0.1 如果是集群直接在多个ip用空格隔开,可以自行定义监听端口号,如果不自定义使用默认端口8649,如果有防火墙,记得开放端口号。
修改完成后重启ganglia
sudo /etc/init.d/ganglia-monitor restart
sudo /etc/init.d/gmetad restart
重启完之后就可以把ganglia-webfront 复制到apache的www目录下
sudo cp -r /usr/share/ganglia-webfront /var/www/ganglia
再重启apache 服务
sudo /etc/init.d/apache2 restart
这样就可以通过访问http://localhost/ganglia 查看界面。
配置hadoop:
找到hadoop目录下conf下的hadoop-metrics2.properties文件
## Below are for sending metrics to Ganglia## for Ganglia 3.0 support *.sink.ganglia.class=org.apache.hadoop.metrics2.sink.ganglia.GangliaSink30## for Ganglia 3.1 support# *.sink.ganglia.class=org.apache.hadoop.metrics2.sink.ganglia.GangliaSink31 *.sink.ganglia.period=10# default for supportsparse is false *.sink.ganglia.supportsparse=true*.sink.ganglia.slope=jvm.metrics.gcCount=zero,jvm.metrics.memHeapUsedM=both*.sink.ganglia.dmax=jvm.metrics.threadsBlocked=70,jvm.metrics.memHeapUsedM=40namenode.sink.ganglia.servers=239.2.11.71:8649datanode.sink.ganglia.servers=239.2.11.71:8649jobtracker.sink.ganglia.servers=239.2.11.71:8649tasktracker.sink.ganglia.servers=239.2.11.71:8649maptask.sink.ganglia.servers=239.2.11.71:8649reducetask.sink.ganglia.servers=239.2.11.71:8649
只需要将注释修改,然后将ganglia的server地址修改为239.2.11.71即可,重启hadoop,即可看到如下视图,表示ganglia搭建成功
- Ganglia配置教程、监控hadoop 单机配置
- hadoop集群配置Ganglia监控
- 配置ganglia 监控 hadoop 节点
- ganglia监控hadoop集群配置
- ubuntu 配置ganlia监控hadoop 单机配置
- ganglia监控hadoop相关配置及监控指标说明
- hbase ganglia监控配置
- hadoop + ganglia 配置安装
- ganglia和nagios配置实现hadoop集群监控
- Ganglia监控Hadoop及Hbase集群性能(安装配置)
- wang-----Ganglia监控Hadoop及Hbase集群性能(安装配置)
- Ubuntu Server 14.04 安装配置Ganglia监控Hadoop
- Ganglia监控Hadoop及Hbase集群性能(安装配置)
- ganglia安装和配置监控hadoop,hbase,spark
- Ganglia监控Hadoop及Hbase集群性能(安装配置)
- Hadoop HBase 单机环境简单配置教程
- Hadoop HBase 单机环境简单配置教程
- Hadoop HBase 单机环境简单配置教程
- 三维纯比例制导(源代码)
- 搜索引擎的发展简史
- hadoop集群监控工具Apache Ambari安装配置教程
- What are KVO and KVC?
- 关于Java中的String说几点
- Ganglia配置教程、监控hadoop 单机配置
- 我们只能去补救你学习上的逛街这些漏洞
- Android学习篇章29-Broadcast广播基础-自定义广播(静态广播)
- 陶冶了我的情操歌德说过
- 乖乖地听我们三班的指挥
- Cocos2d-x基础: CCProgressTimer的使用
- 我突然想起卧室门后有张纸条
- OpenGL---GLUT教程(一) GLUT简介,体系
- 一群小朋友在玩老鹰捉小鸡