Cloudera CDH增加节点到集群
来源:互联网 发布:你好万维网 知乎 编辑:程序博客网 时间:2024/06/05 23:45
新增一台机器步骤:
设置所有集群的hosts一样,加入新增的机器
vim /etc/sysconfig/network 修改hostnmae为aaa
hostname aaa
cp cloudera-manager-el5-cm4.6.2_x86_64.tar.gz 到新增的机器上
安装jdk环境,最好jdk版本统一,参考此处
tar zxvf cloudera-manager-el5-cm4.6.2_x86_64.tar.gz
cd cm-4.6.2
vim etc/cloudera-scm-agent/config.ini 设置server_host为scm机器
添加scm管理用户useradd -r --home=/data/worker/cloudera-manager/cm-4.6.2/run/cloudera-scm-server --shell=/bin/false --comment "Cloudera SCM User" cloudera-scm
home为scm安装路径
启动 etc/init.d/cloudera-scm-agent start
如启动错误,请查看scm安装路径下log文件夹下cloudera-scm-agent/cloudera-scm-agent.out
这时打开scm web管理页面,点击最上面导航 主机 选项即可看到新增加的节点
点击上面的 向集群添加新主机 即可添加,共5步,
由于已经将cm agent拷贝到各机器并启动了,此处不是通过IP或hostname查找的(即使查出来也无法选择),而是已存在的主机里面选择,选择新加的agent,点继续
出现下载parcel的界面
此处多多注意不同linux版本要不同的parcel包,我在装的时候就是只放了el6的包,没放el5的包(要加的机器版本为centos5),导致一直卡在这里,找不到问题
如果实在找不到问题,chrome F12看下,一般会有定时报安装的接口,点击查看,一般会有详细错误
检查主机正确性
选择主机模板-此处可选择要安装的组件
向集群中添加主机
启动
其中一些细节:
防火墙要关闭,否则no route host 关闭防火墙参照此处
perl要安装
python要安装
done
- Cloudera CDH增加节点到集群
- Cloudera CDH新增节点到集群参考步骤
- Cloudera CDH新增节点到集群参考步骤
- 从yum安装Cloudera CDH集群
- Cloudera CDH 5集群搭建(yum 方式)
- Cloudera CM5.3.1&CDH-5.3.0集群安装
- Cloudera 5.7集群部署(二)--CM、CDH安装
- 记录采用cloudera-manager安装CDH集群的过程
- mj增加集群节点
- cloudera cdh编译carbondata
- 增加节点至GPFS集群
- hadoop集群增加删除节点
- 为集群增加新节点
- hadoop集群中增加节点
- 在Ubuntu 14.04 LTS下通过Cloudera CDH 5.4.8搭建Hadoop集群
- Cloudera 5.7集群部署(三)--CM前台配置部署CDH
- 使用cloudera-manager CDH大数据集群运维工作记录
- 安装单节点伪分布式 CDH hadoop 集群
- C语言读写BMP文件
- cocos2d-x中锚点设置及定位方式
- yii 日历分秒显示
- ubuntu 14.04 使用Meclipse 10.7 闪退
- linux下非标准波特率的设置和使用
- Cloudera CDH增加节点到集群
- 对linux 0.11版本内核中进程创建fork()的理解
- Android 通讯录操作
- Extjs4视频学习日志--define和extend
- 内存池设计及实现参考资料
- Qt Model/View( 一)
- 简单的自动更新程序实现
- c++中的继承与多态
- 代码中特殊的注释技术——TODO、FIXME和XXX的用处