通过PATH-B:cloudera manager安装cloudera5.4
来源:互联网 发布:纳税申报软件下载 编辑:程序博客网 时间:2024/05/14 10:21
首先,最好的安装指导还是官网的安装手册,最清晰的安装步骤就是手册里面的图。然后我就是安装通过PATH B来进行手动安装的。
首先列出系统和安装包:
虚拟机:VMware
操作系统:CentOS-6.5-x86_64-bin-DVD1.iso (用这个系统在安装agent的时候需要三个RPM包:init-functions,gassapi和portmap,按照提示通过yum安装就好了)
软件包:(安装命令 rpm -ivh ,我是安装如下顺序安装的)
1.oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm
要有JAVA环境,安装cloudera推荐的java版本
2.cloudera-manager-daemons-5.4.8-1.cm548.p0.7.el6.x86_64.rpm
3.cloudera-manager-server-5.4.8-1.cm548.p0.7.el6.x86_64.rpm
4.cloudera-manager-server-db-2-5.4.8-1.cm548.p0.7.el6.x86_64.rpm
先通过(yum install -y postgresql-server )安装一下依赖,然后再安装embedded postgresql。
5.cloudera-manager-agent-5.4.8-1.cm548.p0.7.el6.x86_64.rpm (此处需要安装上面提到的三个依赖包)
还有:CDH-5.4.8-1.cdh5.4.8.p0.4-el6.parcel 和 CDH-5.4.8-1.cdh5.4.8.p0.4-el6.parcel.sha1(有个博客上说需要去掉后面的1……)
安装步骤:
RPM包安装过程应该不难,安装完成后,配置以下文件
vi /etc/hosts 配置集群中的主机名和ip对应关系
vi /etc/sysconfig/network 修改主机名
vi /etc/sysconfig/network-scripts/ifcfg-etho 修改主机IP (安装过程中需要主机可以联网,所以要确保修改IP后主机还是可以上互联网的)
vi /etc/cloudera-scm-agent/config.ini 修改主机名
启动服务:service cloudera-scm-agent || cloudera-scm-server || cloudera-scm-server-db
1.先用chkconfig --list|grep cloudera 看看这些服务是不是开机启动的,或者service cloudera-scm-XXX status,已经启动了就不需要再启动了
2.启动server-db的时候可能会说无法访问cloudera-scm拥有的文件,这个时候需要关闭selinux,命令:setenforce 0
3.启动server服务之后需要等待,我碰到最纠结的问题就是cloudera-scm-server is dead but pid file exists,一开始以为是内存问题,增大内存之后还是会这样;然后又开始restart,还是这样。最后才发现这个service是开机启动的,就是很慢很慢需要等
图形界面安装:
1.网页登录之前,将CDH-5.4.8-1.cdh5.4.8.p0.4-el6.parcel 和 CDH-5.4.8-1.cdh5.4.8.p0.4-el6.parcel.sha1拷入到/opt/cloudera/parcel文件夹中,这样就不用从网上下载了
2.访问:主机名:7180/cmf/login,使用用户名/密码:admin/admin登录
3.图形界面的安装基本就是一路continue下去,除了一开始search一下要添加的主机,设置一个统一的密码
4.遇到的问题和解决:
4.1 refresh packages之后detecting cloudera-scm-agent报错,可是明明已经有这个服务,查看日志发现,它还是要访问一个mirror,但是当时电脑不能上网所以报错。这也是为什么安装过程中需要能够联网的原因。
4.2 heart beat fail,我的问题主要是因为CentOS的时区和本地的时区不一致,都设置成Shanghai时间后,就可以了
4.3 ……
5.我选择的Core Hadoop,有23个配置项,安装完成后就成功了
- 通过PATH-B:cloudera manager安装cloudera5.4
- 通过Cloudera Manager安装CDH
- 通过cloudera-manager来安装hadoop
- 通过Cloudera Manager安装CDH 5.6
- Cloudera Manager 和 CDH 4 终极安装
- Cloudera Manager 和 CDH 4 终极安装
- Cloudera Manager 和 CDH 4 终极安装
- Cloudera Manager安装
- 手动安装Cloudera Manager
- 安装cloudera-manager
- Cloudera Manager安装
- 安装Cloudera Manager 5
- Cloudera Manager 5安装
- cloudera manager安装
- cloudera-manager安装
- 安装Cloudera Manager
- 离线安装cloudera Manager
- cloudera-manager安装
- 第11周 项目1 - 二叉树算法验证(2)
- 欢迎使用CSDN-markdown编辑器
- 第十二周项目(3):图遍历算法实现——深度优先遍历
- 线性表11|单链表小结:腾讯面试题 – 数据结构和算法16
- 在流程图中求支配点的一种快速算法
- 通过PATH-B:cloudera manager安装cloudera5.4
- 度量系统服务端文件本地异地差异备份(增量备份)脚本示例
- 第十二周项目四~~用遍历思想求解图的问题
- 子查询
- 第11周项目1-验证算法(4)哈夫曼树
- 如何利用Fragment里的 onSaveInstanceState保存数据
- selenium(webdirver)--在Firefox webdriver实例中添加Firebug and FirePath插件
- Leetcode158: Reverse Words in a String
- 线性表12|循环链表 – 数据结构和算法17