CDH5.0.0安装与升级
来源:互联网 发布:淘宝大额优惠券在哪 编辑:程序博客网 时间:2024/06/17 15:40
0、前期准备工作
前提条件:
1、下载相关的CM/CDH/ Postgresql软件包,同时主机安装ssh/apache/ftp等日常软件。
2、制作本地yum源,并能通过http正常访问。
/var/www/html/下面
3、关闭所有主机的IPTABLES
4、配置CM主机到所有节点的ssh信任关系,允许CM主机可以直接ssh到目标主机上;
5、修改内核参数
6、操作系统/var、/opt空间要大,一般分配50G就可以,用来安装CDH
7、除操作系统盘采用Mirror以外,其它盘均采用独立的磁盘,中间不做任务保护措施,并让所有的盘通过文件系统的方式挂载到操作系统层面。
建议直接对盘采用fdisk/mkfs.ext4/mount即可,不要采用LVM;
一、安装CM
1、下载相关软件到指定目录中如:CM5/CDH5/ Postgresql
2、制作yum本地源
3、安装CM
下面开始进行CM的安装
chmod +x cloudera-manager-installer.bin
./cloudera-manager-installer.bin --skip_repo_package=1
二、安装CDH与组件
通过CM界面中增加cluster即可。
填加组件可以通过增加service的方式增加,CM会自动给所有节点进行动态增加。
三、升级CDH
CDH5.0.0升级到CDH5.0.3
1、先下载软件包并上传到服务器上;
2、创建本地的YUM源,并通过http://IP可以正常访问;
3、配置/etc/yum.repos.d/repos.repos文件,并加载进去;
通过yum repolist进行相看。
4、登录CM控制台,通过Parcels选项菜单,选择edit setting设置新版本的YUM源地址,选择Parcels,输入入Remote Parcel Repository
然后返回到Parcels界面,先下载,再分发,然后再安装即可。
5、验证测试。
四、升级CDM
1、先停止服务
2、再升级
3、再启服务
执行如下命令升级:
$ sudo yum clean all
$ sudo yum upgrade 'cloudera-*'
$ rpm -qa 'cloudera-manager-*'
cloudera-manager-agent-5.0.2-0.cm5.p0.932.el6.x86_64
cloudera-manager-server-5.0.2-0.cm5.p0.932.el6.x86_64
cloudera-manager-daemons-5.0.2-0.cm5.p0.932.el6.x86_64
Start the Cloudera Manager Server(启服务)
$ sudo service cloudera-scm-server-db start
$ sudo service cloudera-scm-server start
具体参考官网:
http://www.cloudera.com/content/cloudera-content/cloudera-docs/CM5/latest/Cloudera-Manager-Installation-Guide/Cloudera-Manager-Installation-Guide.html#../Cloudera-Manager-Administration-Guide/cm5ag_upgrade_cm4_to_cm5.html
- CDH5.0.0安装与升级
- cloudera namager & CDH5 安装与升级
- CDH5.11 离线安装或者升级spark2.x详细步骤
- CDH5.11 离线安装或者升级spark2.x详细步骤
- CDH5.11离线安装或者升级spark2.x
- Hadoop安装与启动(CDH5.6)
- CDH5安装
- CDH5安装
- CDH5 安装
- CDH5.2.0升级到CDH5.3.3
- CDH5.4.7升级到CDH5.5.0
- CDH5.0.2升级至CDH5.2.0
- 离线安装Cloudera Manager5.3.4与CDH5.3.4(一)
- 离线安装Cloudera Manager5.3.4与CDH5.3.4(二)
- 离线安装Cloudera Manager5.3.4与CDH5.3.4
- CDH5.5离线安装部署(centos7血与泪)
- 离线安装Cloudera Manager5.3.4与CDH5.3.4
- 【CDH5】-003CDH5.4.0 离线安装
- hdu 1024 Max Sum Plus Plus(DP)
- android系统GUI设计师必会资源图制作工具
- 赋值操作符和拷贝构造函数
- maven镜像仓库
- 小米wifi总是“获取IP”“身份验证”
- CDH5.0.0安装与升级
- android 9PNG图片制作
- Linux 定时器
- 黑马程序员——张孝祥高新技术——反射
- poj 1220 java大数处理进制转换
- 关于JAVA中hashCode
- soj 1608. Digit Counting
- Wildcard Matching
- 设计模式之Prototype模式