CDH平台搭建步骤

 

1.        软件准备

1.1.       虚拟机：Vmware10

1.2.       Linux系统：CentOS-6.5-x86_64-bin-DVD1.iso

1.3.       CM5.2.0相关

l  CM5相关资源信息cloudera-manager.repo

l  CM5安装文件cloudera-manager-installer.bin

l  CM rpms目录下所有文件

1.4.       CDH5.2.0相关文件

l  CDH-5.1.3-1.cdh5.1.3.p0.12-el6.parcel

l  CDH-5.1.3-1.cdh5.1.3.p0.12-el6.parcel.sha1（下载后修改后缀sha1为sha）

l  manifest.json

 

 

2.        集群准备，使用vmware安装centos6.5

2.1.       安装centos：步骤http://blog.csdn.net/yg_it/article/details/25472523（网络：桥接|nat），网络配置：自动连接）

2.2.       配置固定IP：root登录，步骤http://www.cnblogs.com/lucky-man/p/7111920.html（从12步开始，同步配置DNS1=114.114.114.114）

2.3.       重复以上步骤，安装多台centos6.5系统

2.4.       备份（所有节点）

 

 

3.        Centos环境准备

3.1.       配置centos系统的共享目录（主节点）以传递文件：步骤http://blog.itpub.net/25851087/viewspace-1416720/

3.2.       Host配置（所有节点）

3.3.       打通ssh，通过ssh实现无密码登录（所有节点）

3.4.       关闭防火墙和selinux（所有节点）

3.5.       配置NTP校时服务，主节点同步外网，其它节点同步主节点（所有节点）

3.6.       备份（所有节点）

 

 

4.        安装CM5.2.0

4.1.       拷贝repo文件到指定目录并验证（所有节点）

4.2.       拷贝rpms文件到任意目录并安装（所有节点）

4.3.       拷贝Parcel文件到指定目录（所有节点）

4.4.       拷贝bin文件到任意目录并安装（主节点）

4.5.       备份（所有节点）

 

 

5.        安装CDH5.2.0

5.1.       启动local：7180进行安装，直到cluster installation步骤完成

5.2.       配置swappiness（报swappiness错误，通过echo 0 > /proc/sys/vm/swappiness修正，通过vi /etc/sysctl.conf增加vm.swappiness= 0，来保证重启后可用）（所有节点）

5.3.       备份（所有节点）

5.4.       检查无误后，继续完成安装

 

 

 

 

 

.