ubuntu14.04配置hadoop完全分布式

来源:互联网 发布:php帮助手册下载 编辑:程序博客网 时间:2024/05/16 08:52

一、master 、slave要使用相同的用户名,在相同的用户组
可以自己创建用户组和用户名,我们统一为hadoop
master为主机,slave为从机
二、在master 、slave和中配置相同的jdk和保存到相同的路径,避免之后修改。
三、进行master 、slave之间的ssh免密设置。
1.安装ssh
2.生成公钥、私钥
3.将 id_rsa.pub 的内容复制到 A 、 B 、 C 三台机器 /home/username/.ssh/authorized_keys 文件中
4.用ssh 访问,不需要输入密码,则成功
四、在master上安装hadoop,按照单机版先配置完成。
1.放到home文件夹下
路径 /home/hadoop(用户名)/hadoop(文件夹名)

2.修改bashrc文件,配置hadoop

3.修改 /home/hadoop/hadoop/etc/hadoop ,中的 hadoop-env.sh这个文件,把Jdk路径修改

4.运行

五、配置一系列的文档:
http://blog.csdn.net/ycisacat/article/details/53325520
master上按照如此,再把master的hadoop复制到slave上即可
注意:
1.1 改hostname文件时,在主机上打开此文件,主机的改为master
在从机上打开此文件,从机改为slave
2改host文件 master 和slave都要改
2.slaves 把其他的东西删除,加上自己的slave

3.

因为放在了home下,所以可以直接复制,不必想博主那样

sudo scp -r /home/hadoop/hadoop hadoop@192.168.235.2:/home/hadoop
0 0
原创粉丝点击