Hadoop2.6.0伪分布环境搭建
来源:互联网 发布:hsv颜色模型算法实现 编辑:程序博客网 时间:2024/05/16 17:34
Hadoop2.6.0伪分布环境搭建
用到的软件:
一、安装jdk:
1、要安装的jdk,我把它拷在了共享文件夹里面。
(用优盘拷也可以)
2、我把jdk拷在了用户文件夹下面。
(其他地方也可以,不过路径要相应改变)
3、执行复制安装解压命令:
解压完毕:
查看解压的文件夹:
4、配置 环境变量:
写入如下5行代码:
使配置生效:
5、查看安装的jdk:
Java -version
java
javac
二、SSH免密码登陆:
1、安装SSH:
2、是否生成 .ssh 目录:
3、如果没有生成,自己手动创建一个 .ssh 目录:
生成的 .ssh 目录:
4、生成公钥与私钥:
效果如下:
5、将公钥加入到用于认证的公钥文件中:
6、免密码登陆:
效果:
Ubuntu 免密码登陆,SSH配置完。
三、安装配置Hadoop:
1、复制安装解压hadoop :
解压完毕效果:
2、配置 etc/profile
3、配置 hadoop-env.sh
进入
4、修改hadoop-2.6.0文件权限为用户权限:
默认没有mapred-site.xml文件,复制mapred-site.xml.template一份,并把名字改为mapred-site.xml
5、配置下面4个重要文件:
mapred-site.xml
core-site.xml
hdfs-site.xml
yarn-site.xml
6、格式化:
格式化部分效果:
7、启动:
先启动 start-dfs.sh:
效果:
再启动 start-yarn.sh:
效果:
关闭hadoop:
(注:也可以 sbin/start-all.sh: 建议分开启动。)效果一样,如下:
8、查看Web页面信息:
至此,hadoop-2.6.0伪分布配置成功。
- Hadoop2.6.0伪分布环境搭建
- Hadoop2.6.0伪分布环境搭建
- 1、Hadoop2.6.0 和 Hadoop1.2.1伪分布环境搭建
- hadoop2.4.1的伪分布环境搭建
- Hadoop2.x伪分布环境搭建
- Hadoop2环境搭建(单机伪分布)
- hadoop2.4.1伪分布环境搭建
- Hadoop2.7.3搭建单机、伪分布环境
- 伪分布环境下CentOS 7+Hadoop2.6.0+Eclipse开发环境搭建
- 高效5步走,快速搭建Hadoop2伪分布环境
- vmvare上hadoop2.6的伪分布环境搭建
- hadoop2.2伪分布搭建
- hadoop2.2.0伪分布搭建
- hadoop2.6.0版本搭建伪分布式环境
- hadoop2.6.0版本搭建伪分布式环境
- cdh-hadoop2.6.0伪分布式环境搭建
- hadoop2.6.0版本搭建伪分布式环境
- hadoop2.6.0伪分布式环境搭建
- 深度教程:POS和POW全解析
- CentOS7下安装python-pip
- C/C++的内存管理
- php中的四种基本排序算法
- Linux安装ssh服务步骤
- Hadoop2.6.0伪分布环境搭建
- eclipse代码注释模板
- Shell编程中变量的声明、引用及作用域
- 按照XXXX-XX-XX XX:XX:XX的格式,打印出前一天的时间
- 非常全面的php日期时间运算汇总
- IDEA 2017破解 license server激活
- hdu 1874畅通工程续+2544最短路+3790最短路径(dijkstra算法入门题)
- 开始写技术博客
- Leetcode#69: Sqrt(x)