高效5步走,快速搭建Hadoop2伪分布环境
来源:互联网 发布:画数据流程图的软件 编辑:程序博客网 时间:2024/05/16 19:14
前两天将Hadoop2的完全分布式搭建文档整理发布于网上(http://blog.csdn.net/aaronhadoop/article/details/24859369),朋友相邀,就再将Hadoop2的伪分布式文档整理一下,搭建过Hadoop2完全分布式后,就笑对“伪分布式”说声 呵呵吧。
前期的jdk环境、SSH免密钥登录配置在此就不再赘述了,直接进入hadoop2的配置。本文Hadoop2配置文件路径:/usr/local/hadoop/etc/hadoop。
开启Hadoop2模式,start now
一、修改hadoop-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_45/
二、修改core-site.xml
<property>
<name>fs.default.name</name>
<value>hdfs://hadoop0:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/usr/local/hadoop/HadoopTmpDir</value>
</property>
手动创建目录
mkdir /usr/local/hadoop/HadoopTmpDir
三、修改hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
四、修改mapred-site.xml
cp mapred-site.xml.template mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>hadoop0:9001</value>
</property>
五、执行命令
hdfs namenode -format
start-dfs.sh
stop-dfs.sh
start-yarn.sh
stop-yarn.sh
验证
验证方式一,查看java守护进程
验证方式二,web端
对于Hadoop2的配置及使用,建议当然还是完全分布式了,Hadoop VS Hadoop2,其中妙处,要体会,更要多言,哈哈,欢迎交流哟
OK,搞定!
0 0
- 高效5步走,快速搭建Hadoop2伪分布环境
- hadoop2.7.0-伪分布5分钟快速搭建
- hadoop2.4.1的伪分布环境搭建
- Hadoop2.6.0伪分布环境搭建
- Hadoop2.x伪分布环境搭建
- Hadoop2环境搭建(单机伪分布)
- hadoop2.4.1伪分布环境搭建
- Hadoop2.6.0伪分布环境搭建
- Hadoop2.7.3搭建单机、伪分布环境
- 1、Hadoop2.6.0 和 Hadoop1.2.1伪分布环境搭建
- vmvare上hadoop2.6的伪分布环境搭建
- hadoop2.2伪分布搭建
- hadoop2.2.0伪分布搭建
- Ubuntu安装hadoop2.7.1----伪分布搭建
- hadoop2.4伪分布的搭建
- hadoop2.4.1中伪分布搭建
- hadoop2.2.0 伪分布环境配置
- 伪分布环境下CentOS 7+Hadoop2.6.0+Eclipse开发环境搭建
- 内容显示页调用方法
- 快速排序
- emc测试中,esd里直接放电和间接放电是什么意思
- Codeforces Round #244 (Div. 2)——Checkposts
- 用PHP与XML进行网站编程
- 高效5步走,快速搭建Hadoop2伪分布环境
- HDU 1231 最大连续子序列
- x86 x64
- 移植python到小米路由器记录。
- js 控制 输入 数字
- Java高级视频_网络编程(二)
- C++设计模式---享元模式----浪费可耻,节俭光荣
- hdu 3938并差集
- IOS评分跳转