Hadoop伪分布式集群的搭建
来源:互联网 发布:php中文手册下载 编辑:程序博客网 时间:2024/06/09 13:52
1,jdk安装,这里省略
2,安装Hadoop软件(直接加压就能使用,这里也不做解释)
3,主要说下需要配置那些文件
- 修改etc/hadoop/core-site.xml:
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
2,配置etc/hadoop/hdfs-site.xml:
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property></configuration>
3,终端输入下面这个命令来格式化
$ bin/hdfs namenode -format
完成以上步骤已经可以启动start-dfs.sh了,启动后可以使用jps命令来查看是否启动
4,修改etc/hadoop/mapred-site.xml:
<configuration> <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property></configuration>
5,修改etc/hadoop/yarn-site.xml:
<configuration> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property></configuration>
已经配置完成,使用$ sbin/start-yarn.sh
来启动
完成后用jps查看进程如下
看是否进程都启动了,如果有部分进程没有启动可以从以下方面考虑
1,查看防火墙是否关闭
2,查看配置是否有问题
3,找大神求教吧,我无能为力了
最后的忠告,如果英文水平不是太差的话建议看官方文档,你会有不一样的收获,祝好
0 0
- Hadoop伪分布式集群的搭建
- hadoop 伪分布式集群的搭建
- 搭建伪分布式Hadoop集群
- hadoop集群搭建【伪分布式】
- 搭建Hadoop伪分布式集群
- 搭建伪分布式hadoop集群
- Hadoop伪分布式集群搭建
- Hadoop集群伪分布式搭建
- 搭建伪分布式hadoop集群
- hadoop伪分布式集群搭建
- Hadoop伪分布式集群搭建
- Docker-hadoop的伪分布式和集群的搭建
- Hadoop伪分布式或集群系统的搭建
- hadoop伪分布式集群搭建遇到的问题
- Hadoop伪分布式部署和集群搭建
- Hadoop-2.7.2伪分布式集群搭建
- 首秀Hadoop伪分布式集群搭建流程
- Hadoop的伪分布式搭建
- ubuntu下安装wps缺少字体解决办法
- SSM框架
- HTTP Method小结(GET,POST.etc)
- 总则
- uva 861 Little Bishops 组合数学 (布棋)
- Hadoop伪分布式集群的搭建
- JVM原理笔记
- Android源码编译之:KeyError: 'ui_strings.grd' make: *** [out/target/product/generic/obj/GYP/shared_interme
- Lintcode_89 k Sum
- 69. Sqrt(x)
- 第38课:Kafka源码解读Producer工作机制内幕
- 自定义滑块验证View
- 勾股定理一日一证连载40
- Python程序-生成回文