hadoop2.7.2安装部署教程
来源:互联网 发布:迅雷9登录网络错误 编辑:程序博客网 时间:2024/05/24 15:37
<name>fs.defaultFS</name>
<value>hdfs://hearain(集群名字)</value>
</property>
<name>ha.zookeeper.quorum</name>
<value>集群地址加端口号,机器之间以逗号分隔node1:2181</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop/tmp/</value>
</property>
3.配置和安装zookeeper
tickTime=2000dataDir=/opt/zookeeper/tmp(若没有这个目录,则自己创建)clientPort=2181initLimit=5syncLimit=2server.1=node1:2888:3888server.2=node2:2888:3888server.3=node3:2888:3888然后在相应的机器上创建myid文件,里面写上server后面带的相应的数字
./hadoop-daemon.sh start journalnode
5.启动后在任意一台namenode机器上执行格式化(bin目录下):./hadoop-daemon.sh start namenode
./hdfs zkfc -format
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
14.配置yarn的配置文件
<name>yarn.resourcemanager.hostname</name>
<value>node1</value>
</property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
<name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
<value>org.apache.hadoop.mapred.ShuffleHandler</value>
</property>
15.开启resourcemanager和nodemanager命令:
./start-yarn.sh
jps查看是否都运行成功:如果其中一个进程运行失败,则去logs里面去查看详细日志
node1:
node2:
node3:
- hadoop2.7.2安装部署教程
- Hadoop2.7.2 window10 安装教程。
- Hadoop2.0安装部署
- hadoop2.5.2安装部署
- Hadoop2.6.5安装部署
- Hadoop2.7.2分布式部署3(安装部署hadoop分布式)
- window 下安装Hadoop2.7.2教程
- hadoop2.x 安装教程
- hadoop2.4 安装教程
- hadoop2.2安装教程
- Hadoop2.6.0安装教程
- Hadoop2.6.0集群安装部署
- centos hadoop2.6 安装部署
- Hadoop2.8HA安装部署
- Hadoop2.7.2的部署
- Hadoop2.7.2集群的部署
- Apache Hadoop2.0 安装部署说明
- Hadoop2.0单机环境安装部署
- 集合随机抽取与排序(双色球)
- multicastSocket实现单播组播 局域网通信
- 城市列表-根据拼音首字母排序
- Linux——文件操作
- Logistic Regression 损失函数理解
- hadoop2.7.2安装部署教程
- Fiddler过滤指定域名
- 文章标题
- 第十二课通知界面变更接口——C#计算器编程教学
- Android Studio如何设置代码自动提示
- TinyXml快速入门(三)
- css3盒子布局--管理盒子的空间(box-pack和box-align)
- javaweb学习总结(二十七)——jsp简单标签开发案例和打包
- 【转】CAP的相对论