搭建Hadoop分布式开发环境(三)
来源:互联网 发布:电影院售票java编程 编辑:程序博客网 时间:2024/06/05 16:14
上一节已经在master主节点上搭建了Hadoop环境,这一节完善Hadoop集群
一. 首先要将/usr/local/hadoop文件拷贝到其他两个子节点(slave1,slave2)
scp -r /usr/local/hadoop root@slave1:/usr/localscp -r /usr/local/hadoop root@slave2:/usr/local
二. 其次要将环境变量文件(.bashrc)拷贝到其他两个子节点(slave1,slave2)
scp -r ~/.bashrc root@slave1:~/scp -r ~/.bashrc root@slave2:~/
三. 分别对两个子节点的.bashrc文件进行source,以让它生效
四. 启动Hadoop
1、第一次启动须格式化namenode:在master上执行以下命令
hdfs namenode -format
2、启动hdfs集群:start-dfs.sh
3、启动yarn集群:start-yarn.sh
4、使用jps查看主线程以及子线程进程,对比如下
master:namenode、ResourceManagerslave1:datanode、secondarynamenode、NodeManagerslave2:datanode、NodeManager
启动成功后可以通过浏览器访问http://master:50070测试hdfs
可以通过浏览器访问http://master:8088测试yarn
阅读全文
1 0
- 搭建Hadoop分布式开发环境(三)
- 伪分布式Hadoop及开发环境搭建(三)
- hadoop环境搭建(三)分布式
- 【大数据】开发环境搭建(三):hadoop伪分布式集群环境搭建(下)
- 搭建Hadoop分布式开发环境(一)
- 搭建Hadoop分布式开发环境(二)
- windows eclipse hadoop 集群开发环境搭建(分布式模式)
- 伪分布式Hadoop及开发环境搭建(一)
- 伪分布式Hadoop及开发环境搭建(二)
- 【环境搭建】hadoop分布式计算开发环境搭建
- hadoop-分布式环境搭建
- Hadoop分布式环境搭建
- Hadoop分布式环境搭建
- hadoop分布式环境搭建
- Hadoop分布式环境搭建
- hadoop 分布式环境搭建
- 搭建分布式Hadoop环境
- Hadoop 分布式环境搭建
- 技术总结
- javadoc
- 位运算符
- 新的开始
- 移动社交与游戏的双重体验
- 搭建Hadoop分布式开发环境(三)
- intelli idea中配置Tomcat找不到的解决办法
- 计算机系统 001- 电学概念
- andriod 资源大全
- 扩展欧几里得板子题(poj2142)注意把一个数变成最小的符合的正数的方法
- SNMP报文抓取及分析
- JavaScript04—DOM
- 计算机系统002
- git 学习