学习总结四:hadoop集群动态增加新节点及下架一个节点
来源:互联网 发布:java 网络框架 编辑:程序博客网 时间:2024/05/21 09:14
假设现有集群有三个节点(hadoop0,hadoop1和hadoop2),hadoop0是主节点,hadoop1和hadoop2是从节点
hadoop0,hadoop1和hadoop2在各自服务器的安装目录都是/usr/local
一.新增一个节点步骤:
1.配置新节点环境,假设新节点是hadoop3
2.把新节点的hostname配置到主节点的slaves中
操作命令: cd /usr/local/hadoop0/conf
vi slaves
修改内容: hadoop1
hadoop2
hadoop3
3.在hadoop3上启动从节点的两个进程datanode和tasktracker
操作命令:cd /usr/local/hadoop3/bin
hadoop-daemon.sh start datanode
hadoop-daemon.sh start tasktracker
验证:jps
可以看到两个新启动的进程 datanode 和tasktracker
4.在hadoop0主节点上扫执行命令:hadoop dfsadmin -refreshNodes
作用:通知主节点有新节点加入。
验证:http://hadoop0:50070 查看下新节点是否加进来
二.动态下架一个节点,如下架hadoop3
步骤:
1.在hadoop3上执行命令:jps 查看datanode的进程id号,比如id为2132
2.然后执行杀死进程命令:kill -9 2132
此时主节点会检查集群连接状态,如果等10分钟左右还没连接上hadoop3,就会认为该节点已经宕掉,
就会正式宣布该节点下架了。
- 学习总结四:hadoop集群动态增加新节点及下架一个节点
- Hadoop集群中增加新节点总结
- Hadoop集群动态增加一个节点
- hadoop集群中动态增加新的DataNode节点
- hadoop动态地增加和下架一个节点
- Hadoop集群中增加新节点
- Hadoop集群中增加新节点
- Hadoop集群中增加新节点
- Hadoop集群中增加新节点
- Hadoop集群中增加新节点
- 在现有集群环境下动态增加(下架)新的节点
- hadoop动态增加节点
- hadoop集群增加删除节点
- hadoop集群中增加节点
- 为集群增加新节点
- Hadoop学习笔记—13.分布式集群中节点的动态添加与下架
- Hadoop集群节点的动态增加与删除
- Hadoop集群节点的动态增加与删除
- <<Python编程实践>>之Choose
- 腾讯应用中的轩辕诀这款游戏好玩不?轩辕诀游戏介绍
- leetcode: String to Integer (atoi)
- POLYA合集 II
- 哈夫曼树
- 学习总结四:hadoop集群动态增加新节点及下架一个节点
- hibernate数据类型,标准sql数据类型之间的对应表
- mysqldump的使用
- 超级演说家
- Java IO 字符缓冲区Buffered
- 开发者服务商店:趴着的戴维,站着的人生
- 黑马程序员 Java高新技术---泛型
- ReentrantReadWriteLock实现源码剖析
- 繁仝自窘共唾冶婆盗卣醇犹谄泌目