Hadoop HDFS 升级到2.0 笔记
来源:互联网 发布:凸优化 求解 编辑:程序博客网 时间:2024/05/22 00:08
http://dongxicheng.org/mapreduce-nextgen/hadoop-upgrade-to-version-2/
http://dongxicheng.org/mapreduce-nextgen/hadoop-upgrade-in-version-1/
http://www.cloudera.com/content/cloudera-content/cloudera-docs/CDH4/latest/CDH4-Installation-Guide/cdh4ig_topic_6_3.html
http://bupt04406.iteye.com/blog/1920585
http://hadoop.apache.org/docs/r2.2.0/hadoop-yarn/hadoop-yarn-site/HDFSHighAvailabilityWithQJM.html
HDFS升级,是hadoop集群升级到2.0的关键,而hdfs升级,最重要的是namenode的升级。
首先声明:在 HA 模式下,namenode是不能升级的!
org.apache.hadoop.HadoopIllegalArgumentException: Invalid startup option. Cannot perform DFS upgrade with HA enabled
so,先使用非ha模式将namenode的元数据升级:
1.1 让namenode进入safe mode状态
$ bin/hadoop dfsadmin -safemode enter
1.2 执行saveNamespace操作
$ bin/hadoop dfsadmin -saveNamespace
1.3 stop 集群
1.4 备份 dfs.name.dir 下面的元数据
或者使用 命令:
bin/hdfs namenode -initializeSharedEdits
或者使用命令:hdfs namenode -bootstrapStandby 作用与直接拷贝元数据类似
- Hadoop HDFS 升级到2.0 笔记
- Hadoop笔记 2 HDFS
- Hadoop 之HDFS笔记
- Hadoop HDFS笔记
- hadoop-hdfs学习笔记
- hadoop HDFS 笔记
- hadoop升级到1.0
- Hadoop:HDFS升级和回滚机制
- [Hadoop]Hadoop上传本地文件到HDFS
- Hadoop学习笔记之---HDFS
- hadoop学习笔记<三>----HDFS
- hadoop学习笔记-HDFS原理
- Hadoop学习笔记---HDFS简介
- Hadoop学习笔记二---HDFS
- Hadoop学习笔记二---HDFS
- hadoop学习笔记-HDFS原理
- Hadoop学习笔记之HDFS
- hadoop学习笔记之HDFS
- Windows驱动_文件系统微小过滤驱动之二驱动的安装和加载
- cocos2dx lu编辑器
- ubuntu下如何扫描局域网下的ip地址
- POJ - Best Cow Line(贪心)
- 【转】2013年第一季度最具影响力的CRM排名
- Hadoop HDFS 升级到2.0 笔记
- JFrame.setBackground设置无效
- HDU 4463 最小生成树 裸题
- linux之slab
- 用进程间通信的方法获取某张网卡的IP地址
- C语言中关于排序问题(一冒泡排序)
- java.lang.OutOfMemoryError: PermGen space及其解决方法
- So cute are you python 14
- 联想A790E的root方法