hadoop强制进行Active/Standby切换需要注意的问题
来源:互联网 发布:淘宝模特招聘58同城 编辑:程序博客网 时间:2024/06/05 22:38
NN切换
hdfs haadmin -transitionToActive/transitionToStandby
RM切换
yarn rmadmin -transitionToActive/transitionToStandby
但是,这种方式在启用了ZKFC做自动失效恢复的状态下是不允许修改的,提示信息里只说了可以强制执行,但是没有提供命令,其实强制切换主备命令很简单。加个forcemanual就好了。
强制切换
yarn rmadmin -transitionToActive --forcemanual rm1
但是这样做的后果是,ZKFC将停止工作,你将不会再有自动故障切换的保障,但是有些时候,这是必须的,特别是有时候,Hadoop的RM在ZKFC正常工作的情况下,也会出现两个standby,两个standby的问题就在于诸如Hive和Pig这种东西,会直接报一个什么 Operation category READ is not supported in state standby 什么什么的,甚至你看着明明一个是active,一个是standby,也会报这个错误,这时候就必须手动强制切换了,强制切换完以后,别忘了,重新启动ZKFC就好了。这个强制切换的要求就是用户必须没有任何对元数据的操作,这样才能有效的防止脑裂的发生。应该来说,进入安全模式再切换会比较稳妥一些。
补充: Hadoop ResourceManager的实现不像namenode只能有两个做HA,ResourceManager的HA可以多台。
hdfs haadmin -transitionToActive/transitionToStandby
RM切换
yarn rmadmin -transitionToActive/transitionToStandby
但是,这种方式在启用了ZKFC做自动失效恢复的状态下是不允许修改的,提示信息里只说了可以强制执行,但是没有提供命令,其实强制切换主备命令很简单。加个forcemanual就好了。
强制切换
yarn rmadmin -transitionToActive --forcemanual rm1
但是这样做的后果是,ZKFC将停止工作,你将不会再有自动故障切换的保障,但是有些时候,这是必须的,特别是有时候,Hadoop的RM在ZKFC正常工作的情况下,也会出现两个standby,两个standby的问题就在于诸如Hive和Pig这种东西,会直接报一个什么 Operation category READ is not supported in state standby 什么什么的,甚至你看着明明一个是active,一个是standby,也会报这个错误,这时候就必须手动强制切换了,强制切换完以后,别忘了,重新启动ZKFC就好了。这个强制切换的要求就是用户必须没有任何对元数据的操作,这样才能有效的防止脑裂的发生。应该来说,进入安全模式再切换会比较稳妥一些。
补充: Hadoop ResourceManager的实现不像namenode只能有两个做HA,ResourceManager的HA可以多台。
0 0
- hadoop强制进行Active/Standby切换需要注意的问题
- hadoop强制进行Active/Standby切换的命令
- hadoop强制进行Active/Standby切换的命令
- 利用swiper进行tab切换时,需要注意的问题。
- hadoop-2.6.0+zookeper-3.4.6之HA模式两个namenode不同状态active和standby的切换
- hadoop中需要注意的问题
- 强制切换active
- 【个人整理】Windows环境下进行hadoop 2.2开发工作需要注意的问题
- TimesTen Active standby切换启停脚本
- standby 日志文件切换的问题
- 使用hadoop ecipse插件需要注意的问题
- HBase/Hadoop 安装之前需要注意的配置问题
- 进行一个robotium的测试项目需要注意的问题
- Hadoop2.7.0集群的NameNode在HA下如何切换active和standby状态
- 用range进行python循环需要注意的问题
- 使用blueZ进行蓝牙编程时需要注意的问题
- [Python]对List进行复制时需要注意的问题
- 进程切换需要注意哪些问题
- redis.conf的配置说明
- 持续集成回顾暨点滴分享[2] – UI自动化,靠谱!
- 构建的codis群集,dashboard.log报错i/o timeout
- 最小堆和最小堆排序
- JVM性能调优监控工具jps、jstack、jmap、jhat、jstat使用详解
- hadoop强制进行Active/Standby切换需要注意的问题
- Oracle主机身份证明中的用户名和口令错误的解决方法
- No Data There was no data available.Possible reasons include inaccessible
- .net 根据ip获得局域网主机名和物理地址
- wget下载网站的目录
- CDH 主机准备就绪,无法继续问题
- hadoop节点一块硬盘故障更换方法
- CDH安装报错Hive must also be configured with YARN.
- android 事件分发 拦截 (onInterceptTouchEvent dispatchTouchEvent onTouchEvent)