hbase集群部分节点HRegionServer启动后自动关闭的问题
来源:互联网 发布:电动伸缩大门的数据 编辑:程序博客网 时间:2024/06/05 19:22
我有四个HRegionServer节点。发现输入./start-hbase.sh后,只启动了两个节点,而且后来两个节点又挂掉了。
查看日志:
more hbase-root-regionserver-heres01.log
报错如下:
2017-04-30 14:02:05,999 FATAL [regionserver60020] regionserver.HRegionServer: Master rejected startup because clock is out of syncorg.apache.hadoop.hbase.ClockOutOfSyncException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server heres01,60020,1493532120370 has been rejected; Reported time is too far out of sync with master. Time difference of 2421573ms > max allowed of 30000ms at org.apache.hadoop.hbase.master.ServerManager.checkClockSkew(ServerManager.java:314) at org.apache.hadoop.hbase.master.ServerManager.regionServerStartup(ServerManager.java:215) at org.apache.hadoop.hbase.master.HMaster.regionServerStartup(HMaster.java:1292) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$2.callBlockingMethod(RegionServerStatusProtos.java:5085) at org.apache.hadoop.hbase.ipc.RpcServer.call(RpcServer.java:2185) at org.apache.hadoop.hbase.ipc.RpcServer$Handler.run(RpcServer.java:1889) at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:57) at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45) at java.lang.reflect.Constructor.newInstance(Constructor.java:526) at org.apache.hadoop.ipc.RemoteException.instantiateException(RemoteException.java:106) at org.apache.hadoop.ipc.RemoteException.unwrapRemoteException(RemoteException.java:95) at org.apache.hadoop.hbase.protobuf.ProtobufUtil.getRemoteException(ProtobufUtil.java:277) at org.apache.hadoop.hbase.regionserver.HRegionServer.reportForDuty(HRegionServer.java:1955) at org.apache.hadoop.hbase.regionserver.HRegionServer.run(HRegionServer.java:794) at java.lang.Thread.run(Thread.java:745)Caused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.ClockOutOfSyncException): org.apache.hadoop.hbase.ClockOutOfSyncException: Server heres01,60020,1493532120370 has been rejected; Reported time is too far out of sync with master. Time difference of 2421573ms > max allowed of 30000ms at org.apache.hadoop.hbase.master.ServerManager.checkClockSkew(ServerManager.java:314) at org.apache.hadoop.hbase.master.ServerManager.regionServerStartup(ServerManager.java:215) at org.apache.hadoop.hbase.master.HMaster.regionServerStartup(HMaster.java:1292) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$2.callBlockingMethod(RegionServerStatusProtos.java:5085) at org.apache.hadoop.hbase.ipc.RpcServer.call(RpcServer.java:2185) at org.apache.hadoop.hbase.ipc.RpcServer$Handler.run(RpcServer.java:1889) at org.apache.hadoop.hbase.ipc.RpcClient.call(RpcClient.java:1454) at org.apache.hadoop.hbase.ipc.RpcClient.callBlockingMethod(RpcClient.java:1658) at org.apache.hadoop.hbase.ipc.RpcClient$BlockingRpcChannelImplementation.callBlockingMethod(RpcClient.java:1716) at org.apache.hadoop.hbase.protobuf.generated.RegionServerStatusProtos$RegionServerStatusService$BlockingStub.regionServerStartup(RegionServerStatusProtos.java:5402) at org.apache.hadoop.hbase.regionserver.HRegionServer.reportForDuty(HRegionServer.java:1953) ... 2 more
网上查找到原因:系统时间不同步的。
1)在hbase-site.xml文件中 修改增加 ,将时间改大点
<property>
<name>hbase.master.maxclockskew</name>
<value>150000</value>
</property>
2)修改系统时间,将时间改为一致(建议采用本方法):
修改日期
date -s 11/23/2013
修改时间
date -s 15:14:00
检查硬件(CMOS)时间
clock -r
这个修改在系统重启后就失效了,因此为了将这个时间永久生效,需要将修改的时间写入CMOS。
clock -w
3)修改完成后单独启动HRegionServer节点即可:
启动集群中所有的regionserver
./hbase-daemons.sh start regionserver
启动某个regionserver
./hbase-daemon.sh start regionserver
如果想通过游览器游览:http://192.168.2.110:60010,需要重新停启hbase。
0 0
- hbase集群部分节点HRegionServer启动后自动关闭的问题
- Hbase HRegionServer启动后自动关闭
- hbase环境搭建,启动之后HMaster挂掉,或者是集群里,只启动了HMaster节点,HRegionServer节点没有启动的问题
- HRegionServer无法启动,启动hbase后马上挂掉的问题
- Hbase启动后,在主节点只有Hmaster,而在slave节点上没有Hregionserver
- HBase启动后HRegionServer未启动
- hbase启动后,HRegionServer进程不存在解决方法
- HRegionServer进程自动关闭的问题的解决
- hbase启动后HMaster自动关闭
- hbase启动后HMaster自动关闭
- 解决hadoop集群中datanode启动后自动关闭的问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- 解决hadoop集群中datanode启动后自动关闭的问题
- HBASE-1.1.12集群启动之后Hmaster,HregionServer进程会很快死掉问题
- HBase没有启动HRegionServer
- HBase 集群服务器时间不同步导致HRegionServer无法启动
- Hbase 开启关闭遇到的一些问题记录 HregionServer 进程关不掉
- HregionServer 启动部分讲解
- java集合常见问题
- Python机器学习库SKLearn的特征选择
- C语言编程练习——从一个字符数组中读出相应的整数、实数
- react native PixelRatio获取像素密度
- [js笔记] focus和blur事件之表单验证
- hbase集群部分节点HRegionServer启动后自动关闭的问题
- 摩尔定律终结后 科技也许会向这3个方向前进
- CSS中text-decoration属性
- java中讲讲BufferedReader的用法,举例?
- BZOJ 1417: Pku3156 Interconnect 期望DP
- C语言编程练习——字符串数组的冒泡排序,从小到大
- 110. Balanced Binary Tree
- 【android】RecyclerView的使用
- 高通sensor坐标轴的转换