bug:ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint

来源:互联网 发布:linux rpm 安装目录 编辑:程序博客网 时间:2024/05/23 18:04
一、概念介绍
    hadoop.tmp.dir配置参数指定hdfs的默认临时路径,这个最好配置,如果在新增节点或者其他情况下莫名其妙的DataNode启动不了,就删除此文件中的tmp目录即可。不过如果删除了NameNode机器的此目录,那么就需要重新执行NameNode格式化的命令。(我觉得这其实就是因为上面那个原因造成的。按照上面那个第二个方法去做就行了。)
    此参数最好在安装时进行配置
     etc/hadoop/core-site.xml中:
<property>
    <name>hadoop.tmp.dir</name>
    <value>/data/hadoop/tmp</value>
</property>

二、hdfs的SecondaryNameNode的日志报Inconsistent checkpoint fields异常的原因


    最近在本机测试hadoop集群时,发现SecondaryNameNode.log(伪名称)的日志总是报Inconsistent checkpoint fields异常:

2016-06-09 18:07:04,364 ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpoint
java.io.IOException: Inconsistent checkpoint fields.
LV = -60 namespaceID = 584809856 cTime = 0 ; clusterId = CID-c602bccc-3af9-431d-8391-f57b9660d078 ; blockpoolId = BP-998352565-192.168.1.118-1465453069192.
Expecting respectively: -60; 773040246; 0; CID-48c46c43-8a44-4096-93bf-61d9942c8e2b; BP-1325084739-192.168.1.108-1456487846292.

    此异常即是配置hadoop.tmp.dir参数引起的,在hdfs-site.xml中增加此参数,重新启动集群即可。
0 0
原创粉丝点击