HDFS_镜像文件

来源:互联网 发布:linux命令记录日志 编辑:程序博客网 时间:2024/06/06 03:48

镜像文件的解析与反解析:

HDFS的FsImage镜像文件包含着集群所有文件的元数据信息。

    <name>dfs.namenode.name.dir</name>

FsImage的存储信息包括:文件目录信息、位置信息、副本数、权限信息

HDFS关于镜像解析的命令主要以hdfs oiv开头,即OfflineImageView的缩写。解析与反解析只是处理器的不同,目前有以下5大处理器:
XML、ReverseXML、FileDistibution、Web、Delimited

调用命令如下:

    bin/hdfs oiv -p XML/ReverseXML -i INPUTFILE -o OUTPUTFILE

文件大小分析:

    bin/hdfs oiv -p FileDistribution -i INPUTFILE -o OUTPUTFILE

用hdfs oev命令分析editlog文件:
可以分析出指定editlog文件中各个操作记录类型以及相应的计数值。

原创粉丝点击