HDFS架构
来源:互联网 发布:linux du命令排序 编辑:程序博客网 时间:2024/05/20 10:12
主节点NameNode负责管理所有DataNode,保存着文件的元数据信息,包括文件名、文件目录结构、文件属性(副本数、文件权限、生成时间)对应的block、以及block所在的DataNode等信息。
HDFS架构保障可靠性的措施:
1、一个NameNode和多个DataNode
2、数据副本--冗余机制
3、故障检测
DataNode:心跳包(检测是否宕机,T=3s)block报告(安全模式下检测)、数据完整性检测(校验和比较)。有两个文件组成:数据文件和信息文件(记录文件长度、时间戳、校验和)。
NameNode:日志文件、镜像文件
4、空间回收机制
详情可见官方文档http://itm-vm.shidler.hawaii.edu/HDFS/ArchDocOverview.html#_Toc291720190
阅读全文
0 0
- hdfs学习---hdfs架构
- HDFS-3.HDFS架构
- hdfs架构
- HDFS架构
- HDFS架构
- HDFS架构
- HDFS架构
- HDFS架构
- HDFS架构
- HDFS 架构
- HDFS架构
- HDFS 架构
- HDFS架构
- HDFS 架构
- HDFS 架构
- HDFS架构
- HDFS架构
- HDFS架构( HDFS Architecture)
- window对象
- 使用Yarn代替npm包管理器
- 写在最初 ——阿狐
- 数字签名是什么?
- js location对象
- HDFS架构
- IIS——您查找的资源存在问题
- TextView 常用属性及其对应方法
- Abput ajax
- java2013的4道题的Answer
- cmake中链接系统标准库
- JS history对象和screen对象以及Navigator对象
- PAT-A-1013. Battle Over Cities (25)
- Vjudge攻略——POJ2965