hadoop学习之数据完整性
来源:互联网 发布:井下电钳网络考试平台 编辑:程序博客网 时间:2024/06/05 08:49
当客户端从某个Datanode获取的数据可能是损坏的,损坏可能是由于Datanode的存蓄设备错误、网络错误或者软件bug造成的。HDFS客户端软件实现了对HDFS文件内容的校验和检查。当客户端创建一个新的HDFS文件,会计算这个文件的每个数据块的校验和,并将校验和作为一个单独的隐藏文件保存在HDFS名字空间下,当客户端获取文件 内容后,他会校验从datanode获取的数据的跟响应的教校验和文件中的校验和是否匹配,如果不匹配,客户端可以从其他的Datanode获取该数据的的副本。
- hadoop学习之数据完整性
- Hadoop学习日志之数据完整性
- Hadoop原理 之 数据完整性
- Hadoop 之 HDFS 的数据完整性
- Hadoop HDFS数据完整性
- Hadoop数据完整性
- oracle学习 数据完整性
- Oracle之数据完整性
- ORACLE学习之路--管理数据完整性约束
- Oracle学习笔记之数据完整性、索引、权限、角色
- 6- hadoop 数据完整性与校验
- Oracle数据完整性学习笔记
- 数据库之数据的完整性
- Oracle笔记之数据完整性
- MSSQL之七 数据完整性
- 数据库之维护数据完整性
- HDFS之数据完整性校验
- hadoop学习之数据复制
- [2010Beijing wc]矩阵距离
- Qt学习笔记 - QSignalMapper
- C#图像快速傅立叶变换及二维傅立叶变化
- Hibernate Work
- Nutch 1.3 学习笔记 10-1 - Ntuch 插件机制简单介绍
- hadoop学习之数据完整性
- 请不要做浮躁的人(本博文参考于别人,看到一些经典的句子复制了一些,送给菜鸟们。。。。
- OpenRTMFP/Cumulus Primer(7)CumulusServer启动流程分析(续3)
- Nutch 1.3 学习笔记 10-2 插件扩展
- Nutch 1.3 学习笔记 10-3 插件机制分析
- S3C2410驱动分析之触摸屏驱动
- 搭建Struts2开发环境–开发Struts2应用依赖的jar文件
- access自动编号,标准表达式中数据类型不匹配
- SeekBar拖动时,同时播放系统铃声,以达到试听效果