Hadoop HDFS 学习(2)理论
来源:互联网 发布:河南焦作诊所软件 编辑:程序博客网 时间:2024/05/17 18:48
HDFS读流程
客户端调用API的open方法请求NameNode 获得block的位置信息,文件内容存储的不同的block上,然后返回客户端。客户端并发的读不同的block,然后合并成一个文件。(不能超大型文件,磁盘存储可能不够)
HDFS写流程
客户端调用API的create方法请求NameNode 并创建一个文件,然后将文件的名字,拥有者,大小返回客户端。计算该文件分成多少个block,将block写在dataNode 上,客户端只写一次,剩下的副本由第一个dataNode产生线程,根据副本创建规则复制到其他的dataName上,不由客户端创建(优点:速度快)。复制完后返回客户端一个回馈信息,同时汇报给nameNode。上传成功。
HDFS文件权限
上传文件,谁上传的文件,那么这个文件的拥有者就是谁。HDFS不做密码认证。
0 0
- Hadoop HDFS 学习(2)理论
- Hadoop HDFS 学习(1)理论
- hadoop-hdfs学习2
- Hadoop学习(2):HDFS基础
- hadoop学习2--hdfs详解
- Hadoop学习2:HDFS介绍
- hadoop学习笔记(HDFS)
- (2)hadoop学习——hdfs架构详解
- hadoop基础----hadoop理论(三)-----hadoop分布式文件系统HDFS详解
- Hadoop(2)HDFS文件系统
- 深入学习Hadoop 2 - HDFS的读写
- 【hadoop 2学习】联合的HDFS
- Hadoop学习(2)----hdfs shell命令
- Hadoop学习笔记(2)-hdfs原理
- Hadoop HDFS源码学习笔记(一)
- Hadoop HDFS源码学习笔记(二)
- Hadoop HDFS源码学习笔记(三)
- Hadoop HDFS源码学习笔记(四)
- JavaWeb学习笔记之Log4j使用教程
- 1028 Web Navigation
- 电商与微信SSO解决方案
- java中jdbc调用存储过程
- Matlab mex -setup 找不到编译器
- Hadoop HDFS 学习(2)理论
- FIFO 、LRU、LFU三种算法
- 多线程
- java 概念面试题
- 集合
- Android 判断网络状态
- HDOJ 2024 C语言合法标识符
- sql server 查询
- Property List Programming Guide(二)