Hadoop学习之一
来源:互联网 发布:spss输入数据是问号 编辑:程序博客网 时间:2024/06/06 02:01
Hadoop要解决的两个问题:
1.海量数据的存储---HDFS
2.海量数据的分析-----MapReduce
HDFS设计目标:
1.Very large files
2.Streaming data access
write-one,read-many-times
3.Commodity hardware
HDFS架构:
Block:一个文件分块,默认64M
NameNode:保存整个文件系统的目录信息,文件信息以及文件相应的分块信息。
DataNode:用于存储Blocks。
HDFS的HA策略:NameNode一旦当机,整个文件系统将无法工作。如果NameNode中的数据丢失,整个文件系统也就丢失了。
2.X开始,HDFS支持NameNode的active-standy模式。
0 0
- 学习Hadoop笔记之一
- Hadoop学习之一
- hadoop学习笔记之一:初识hadoop
- hadoop学习之一:mac下hadoop安装
- hadoop学习笔记之一:hadoop生态系统
- 【hadoop学习之一】Hadoop集群 安装配置
- hadoop学习之一:mac下hadoop安装
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop学习之一《环境搭建及配置》
- Hadoop-2.2.0学习之一Hadoop-2.2.0变化简介
- python中常见的数据预处理方法
- 1099 字串变换
- ElasticsearchCRUD使用(六)【EF和Elasticsearch的MVC应用程序】
- React Native导航器之react-navigation使用
- caffe 添加YOLO新层Leaky Layer
- Hadoop学习之一
- 学习小结
- 注释的反面教材
- 0511
- Leetcode-Longest Substring Without Repeating Characters
- Android 获取本地外网IP、内网IP、计算机名等信息
- mysql拷贝表的几种方式
- Anaconda自定义配置以及远程登录jupyter
- 第一天练习练习博客怎么用