hadoop初识

一、相关名词

HDFS：分布式文件系统

nameNode：名字节点

dataNode：数据节点

block：数据块

元数据：除了文件内容的数据，比如一个文件的名称、大小、权限等信息;

二、HDFS（分布式文件系统）

一个HDFS群一般由一个nameNode和多个dataNode组成

三、数据块block

block是HDFS的数据存储单元，有以下特点：

1. 文件被切分成固定大小的数据块，默认的block大小是64M（可配置），不足64M也存储成一个block

2. 一个文件切分成的若干个block，存储到不同的节点上，默认情况下每个block有三个副本

3. block 大小和副本数通过client端上传文件时设置，上传后副本数可以变更，block大小不能改变