《分布式计算、云计算与大数据》笔记

来源:互联网 发布:软件模块化设计缺点 编辑:程序博客网 时间:2024/05/18 08:15

chapter 11 大数据技术与实践

大数据4V特征

数据量大-Volume,变化速度快-Velocity,多类型-Variety,高价值-Value

大数据存储平台

1、HDFS(Hadoop Distributed File System)

搭建

部署模式:单机模式、伪分布模式、全分布模式

实验/编程:单机模式、伪分布模式,一台普通计算机就可以完成搭建

生产环境:全分布模式

2、HBase 可对大数据进行随机的、实时的读取和写入操作,它的目标是在普通的机器集群中处理巨大的数据表,数据表的行列数可以达到百万级别。Hbase是一个开源的、数据多版本存储的、面向列的大数据存储平台。

支持的数据操作:get,put,scan,delete