Hadoop(一)——hadoop的子项目
来源:互联网 发布:ibatis拦截器打印sql 编辑:程序博客网 时间:2024/04/25 14:03
Hadoop子项目中最出名的是MapReduce和HDFS,还有Core、Avro、Pig、Hbase、Zookeeper、Hive和Chukwa这几
子项目:
MapReduce: 分布式数据处理模式和执行行环境,运行于大型商用机集群。
HDFS: 前身是NDFS,分布式文件系统,运行于大型商用机集群。
Core: 一系列分布式文件系统和通用I/O的组件和接口(序列化、java RPC和持久化数据结构)。
Avro: 一种提供高效、跨语言RPC的数据序列系统,持久化数据存储。
Pig: 一种数据流语言和运行环境,用以检索非常大的数据集。Pig运行在MapReduce和HDFS的集群上。
Hbase: 一个分布式的,列存储数据库,使用HDFS作为底层存储,同时支持MapReduce的批量式计算和点查询。
Zookeeper: 一个分布式的、高可用的协调服务。Zookeeper提供分布式锁之类的基本服务用于构建分布式应用。
Hive: 分布式数据仓库。Hive管理HDFS中存储的数据,并提供基于SQL的查询语言用以查询数据。
Chukwa: 分布式数据收集和分析系统,运行HDFS中存储数据的收集器,使用MapReduce来生成报告。
- Hadoop(一)——hadoop的子项目
- Hadoop 的子项目
- Hadoop子项目——hive
- Hadoop子项目——hbase
- Hadoop(六)——子项目Pig
- Hadoop(七)——子项目Hive
- Hadoop(六)——子项目Pig
- Hadoop(七)——子项目Hive
- Hadoop(七)——子项目Hive
- Hadoop(六)——子项目Pig
- Hadoop学习(一) — 初识Hadoop
- hadoop子项目简介
- Hadoop主要子项目
- hadoop子项目---pig
- hadoop入门--子项目
- hadoop 子项目hadoop-mapreduce-examples的简单介绍
- Hadoop学习笔记(一)——Hadoop体系结构
- hadoop学习(一)——hadoop是什么
- vs6.0中文版下载地址
- Spring与Hibernate、Struts、Log4j整合
- 文章 contour detection and hierarchical image segmentation 源代码 编译
- 由SOAP消息看Web Service FrameWork的细节差异
- Dialog Based中加入ToolBar
- Hadoop(一)——hadoop的子项目
- PROVIDER (EXCEL 2007)
- Javascript Object.extend
- 利用WSE 加密SOAP报文增加WEB SERVICE 的安全性
- Cisco 交换机 升级 IOS
- 无题VB
- IBM大中华区总经理钱大群:物联网需要落地
- 实体街评论
- GridView光棒效果