技术演绎之 [ hadoop] 内部介绍

来源:互联网 发布:python微信api 编辑:程序博客网 时间:2024/04/28 15:31

作者:zk
e_mail:zk_mails@163.com
qq:312239613
博客首页:http://blog.csdn.net/zk0521(转载请注明出处)
博客导航目录:http://blog.csdn.net/zk0521/article/details/46472813
注:如有问题请联系作者,作者会及时改正博客

Hadoop子项目家族:


hadoop内部介绍:

1、Hadoop           集群进行数据分析,      2大核心: Map-Reduce  HDFS 
2、Map-Reduce  分布式编程机制,作业。 山寨 Google  GFS
3、HDFS              hadoop支持的分布式文件分析系统。
3、pig                   轻量级的数据分析工具。有专门的 pig语言。
4、Hbase            运行在hadoop,或不运行,分布式列式数据库。 山寨 Google Bigtable 
5、Hive                sql语言,输入sql语句自动转换成Hive程序。(HiveQL)查询,(运行在hadoop基础上) 可以看做是一个 关系型数据库。

Hadoop架构:



hadoop内部配置文件:



0 0