Hadoop技术预览
来源:互联网 发布:千牛 卖家 for mac 编辑:程序博客网 时间:2024/05/18 00:04
首次发布:Hadoop技术预览
自从Hadoop的出现,引领大数据的浪潮越来越热。大数据存储的主要技术路线有几种:
1.Hadoop
2.Cassandra
3.MongoDB
Hadoop是Apache的开源项目,同时有很多商业公司对Hadoop进行版本发行和商业支持,参见:http://wiki.apache.org/hadoop/Distributions%20and%20Commercial%20Support
其中在最有名为人所知的三家:
1.Cloudera
2.Hortonwork
3.MapR
这三个厂商之中,MapR最为封闭;Hortonworks最为开放,产品线全开源,在线文档比较丰富。国内使用Cloudera CDH和Hortonworks的应该是最多的。
准实时计算框架/即席查询
1.CDH的框架有:Impala + Spark;
2.HDP的框架有:Tez + Spark;
3.MapR的框架有:Drill + Tez + Spark。
关于Spark:
2014年大数据最热门的技术路线就是算是Spark了,而且得力于Spark不遗余力的推广和快速成长。Cloudera是最早支持Spark,也是最激进的。下图即是Spark在Cloudera产品线中的定位:
实际上快速计算框架的发展才刚刚开始,社区中已经有如下几种:
1.Spark/Shark
2.Hortonworks Tez/Stinger
3.Cloudera Impala
4.Apache Drill
5.Apache Flink
6.Apache Nifi
7.Facebook Presto
0 0
- Hadoop技术预览
- Spark 2.0技术预览 (spark,hadoop技术微博)
- SuperRuntimeLibrary.GameEngine 技术预览
- JavaFX技术预览
- JavaFX技术预览
- JavaFX技术预览
- Win10技术预览版
- Windows 10 技术预览
- Windows 10 技术预览
- Spark 2.0技术预览
- Prototype技术预览版
- hadoop分布式架构快速预览
- 技术-Hadoop
- Hadoop技术
- Qt 4.6 技术预览版
- 搜索引擎技术之概要预览
- 搜索引擎技术之概要预览
- 搜索引擎技术之概要预览
- 第六章习题汇总
- Median of Two Sorted Arrays
- 浏览一天的收获
- 代码学习-Linux内核网卡收包过程(NAPI)
- HDU--2032
- Hadoop技术预览
- 用VS2012创建和使用WebService(连接SQL Server)
- android-ioc
- 安卓打包修改配置
- Matlab画曲线
- 应用发布到sae问题总结
- django静态图片配置
- 【莫比乌斯反演】[BZOJ2301]Problem b
- Spring框架之自动装配