hive与hbase的联系与区别
来源:互联网 发布:linux进入命令行界面 编辑:程序博客网 时间:2024/05/19 16:50
hive是什么?
白话一点再加不严格一点,hive可以认为是map-reduce的一个包装。hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序。hbase是什么?
同样白话一点加不严格一点,hbase可以认为是hdfs的一个包装。他的本质是数据存储,是个NoSql数据库;hbase部署于hdfs之上,并且克服了hdfs在随机读写方面的缺点。最后,所以要问hive和hbase的区别,就应该问问map-reduce和hdfs之间的区别,问区别,就要先说说他俩哪里像。于是,你说map-reduce和hdfs哪里像了呢?
共同点:
1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储区别:
2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统,HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 。
3.想象你在操作RMDB数据库,如果是全表扫描,就用Hive+Hadoop,如果是索引访问,就用HBase+Hadoop 。
4.Hive query就是MapReduce jobs可以从5分钟到数小时不止,HBase是非常高效的,肯定比Hive高效的多。
5.Hive本身不存储和计算数据,它完全依赖于HDFS和MapReduce,Hive中的表纯逻辑。
6.hive借用hadoop的MapReduce来完成一些hive中的命令的执行
7.hbase是物理表,不是逻辑表,提供一个超大的内存hash表,搜索引擎通过它来存储索引,方便查询操作。
8.hbase是列存储。
9.hdfs作为底层存储,hdfs是存放文件的系统,而Hbase负责组织文件。
10.hive需要用到hdfs存储文件,需要用到MapReduce计算框架。
阅读全文
0 0
- hive与hbase的联系与区别
- hive与hbase的区别与联系
- hive与hbase的联系与区别
- hbase与hive的区别与联系
- hive与hbase的联系与区别
- 【Hive Hbase】Hbase与Hive的区别与联系
- Hbase和Hive的区别与联系
- hive与hbase联系与区别
- hive,hbase与pig的区别与联系
- Hbase与Hive的区别与联系 (总结3)
- Hive,Pig,HBase 区别与联系
- Hbase总结(三)-Hbase与Hive的区别与联系
- Hbase总结(三)-Hbase与Hive的区别与联系
- hive与hbase的区别
- Hive与Hbase的区别
- Hive与Hbase的区别
- Hive与Hbase的区别
- hive与hbase的区别
- 挖矿超频
- RISC-V,Alex的wokshop总结
- A*算法——算法拓展篇(1)
- Spring Cloud分布式微服务云架构
- JAVA中&&和&、||和|(短路与和逻辑与、短路或和逻辑或)的区别
- hive与hbase的联系与区别
- 高通625系列-MSM8953 (Cortex-A53架构)
- sublime3 3154 LICENSE
- C++继承的各种模型
- 最大连续子序列
- 挖矿超频
- 2017-11-29 7周3次课 linux系统日常管理(三)
- 请求webService的几种方式
- java的Collection或Map实现元素自动排序