hadoop学习笔记--9.HBase基础
来源:互联网 发布:企业网站推广优化 编辑:程序博客网 时间:2024/06/05 01:20
1.1HBase起源
HBase是Apache Hadoop的数据库,能够对大型数据提供随机、实时的读写访问。HBase的目标是存储并处理大型的数据。HBase是一个开源的,分布式的,多版本的,面向列的存储模型,它存储的是松散型数据。HBase是bigtable的开源山寨版本.
1.2HBase在Hadoop生态体系中的位置
上图描述了Hadoop生态系统中的各层系统。其中,HBase位于结构化存储层,Hadoop HDFS为HBase提供了高可靠性的底层存储支持,Hadoop MapReduce为HBase提供了高性能的计算能力,Zookeeper为HBase提供了稳定服务和失效转移(FailOver)机制。
1.3HBase与HDFS对比
*HDFS适合批处理场景
- 1、不支持数据随机查找
- 2、不适合增量数据处理
- 3、不支持数据更新
*HBase支持场景
- 1、支持数据随机查找
- 2、适合增量数据处理
- 3、支持数据更新
两者都具有良好的容错性和扩展性,都可以扩展到成百上千个节点;
2.1单机模式
1、下载解压
tar -zvxf hbase-1.21-security.tar.gz
2、设置系统环境变量
export HBASE_HOME=/usr/local/hbase
export PATH=$HBASE_HOME/bin:$PATH
修改后重新生效:source /etc/profile
3、设置Hbase环境
(1)、进入hbase/conf目录下,修改hbase-env.sh文件
export JAVA_HOME=/usr/local/jdk
export HBASE_MANAGES_ZK=true #告诉HBase使用它自己的zookeeper实例,分布式模式下需要设置为false
(2)、进入hbase/conf目录下,修改conf/hbase-site.xml文件
<configuration><property> <name>hbase.rootdir</name> <value>file:///usr/hbase</value> //设置Hbase数据存储目录,本地文件目录</property><property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/hbase/data/zookeeper</value> //设置zookeeper数据存储目录</property></configuration>
4、启动,验证Hbase
使用 start-hbase.sh 启动 HBase.
使用 jps 命令可以看到 HMaster进程正在运行
还可以通过访问HBase的Web接口查看:http://hadoop1:60010
HBase运行在HDFS之上,使用HBase之前务必启动HDFS服务
<configuration><property> <name>hbase.rootdir</name> <value>file:///usr/hbase</value> //设置Hbase数据存储目录,本地文件目录</property><property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/hbase/data/zookeeper</value> //设置zookeeper数据存储目录</property></configuration>
4、启动,验证Hbase
使用 start-hbase.sh 启动 HBase.
使用 jps 命令可以看到 HMaster进程正在运行
还可以通过访问HBase的Web接口查看:http://hadoop1:60010
HBase运行在HDFS之上,使用HBase之前务必启动HDFS服务
2.2伪分布模式
参考:1、HBase官方的文档
2、https://my.oschina.net/jackieyeah/blog/712019
2.3完全分布模式
参考:1、HBase官方的文档
2、https://my.oschina.net/jackieyeah/blog/712083
- hadoop学习笔记--9.HBase基础
- HBase/Hadoop学习笔记
- HBase/Hadoop学习笔记
- HBase/Hadoop学习笔记
- Hadoop学习笔记—15.HBase框架学习(基础实践篇)
- hadoop学习笔记之操作hbase
- Hadoop学习笔记之HBase安装
- Hadoop学习笔记之HBase应用场景
- Hadoop学习笔记(四):HBase
- Hadoop学习笔记之初始HBase
- hadoop学习笔记之Hbase安装
- hadoop学习笔记之hbase原理
- Hadoop之HBase框架学习基础实践篇(笔记16)
- hadoop学习笔记(十)——hadoop + hbase + zookeeper
- HBase笔记 hadoop.hbase.NotAllMetaRegionsOnlineException
- Hadoop学习笔记1--Hadoop基础
- 《Hadoop学习笔记系列》一.Hadoop基础
- 【Hadoop学习笔记】——Hadoop基础
- DFS_棋盘问题
- x86内存框架简介
- [leetcode]501. Find Mode in Binary Search Tree
- Sieve Prime 素数筛法
- 用gradle添加依赖时怎么确定版本号
- hadoop学习笔记--9.HBase基础
- JavaScript学习(五)
- java线程组
- Linux学习——shell编程之正则表达式和字符处理命令
- V分身
- 20170716Windows11_3_可等待计时器对象
- 《neural network and deep learning》题解——ch03 过度拟合&规范化&权重初始化
- Android App应用调用已安装市场,进行软件评分的功能代码实现
- poj 2443 Set Operation (bitset用法