Hadoop之——HBase笔记
来源:互联网 发布:php get获取json数据 编辑:程序博客网 时间:2024/05/01 05:04
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/46447573
1.HBase(NoSQL)的数据模型
1.1 表(table)
存储管理数据的。
1.2 行键(row key)
类似于MySQL中的主键。
行键是HBase表天然自带的。1.3 列族(column family)
列的集合。
HBase中列族是需要在定义表时指定的,列是在插入记录时动态增加的。HBase表中的数据,每个列族单独一个文件。
1.4 时间戳(timestamp)
列(也称作标签、修饰符)的一个属性。
行键和列确定的单元格,可以存储多个数据,每个数据含有时间戳属性,数据具有版本特性。如果不指定时间戳或者版本,默认取最新的数据。
1.5 存储的数据都是字节数组。
1.6 表中的数据是按照行键的顺序物理存储的。
2.HBase的物理模型
2.1 HBase是适合海量数据(如20PB)的秒级简单查询的数据库。
2.2 HBase表中的记录,按照行键进行拆分, 拆分成一个个的region。
许多个region存储在region server(单独的物理机器)中的。这样,对表的操作转化为对多台region server的并行查询。
3.HBase的体系结构
3.1 HBase是主从式结构,HMaster、HRegionServer
4.HBase伪分布安装
4.1 解压缩、重命名、设置环境变量
4.2 修改$HBASE_HOME/conf/hbase-env.sh
修改内容如下:
export JAVA_HOME=/usr/local/jdkexport HBASE_MANAGES_ZK=true
4.3 修改$HBASE_HOME/conf/hbase-site.xml
修改内容如下:
<property><name>hbase.rootdir</name>
<value>hdfs://hadoop0:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>hadoop0</value>
</property>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
4.4 (可选)文件regionservers的内容为hadoop0
4.5 启动hbase,执行命令start-hbase.sh
******启动hbase之前,确保hadoop是运行正常的,并且可以写入文件*******4.6 验证:
(1)执行jps,发现新增加了3个java进程,分别是HMaster、HRegionServer、HQuorumPeer
(2)使用浏览器访问http://hadoop0:60010 0 0
- Hadoop之——HBase笔记
- Hadoop之——HBase集群搭建笔记(补充)
- hadoop学习笔记(十)——hadoop + hbase + zookeeper
- Hadoop之——Hbase Shell命令
- Hadoop之——Java操作HBase
- hadoop学习笔记之操作hbase
- Hadoop学习笔记之HBase安装
- Hadoop学习笔记之HBase应用场景
- Hadoop学习笔记之初始HBase
- hadoop学习笔记之Hbase安装
- hadoop学习笔记之hbase原理
- HBase笔记 hadoop.hbase.NotAllMetaRegionsOnlineException
- zookeeper+hadoop+hbase 之 hbase
- Hadoop之Hbase------>Hbase常用命令
- HBase/Hadoop学习笔记
- Hadoop 笔记 4 Hbase
- HBase/Hadoop学习笔记
- HBase/Hadoop学习笔记
- 慈善和宽容
- 机器学习算法(六):随机森林
- 主题模型TopicModel:通过gensim实现LDA
- 使用jemalloc(或tcmalloc)优化MYSQL(安装步骤)
- java PropertyDescriptor 应用及源码分析
- Hadoop之——HBase笔记
- Isomorphic Strings
- 寻找最近公共祖先
- 国泰君安实习笔试面试情况
- hdoj 2824 The Euler function 【欧拉函数 简单】
- 基于BeautifulSoup的网页文本提取(1)
- 答题总结(1)
- tomcat的CATALINA_HOME变量
- 慕课网HTML5学习笔记 (下)