hbase 压缩 Hbase有两种压缩策略：minor和major。Minor compactions通常选择几个临近的小的storefiles把他们重写成一个。Minors 不会丢掉已删除或者过期的cells，只有major compactions才会做这些。有时一次Minor compactions将会选择一个s……
hbase code package com.run.hbase.dataImport; import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.File; import java.io.FileReader; im……
hbase 结点之间时间不一致造成regionserver启动失败 Caused by: org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server s3,60020,1304927875246 has been rejected; Re……
HBase的数据模型 Hbase的数据模型 row 行 column 列 row keys 行键 column keys 列键 column families 列族 Hbase的数据模型和Bigtable的数据模型是一致的,非常适用于数据密集型的系统. 简单的说,Hbase可以简化描述为一个Map>>>. 一个M……
[2] HBase表的基本操作 [hadoopuser@master hbase-0.20.3]$ bin/hbase shell HBase Shell; enter 'help' for list of supported commands. Version: 0.20.3, rUnknown, Fri Apr 9 1……
[1] HBase集群配置安装 HBase集群配置安装 hadoop-0.20.2 hbase-0.20.3 zookeeper-3.3.0 1: tar zxvf hbase-0.20.3.tar.gz 2: 修改 ./hbase-0.20.3/conf/hbase-env.sh export JAVA_HOME=/us……
2012-08-02 13:44:23
HBase性能调优 因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。 配置优化 zookeeper.session.timeout 默认值：3分钟（180000ms） 说明：Regio……
2012-08-02 13:24:52
HBase异常：hbase-default.xml file seems to be for and old version of HBase的解决方法 交流分类：Java 近期在使用HBase Java Client连接HBase服务端创建Configuration对象时，遇到了hbase-default.xml file seems to be for and old version of HBase的异常，经过查找资料及阅读HBase相关源码，对这类异常的解决方法……
2012-08-02 13:01:03
HTable和HTablePool使用注意事项 HTable和HTablePool都是HBase客户端API的一部分，可以使用它们对HBase表进行CRUD操作。下面结合在项目中的应用情况，对二者使用过程中的注意事项做一下概括总结。 HTable HTable是HBase客户端与HBase服务端通讯的Java API对象，客户端可以通过HTabl……
2012-08-02 13:00:41
HBase性能优化方法总结（四）：数据计算 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第四部分内容：数据计算相关的优化方法。 4. 数据计算 4.1 服务端计算 Coprocessor运行于HBase RegionServ……
HBase性能优化方法总结（三）：读表操作 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第三部分内容：读表操作相关的优化方法。 3. 读表操作 3.1 多HTable并发读 创建多个HTable客户端用于读操作，提高读数据的……
HBase性能优化方法总结（二）：写表操作 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第二部分内容：写表操作相关的优化方法。 2. 写表操作 2.1 多HTable并发写 创建多个HTable客户端用于写操作，提高写数据的……
HBase性能优化方法总结（一）：表的设计 本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。 下面是本文总结的第一部分内容：表的设计相关的优化方法。 1. 表的设计 1.1 Pre-Creating Regions 默认情况下，在创建HBase表……
HBase在数据统计应用中的使用心得 1. 数据统计的需求 互联网上对于数据的统计，一个重要的应用就是对网站站点数据的统计，例如CNZZ站长统计、百度统计、Google Analytics、量子恒道统计等等。 网站站点统计工具无外乎有以下一些功能： 1）网站流量统计：包括PV、UV、IP等指标，这些统计指标可以以趋势图的形式展示出来，如……
HBase Java客户端编程 本文以HBase 0.90.2为例，介绍如何在Windows系统，Eclipse IDE集成环境下，使用Java语言，进行HBase客户端编程，包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。 1. 准备工作 1、下载后安装jdk包（这里使用的是jdk-6u10-rc2-bin-b3……
