hbase 伪分布式安装
来源:互联网 发布:js中string的match 编辑:程序博客网 时间:2024/06/05 18:36
hbase安装模式介绍
1.单机模式
(1)不使用hdfs,仅使用本地文件系统。
(2)zookeeper与hbase运行在同一个jvm中。
2.伪分布式模式
(1)所有进程运行在同一个切点上,不同进程运行在不同的jvm当中。
3.完全分布式模式
(1)进程运行在多个服务器集群中
(2)分布式依赖于HDFS系统,因此部署hbase之前一定要有一个正常工作的hdfs集群。
Linux环境准备
1.关闭防火墙
#service iptables stop
#chkconfig iptables off
#vim /etc/sysconfig/selinux
SELINUX=disabled
2.配置主机名及主机名绑定
#vim /etc/sysconfig/network
NETWORKING=yesHOSTNAME=hbase
#vim /etc/hosts
192.168.244.30 hbase
3.SSH免密登录
#ssh-keygen
一直按Enter键
#ssh-copy-id -i /root/.ssh/id_rsa.pub root@192.168.244.30
4.安装jdk
#tar xvf jdk-linux-x64.tar.gz -C /usr/local/
#vim /etc/profile
export JAVA_HOME=/usr/local/jdk1.7.0_79export PATH=$JAVA_HOME/bin:$PATHexport CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
Hadoop的安装部署
#tar xvf hadoop-2.5.2.tar.gz -C /usr/local
#cd /usr/local/hadoop-2.5.2/
#vim /etc/hadoop/hadoop-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_79
1.配置HDFS
#mkidr /usr/local/hadoop-2.5.2/data
#vim /etc/hadoop/core-site.xml
<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://192.168.244.30:8020</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop-2.5.2/data/tmp</value> </property></configuration>
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property></configuration>
2.配置YARN
#mv etc/hadoop/mapred-site.xml.template etc/hadoop/mapred-site.xml
#vim etc/hadoop/mapred-site.xml
<configuration> <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property></configuration>
<configuration> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property></configuration>
3.启动HDFS
初始化文件系统
#bin/hdfs namenode -format
...16/09/25 20:33:02 INFO common.Storage: Storage directory /tmp/hadoop-root/dfs/name has been successfully formatted....
输出上述信息即代表文件系统初始化成功。
启动NameNode和DataNode进程
#bin/start-dfs.sh
4.启动yarn
#sbin/start-yarn.sh
5.通过jps查看各进程是否启动成功
#jps
2421 NodeManager2339 ResourceManager1924 NameNode2029 DataNode2170 SecondaryNameNode2721 Jps
也可以通过http://192.168.244.30:50070/查看hdfs是否启动成功
hbase的安装部署
关于hbase和hadoop的版本对应信息,可参考http://hbase.apache.org/book.html#configuration
#tar xvf hbase-1.2.3-bin.tar.gz -C /usr/local
#cd /usr/local/hbase-1.2.3
#vim conf/hbase-env.sh
export JAVA_HOME=/usr/local/jdk1.7.0_79
1.配置hbase
#mkdir /usr/local/hbase-1.2.3/data
#vim conf/hbase-site.xml
<configuration> <property> <name>hbase.rootdir</name> <value>hdfs://192.168.244.30:8020/hbase</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/local/hbase-1.2.3/data/zookeeper</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property></configuration>
#vim conf/regionservers
192.168.244.30
2.启动hbase
#bin/hbase-daemon.sh start zookeeper
#bin/hbase-daemon.sh start master
#bin/hbase-daemon.sh start regionserver
2421 NodeManager2975 HQuorumPeer3302 HRegionServer3051 HMaster2339 ResourceManager1924 NameNode2029 DataNode2170 SecondaryNameNode3332 Jps
通过http://192.168.244.30:16030/访问hbase的web页面。
hbase使用已安装的zookeeper
1. 修改conf/hbase-env.sh 添加
export HBASE_MANAGES_ZK=false
HBASE-MANAGES_ZK=false时使用独立的,为true时使用默认自带的。
2. 拷贝zookeeper的配置文件zoo.cfg到HBase的classpath
root@master:/data/soft/hbase# cp /data/soft/zookeeper/conf/zoo.cfg ./conf/
<property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/local/hbase-1.2.3/data/zookeeper</value> </property>删掉这一段配置。
4.启动hbase即可。
阅读全文
0 0
- hbase伪分布式安装
- hbase伪分布式安装
- Hbase 伪分布式安装
- hbase伪分布式安装
- Hbase伪分布式安装
- Hbase伪分布式安装
- HBase安装(伪分布式)
- Hbase伪分布式安装
- hbase伪分布式安装
- Hbase伪分布式安装
- Hbase伪分布式安装
- hbase 伪分布式安装
- Hbase伪分布式安装-Windows
- HBase伪分布式安装配置
- HBase的伪分布式安装
- 安装hadoop+hbase伪分布式
- mac安装hbase伪分布式
- HBase 伪分布式安装配置
- springmvc国际化
- SSM框架——详细整合教程(Spring+SpringMVC+MyBatis)
- 【C#】泛型(Generic)
- 计算机网络之分类地址
- 网络获取图片
- hbase 伪分布式安装
- 解决spring中注入不能是全局变量的问题
- 【C#】匿名方法
- xshell常用命令
- 海航好不好?看海航集团的旅游行业的升级换代就知道
- 基于开源库实现云PACS的方案
- 【C#】不安全代码
- 堆排序
- AlertDialog简单工具类