hadoop 的 框架 ZooKeeper 入门
来源:互联网 发布:软件评测中心招聘 编辑:程序博客网 时间:2024/05/19 00:43
首先先了解一下 ZooKeeper 是什么?
- Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务;
- 它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等
那么ZooKeeper 又有什么作用呢?用一张图片来做一个简单的了解
那么hadoop 又为什么要用 ZooKeeper 来处理事件呢?
ZooKeeper能够提供通用的分布式锁服务,用以协调分布式应用;使用Zookeeper的事件处理确保整个集群只有一个NameNode,存储配置信息等.最主要的是ZooKeeper具有简单、富有表现力、高可用性、采用松耦合交互方式等这些特性。
下面开始搭建一个Zookeeper的集群
ZooKeeper集群至少3个节点(hadoop0,hadoop1,hadoop2),并且节点之间的系统时间一致。
在hadoop0上,解压缩、重命名、设置环境变量
在hadoop0的$ZOOKEEPER_HOME/conf下,mv zoo_sample.cfg zoo.cfg
编辑zoo.cfg文件
修改dataDir=/usr/local/zk/data
新增了三行 server.0=hadoop0:2888:3888
server.1=hadoop1:2888:3888
server.2=hadoop2:2888:3888
在hadoop0上, 创建目录 mkdir -p /usr/local/zk/data
在data目录中,创建文件myid,内容是0
把zk目录、环境变量文件复制到hadoop1、hadoop2中
scp -r /usr/local/ZooKeeper hadoop1:/usr/local
在hadoop1、hadoop2中修改文件myid,把内容改为1、2
在hadoop0、hadoop1、hadoop2上,分别执行启动命令zkServer.sh start
查看节点Mode,执行命令zkServer.sh status
使用shell操作zookeeper
- 执行zkCli.sh进入ZooKeeper的shell环境
- 常见的操作:
ls /
create /example abcd
get /example
set /example asdfadsf
ZooKeeper的一个入门水平也差不多了
- hadoop 的 框架 ZooKeeper 入门
- zookeeper入门之curator框架--几种锁的操作
- zookeeper入门之curator框架--几种锁的操作
- zookeeper入门之curator框架--几种锁的操作
- zookeeper入门之Curator框架--几种监听器的使用
- Hadoop入门(二):ZooKeeper单机安装
- 【hadoop zookeeper】Zookeeper开源客户端框架Curator简介
- 【Hadoop】ZooKeeper的简单理解
- Dubbo与Zookeeper、spring框架入门整合。
- Hadoop--ZooKeeper
- Hadoop-zookeeper
- ZooKeeper的:Curator框架应用
- ZooKeeper的:Curator框架应用
- hadoop学习之zookeeper(6):zookeeper的安装配置
- Hadoop生态系统搭建(5)—— 分布式协同服务框架 Zookeeper 的安装部署与测试
- linux中hadoop+zookeeper+hbase的配置
- Zookeeper,Hbase,hadoop之间的联系
- hadoop,zookeeper, hbase集群的批量安装
- Crystal Reports 2008设计器使用java bean数据源
- OCP-1Z0-053-V12.02-544题
- 航天类SCI收录期刊 截至2009年
- Android程序启动时的加载画面Demo
- QT设置图标
- hadoop 的 框架 ZooKeeper 入门
- java 金额转大写
- 帮你解决android.os.NetworkOnMainThreadException异常
- c/c++类型转换总结
- lightoj 1136 第一次打表找规律做题..
- JAVA实现DES加密
- 《高可用MySQL——构建健壮的数据中心》读书笔记之一
- TYPES和DATA的区别
- ACE线程之ACE_Thread_Mutex互斥锁