cdh完美集成kafka
来源:互联网 发布:如何在七天网络查分 编辑:程序博客网 时间:2024/06/06 23:50
前言
其实cloudera已经做了这个事了,只是把kafka的包和cdh的parcel包分离了,只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了,就可以实现完美集成了。
具体实现的简要步骤可参照cloudera官网提供的文档:http://www.cloudera.com/content/www/en-us/documentation/kafka/latest/topics/kafka_installing.html,
下面就是我根据这个文档的集成过程。
kafka相关包准备
csd包:http://archive.cloudera.com/csds/kafka/
parcel包: http://archive.cloudera.com/kafka/parcels/latest/ ( 根据自己的集群的系统版本下载 )
我用的是centos6.5 x64的系统,所以我下载的parcel包为KAFKA-0.8.2.0-1.kafka1.3.2.p0.56-el6.parcel与KAFKA-0.8.2.0-1.kafka1.3.2.p0.56-el6.parcel.sha1
集成实现
关闭集群,关闭cm服务( 假如不关闭cm服务,会出现在添加kafka服务时找不到相关的服务描述 )
将csd包放到cm安装节点下的 /opt/cloudera/csd目录下,如图 :
- 将parcel包放到cm安装节点下的 /opt/cloudera/parcel-repo目录下,如图:
- 启动cm服务,分配并激活percel包
- 添加kafka服务:
- 启动服务
阅读全文
0 0
- cdh完美集成kafka
- CDH集群集成kafka
- CDH集成Kafka
- CDH集成Kafka
- CDH集成Kafka
- cdh集成kafka,spark2
- CDH集成kafka方法实践
- cdh kafka环境搭建
- 编译CDH版Kafka
- CDH集成KUDU
- CDH集成Phoenix
- CDH 5.x完美卸载
- [Apache Kafka]Kafka集成
- CDH集成YCSB测试工具
- CDH(CLoudera5.7.X)安装Kafka问题
- cdh集群中kafka启动报错
- CM&CDH傻瓜安装教程(完美)
- 【storm kafka】storm kafka集成
- 1967: Election
- 7_18|C语言|判断浮点数等于0|浮点数的保存形式
- spring事务管理 @Transactional
- js使用方式
- Android Studio 中出现错误Failed to resolve: com.android.support.constraint:constraint-layout:1.0.2
- cdh完美集成kafka
- 算法系列——Rotate List
- Windows下Nginx+Tomcat整合的安装与配置
- MySQL 同表一个字段赋值给另一个字段
- 几个好用的terminal快捷键
- localStorage的过期时间设置的方法?
- python数据挖掘笔记(2)—模型建立
- 时钟周期,机器周期,指令周期的区别
- Spring事务管理中@Transactional的propagation参数