Kafka_2.10-0.10.0.0安装配置文档
来源:互联网 发布:苹果5s数据流量开关 编辑:程序博客网 时间:2024/05/01 23:06
Kafka集群安装指南
该文档是建立在已经安装好JAVA JDK的基础上,并且设置好$JAVA_HOME环境变量。
一、 Kafka安装
1. 解压kafka安装包
获取包wget http://apache.fayea.com/apache-mirror/kafka/0.8.1.1/kafka_2.9.2-0.8.1.1.tgz,
执行 tar -zxvf kafka_2.9.2-0.8.1.1.tgz
2. 配置kafka
配置环境变量 KAFKA_HOME
分别在集群机器上配置$KAFKA_HOME/config/server.properties
broker.id=0 (每个集群机器标识唯一)
listeners=PLAINTEXT://192.168.1.54:9092 (每个机器对应IP)
log.dirs=/opt/huawei/imax/kafka/log (日志存储位置)
zookeeper.connect=zk1:2181,zk2:2181,zk3:2181 (zookeeper安装机器)
备注:这里kafka依赖于Zookeeper的环境进行数据一致性管理,这里使用的Zookeeper是外部安装配置,没有使用kafka内置的。
3. 启动kafka服务
在各个集群机器上执行
$KAFKA_HOME/bin/kafka-server-start.sh$KAFKA_HOME/config/server.properties &
4. 验证安装是否成功
a) JPS查看进程是否存在Kafka
b) 新建一个topic是否成功
$KAFKA_HOME/bin/kafka-topics.sh--create --topic test --replication-factor 3 --partitions 1 --zookeeperzk1:2181
- Kafka_2.10-0.10.0.0安装配置文档
- Kafka_2.10-0.10.0.0集群安装与配置
- Kafka_2.10-0.10.0.0安装与测试
- Kafka_2.10-0.10.0.0- LEADER_NOT_AVAILABLE
- kafka_2.12-0.10.2.1集群搭建安装配置
- kafka_2.11-0.10.1.1集群搭建安装配置
- 8--安装kafka_2.10-0.10.2.0集群(三个节点)
- Kafka安装配置(kafka_2.9.2-0.8.1.1)
- 安装 kafka_2.11-0.10.0.1 遇到的问题
- kafka_2.9.2-0.8.1.1安装
- kafka_2.11-1.0.0单机和集群的安装和配置
- Spark_2.0.0安装配置文档
- kafka_2.11-0.10.1.0 单机安装(使用kafka集成zookeeper)
- kafka_2.9.1-0.8.1.1 集群的安装
- kafka_2.9.2-0.8.1.1安装、测试、集群
- kafka_2.11-1.0.0单机安装
- kafka_2.11-0.10.0.0 编程Failed to send messages after 3 tries. 错误解决
- kafka_2.11-0.10.0.1遇到的问题
- opencv学习笔记(一)(VS2015-openCV3.1.0-win10 配置说明)
- 求出任何一维整型数组中的第二大的元素值
- Paint 的一个小知识点
- opencv森林火灾检测-1
- Linux系列之solr单机版环境搭建(五)
- Kafka_2.10-0.10.0.0安装配置文档
- Hrbust 1376 能量项链【区间dp】
- python filter lamda map
- HashMap
- Zookeeper_3.4.8安装配置文档
- HDU 1950 Bridging signals(LIS nlogn)
- ReactiveCocoa-Swift部分入门指南-SignalProducer
- SPOJ LCS2 Longest Common Substring II
- hdu 1159 滚动数组+LCS