kafka_2.12-0.10.2.1集群搭建安装配置

在搭建kafka集群之前，请保证zookeeper已安装。

1、下载

下载 kafka_2.12-0.10.2.1.tgz

2、解压

$ cd /home/hadoop

$ tar zxvf kafka_2.12-0.10.2.1.tgz

3、配置环境变量,各个节点都需要配置

$ vi /etc/profile

export KAFKA_HOME=/home/hadoop/kafka_2.12-0.10.2.1
export PATH=/usr/local/kafka/bin:$PATH

使用环境变量生效

source /etc/profile

4、配置 server.properties

cd /home/hadoop/kafka_2.12-0.10.2.1/config

vi server.properties

（1）、配置 broker 的ID

broker.id=1

（2）、打开监听端口

listeners=PLAINTEXT://hostname:9092(部署所在机器的hostname)

（3）、修改 log 的目录、在指定的位置创建好文件夹logs

log.dirs=/tmp/kafka-logs

（4）、修改 zookeeper.connect

zookeeper.connect=cetiti12:2181,cetiti13:2181,cetiti14:2181

5、拷贝配置好的kafka文件到子节点服务器，然后修改broker.id的值，不能一样，我分配设置的是1,2,3

6、启动kafka之前需启动zookeeper，然后启动kafka，各个节点需单独启动

cd /home/hadoop/kafka_2.12-0.10.2.1/bin

./kafka-server-start.sh ../config/server.properties

7、检查kafka是否启动成功，通过jps查看jps是否启动成功

8,、通过创建一个topic来测试是否能成功运行，随便选择一个节点运行

kafka-topics.sh –create –zookeeper cetiti12:2181 –replication-factor 1 –partitions 1 –topic test

Created topic “test”.

出现这个即表示创建test成功