kafka学习（1）

ubuntu安装kafka集群

配置3台虚拟机：
192.168.0.155 kafka1
192.168.0.154 kafka2
192.168.0.156 kafka3

第一步：安装JDK
ubuntu安装JDK
第二步：安装zookeeper集群
ubuntu安装zookeeper集群
第三步：安装kafka集群
3.1 下载kafka安装包（kafka_2.12-0.11.0.1.tgz为例）
3.2 上传到虚拟机的目录
3.3 解压kafka安装包

tar -zxvf kafka_2.12-0.11.0.1.tgz

3.4 解压好的文件夹复制到/usr/local目录下,并该改名为kafka

cp -r kafka_2.12-0.11.0.1 /usr/localcd  /usr/localmv kafka_2.12-0.11.0.1 kafka

3.5 进入kafka目录,创建logs文件夹

cd kafkamkdir logsls //查看是否创建logs文件夹

3.5 进入kafka中的config目录,修改server.properties

cd configvim server.properties

主要修改内容：
broker.id
listeners

logs目录

zookeeper.connect

3.6 进入kafka目录启动kafka服务

cd /usr/local/kafkabin/kafka-server-start.sh -daemon config/server.properties

jps（查看kafka启动）

3.7 topic相关操作
创建topic（192.168.0.155 kafka1）

bin/kafka-topics.sh --create --zookeeper 192.168.0.155:2181 --replication-factor 3 --partitions 1 --topic test

查询topic（192.168.0.154 kafka2）

bin/kafka-topics.sh --list --zookeeper 192.168.0.154:2181 

创建生产者（192.168.0.154 kafka2）

bin/kafka-console-producer.sh --broker-list 192.168.0.154:9092 --topic test

创建消费者（192.168.0.156 kafka3）

bin/kafka-console-consumer.sh --zookeeper 192.168.0.156:2181 --topic test --from-beginning

或者下面的命令

bin/kafka-console-consumer.sh --bootstrap-server 192.168.0.156:9092 --topic test --from-beginning