Kafka集群安装

1. zookeeper配置

    zoo.cfg:

        dataDir=/opt/zookeeper-3.4.6/data

        server.1=10.8.122.26:2888:3888

        server.2=10.8.122.27:2888:3888

        server.3=10.8.122.28:2888:3888

2. 启动zookeeper

    cd /opt/zookeeper-3.4.6

    bin/zkServer.sh start

3. kafka配置

    修改

        broker.id=全局唯一编号

        host.name=IP地址

        zookeeper.connect=10.8.122.26:2181,10.8.122.27:2181,10.8.122.28:2181

4. 修改/etc/hosts

    添加kafka服务端IP与hostname（主机名称）的对应

5. 启动kafka server

    bin/kafka-server-start.sh config/server.properties &

6. 创建topic

    bin/kafka-topics.sh --create --zookeeper 10.8.122.26:2181 --replication-factor 1 --partitions 1 --topic mytest

7. 查看topic列表

    bin/kafka-topics.sh --list --zookeeper 10.8.122.26:2181

8. 发送消息

    bin/kafka-console-producer.sh --broker-list 10.8.122.26:9092 --topic mytest

9. 接收消息

    bin/kafka-console-consumer.sh --zookeeper 10.8.122.27:2181 --topic mytest --from-beginning