10026---Kafka详解二、如何配置Kafka集群

原文

Kafka集群配置比较简单，为了更好的让大家理解，在这里要分别介绍下面三种配置
单节点：一个broker的集群
单节点：多个broker的集群
多节点：多broker集群

一、单节点单broker实例的配置

1. 首先启动zookeeper服务

Kafka本身提供了启动zookeeper的脚本（在kafka/bin/目录下）和zookeeper配置文件（在kafka/config/目录下），首先进入Kafka的主目录（可通过 whereis kafka命令查找到）：

 [root@localhost kafka-0.8]# bin/zookeeper-server-start.sh config/zookeeper.properties

zookeeper配置文件的一些重要属性:

     # Data directory where the zookeeper snapshot is stored.     dataDir=/tmp/zookeeper     # The port listening for client request     clientPort=2181

默认情况下，zookeeper服务器会监听 2181端口，更详细的信息可去zookeeper官网查阅。

2. 启动Kafka broker

     运行kafka提供的启动kafka服务脚本即可：
     [root@localhost kafka-0.8]# bin/kafka-server-start.sh config/server.properties
     broker配置文件中的重要属性：

     # broker的id. 每个broker的id必须是唯一的.     Broker.id=0     # 存放log的目录     log.dir=/tmp/kafka8-logs     # Zookeeper 连接串     zookeeper.connect=localhost:2181

3. 创建一个仅有一个Partition的topic

  bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic kafkatopic

4. 用Kafka提供的生产者客户端启动一个生产者进程来发送消息

 [root@localhost kafka-0.8]# bin/kafka-console-producer.sh --broker-list localhost:9092 --topic kafkatopic

  其中有两个参数需要注意：
   broker-list:定义了生产者要推送消息的broker地址，以<IP地址:端口>形式
   topic：生产者发送给哪个topic
   然后你就可以输入一些消息了，如下图：