kafka在win7下部署运行（同时将依赖的zookeeper服务部署）

转载：博主林炳文Evankaka文章，出处http://blog.csdn.net/evankaka

部分内容根据自身实际部署调整过。（比如zookeeper的部署，对于新版zookeeper已失效）；

附带资源下载地址：

http://download.csdn.net/detail/u012396132/9710227

http://download.csdn.net/detail/u012396132/9710220

摘要：本文主要说明了如何在Windows安装运行Kafka

一、安装JDK

过程比较简单，这里不做说明。

最后打开cmd输入如下内容，表示安装成功

二、安装zooeleeper

下载安装包：http://download.csdn.net/detail/u012396132/9710227

下载后解压到一个目录：

1.进入Zookeeper设置目录，笔者D:\Java\Tool\zookeeper-3.5.2\conf
2. 将“zoo_sample.cfg”重命名为“zoo.cfg”
3. 在任意文本编辑器（如notepad）中打开zoo.cfg
4. 找到并编辑dataDir=D:\\Java\\Tool\\zookeeper-3.5.2\\tmp
5(该项无法配置，按照第七条做是OK的). 与Java中的做法类似，我们在系统环境变量中添加：
　　a. 在系统变量中添加ZOOKEEPER_HOME = D:\Java\Tool\zookeeper-3.5.2\conf
　　b. 编辑path系统变量，添加为路径%ZOOKEEPER_HOME%\bin;
6. 在zoo.cfg文件中修改默认的Zookeeper端口（默认端口2181）

这是笔者最终的文件内容：

[plain] view plain copy

 

1. # The number of milliseconds of each tick  
2. tickTime=2000  
3. # The number of ticks that the initial   
4. # synchronization phase can take  
5. initLimit=10  
6. # The number of ticks that can pass between   
7. # sending a request and getting an acknowledgement  
8. syncLimit=5  
9. # the directory where the snapshot is stored.  
10. # do not use /tmp for storage, /tmp here is just   
11. # example sakes.  
12. dataDir=D:\\Java\\Tool\\zookeeper-3.5.2\\tmp  
13. # the port at which the clients will connect  
14. clientPort=2181  
15. # the maximum number of client connections.  
16. # increase this if you need to handle more clients  
17. #maxClientCnxns=60  
18. #  
19. # Be sure to read the maintenance section of the   
20. # administrator guide before turning on autopurge.  
21. #  
22. # http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance  
23. #  
24. # The number of snapshots to retain in dataDir  
25. #autopurge.snapRetainCount=3  
26. # Purge task interval in hours  
27. # Set to "0" to disable auto purge feature  
28. #autopurge.purgeInterval=1  

7. 双击zookeeper目录下，bin文件夹内的zkServer.cmd;
8. 命令行提示如下：说明本地Zookeeper启动成功

三、安装与运行Kafka

下载 http://download.csdn.net/detail/u012396132/9710220

下载后解压到任意一个目录，笔者的是D:\Java\Tool\kafka_2.11-0.10.0.1

1. 进入Kafka配置目录，D:\Java\Tool\kafka_2.11-0.10.0.1
2. 编辑文件“server.properties”
3. 找到并编辑log.dirs=D:\Java\Tool\kafka_2.11-0.10.0.1\kafka-log,这里的目录自己修改成自己喜欢的
4. 找到并编辑zookeeper.connect=localhost:2181。表示本地运行
5. Kafka会按照默认，在9092端口上运行，并连接zookeeper的默认端口：2181。

运行：

重要：请确保在启动Kafka服务器前，Zookeeper实例已经准备好并开始运行。

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键，选择“打开命令窗口”选项，打开命令行。
3.现在输入

[plain] view plain copy

 

1. .\bin\windows\kafka-server-start.bat .\config\server.properties   

并回车。

四、测试

上面的Zookeeper和kafka一直打开

（1）、创建主题

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键，选择“打开命令窗口”选项，打开命令行。
3.现在输入

[plain] view plain copy

 

1. .\bin\windows\kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic linlin  

注意不要关了这个窗口！

（2）创建生产者

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键，选择“打开命令窗口”选项，打开命令行。
3.现在输入

注意不要关了这个窗口！

（3）创建消费者

1.进入Kafka安装目录D:\Java\Tool\kafka_2.11-0.10.0.1
2.按下Shift+右键，选择“打开命令窗口”选项，打开命令行。
3.现在输入

注意不要关了这个窗口！

然后在第2个窗口中输入内容，最后记得回车

大功告成！

使用Java编写的kafka使用实例如下：

http://blog.csdn.net/evankaka/article/details/52494412