kafka 总结

存储结构

1. 采用二进制，消息顺序存储。 通过多个文件分段提高性能。
2. 单个文件检索采用稀释索引提高性能。

可靠性

1. 一个leader, 多个follower。 leader挂掉在catchup的follower里选择leader。
2. 0不考虑是否commit, 1 leader commit , -1 所有的都commit. 0，1，-1 选项在可用性可可靠性上权衡。

kafka

http://www.confluent.io/blog/author/jay-kreps/

http://www.confluent.io/blog/stream-data-platform-2/

命令

cd kafka_2.11-0.10.0.0

164 bin/kafka-server-start.sh config/server.properties 165 nohup bin/kafka-server-start.sh config/server.properties &