13,数据挖掘环境搭建-kafka集群安装
来源:互联网 发布:python 管道 编码 编辑:程序博客网 时间:2024/06/06 06:40
安装kafka,版本:kafka_2.10-0.8.2.1.tgz
1,安装Zookeeper
http://blog.csdn.net/luolinll1212/article/details/78490714
2,安装kafka
tar -zxvf kafka_2.10-0.8.2.1.tgzcd kafka_2.10-0.8.2.1/configvi service.properties broker.id=1 #集群模式,第二台为2,第三台为3 port=9092 #默认端口,不需要修改 host.name=spark30 #本机的主机名 log.dirs=/root/kafka-logs #日志存放位置 num.partitions=2 #分区数量 zookeeper.connect=localhost:2181 zookeeper.connect.timeout.ms=10000
3,将节点kafka安装文件复制到其他节点
4,启动
cd kafka_2.10-0.8.2.1bin/kafka-server-start.sh config/server.properties &
5,测试
./kafka-topics.sh --create --zookeeper spark30:2181 --replication-factors 3 --partitons 2 --topic test
6,查看topic信息
./kafka-topics.sh --describe --zookeeper local:2181 --topic test
7,生产
./fakfa-console-producer.sh --broker-list spark:9092 --topic test
8,消费
./kafka-console-consumer.sh --zookeeper spark30:2181 --topic test --from-beginning
阅读全文
0 0
- 13,数据挖掘环境搭建-kafka集群安装
- kafka集群环境搭建
- kafka集群环境搭建
- KAFKA集群环境搭建
- 搭建Kafka集群环境
- kafka集群环境搭建
- kafka集群环境搭建
- kafka集群环境搭建
- 3,数据挖掘环境搭建-Hadoop集群搭建与测试
- 5,数据挖掘环境搭建-Zookeeper集群搭建
- 6,数据挖掘环境搭建-Spark集群搭建
- 10,数据挖掘环境搭建-mysql安装
- 11,数据挖掘环境搭建-hive安装
- 12,数据挖掘环境搭建-hbase安装
- Apache Kafka 集群环境搭建
- 一.kafka集群环境搭建
- Apache Kafka 集群环境搭建
- Apache Kafka 集群环境搭建
- The summary of the twelveth week of the first year of master's degree
- 使用nexus搭建maven私服、手动更新索引
- dva学习(一)
- 自动化测试及工具
- **Leetcode 76. Minimum Window Substring
- 13,数据挖掘环境搭建-kafka集群安装
- HASH表线性解决冲突 查找成功ASL1和查找失败ASL2
- SpringBoot学习(二)
- opencv3.3库文件和头文件引用
- 程序之路展望2
- Nutch+MongoDB+ElasticSearch+Kibana 搭建搜索引擎
- 1.3 程序概念入门
- Laravel 的闪存数据(Flash Data)
- Pandas读取文件操作