Storm集群的搭建
来源:互联网 发布:管家婆数据导入 编辑:程序博客网 时间:2024/05/16 23:45
Storm集群的搭建
1.集群规划
以三台服务器hadoop02、hadoop03、hadoop04为例(已部署好zookeeper),集群规划如下所示:
2.下载软件包
http://storm.apache.org
3.解压并重命名
tar -zxvf apache-storm-0.9.7.tar.gz -C /home/hadoop/appsmv apache-storm-0.9.7.tar.gz
4.修改环境变量
export STORM_HOME=/home/hadoop/apps/stormexport PATH=$PATH:$STORM_HOME/bin
5.修改配置文件
vi storm.yaml
#配置zookeeper storm.zookeeper.servers: - "hadoop02" - "hadoop03" - "hadoop04"#指定文件路径 storm.local.dir: "/home/hadoop/data/stormdata"#指定nimbus节点 nimbus.host: "hadoop02"#指定slots端口号,个数一般与CPU核数一致 supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
6.分发至集群其他节点
scp -r /home/hadoop/apps/storm hadoop@hadoop03:$PWDscp -r /home/hadoop/apps/storm hadoop@hadoop04:$PWD
7.启动集群
在hadoop02上执行:
nohup storm ui > /dev/null 2>&1 &nohup storm nimbus > /dev/null 2>&1 &
在hadoop02、hadoop03、hadoop04上执行:
nohup storm supervisor > /dev/null 2>&1 &
阅读全文
1 0
- Storm集群的搭建
- storm集群的搭建
- storm集群的搭建
- Storm集群的搭建
- Twitter Storm: 搭建storm集群
- mac下的storm本地集群搭建
- 搭建Storm集群与Storm的并发概念简介
- Storm集群搭建
- 搭建Storm集群
- Storm集群搭建
- Storm集群搭建
- storm集群环境搭建
- Storm集群搭建
- Storm集群搭建
- Storm集群搭建
- 006-storm集群搭建
- storm集群搭建
- Storm集群搭建
- 【南阳OJ 14】 会场安排问题(贪心)
- 安卓权限了解
- datagrid 多选分页保留选中项
- 数据挖掘和机器学习中距离和相似度公式
- 解题报告:HDU_6042 Journey with Knapsack 生成函数
- Storm集群的搭建
- 2017多校第一场 HDU 6038 Function 循环节,脑洞,大思维题
- 2017第一次多校联合 1006Function
- PAT乙级 1052. 卖个萌 (20)--格式化读取,vector的使用
- [PAT乙级]1046. 划拳(15)
- 10562
- layui框架详细分析系列之框架主体组织结构
- Eclipse中项目切换SVN路径
- python读取并写入mat文件