Storm 集群安装&常用操作命令
来源:互联网 发布:java bug 工具 编辑:程序博客网 时间:2024/06/13 04:36
Apache Storm http://storm.apache.org/
安装
- 备份
mv /export/servers/storm/conf/storm.yaml /export/servers/storm/conf/storm.yaml.bak 修改
vi /export/servers/storm/conf/storm.yaml#指定storm使用的zk集群storm.zookeeper.servers: - "node1" - "node2" - "node3"#指定storm本地状态保存地址storm.local.dir: "/home/ning/data/storm"#指定storm集群中的nimbus节点所在的服务器nimbus.host: "node1"#指定nimbus启动JVM最大可用内存大小nimbus.childopts: "-Xmx1024m"#指定supervisor启动JVM最大可用内存大小supervisor.childopts: "-Xmx1024m"#指定supervisor节点上,每个worker启动JVM最大可用内存大小worker.childopts: "-Xmx768m"#指定ui启动JVM最大可用内存大小,ui服务一般与nimbus同在一个节点上。ui.childopts: "-Xmx768m"#指定supervisor节点上,启动worker时对应的端口号,每个端口对应槽,每个槽位对应一个workersupervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
分发
scp -r /home/ning/app/storm node2:/ning/app
启动
在nimbus.host所属的机器上启动 nimbus服务cd /export/servers/storm/bin/nohup ./storm nimbus &在nimbus.host所属的机器上启动ui服务cd /export/servers/storm/bin/nohup ./storm ui &在其它个点击上启动supervisor服务cd /export/servers/storm/bin/nohup ./storm supervisor &
访问nimbus.host:/8080,即可看到storm的ui界面
Storm常用操作命令
有许多简单且有用的命令可以用来管理拓扑,它们可以提交、杀死、禁用、再平衡拓扑。
提交任务命令格式:
storm jar 【jar路径】 【拓扑包名.拓扑类名】 【拓扑名称】
bin/storm jar examples/storm-starter/storm-starter-topologies-0.9.6.jar storm.starter.WordCountTopology wordcount
杀死任务命令格式:
storm kill 【拓扑名称】 -w 10(执行kill命令时可以通过-w [等待秒数]指定拓扑停用以后的等待时间)
storm kill topology-name -w 10
停用任务命令格式:
storm deactivte 【拓扑名称】
storm deactivte topology-name
我们能够挂起或停用运行中的拓扑。当停用拓扑时,所有已分发的元组都会得到处理,但是spouts的nextTuple方法不会被调用。销毁一个拓扑,可以使用kill命令。它会以一种安全的方式销毁一个拓扑,首先停用拓扑,在等待拓扑消息的时间段内允许拓扑完成当前的数据流。
启用任务命令格式:
storm activate【拓扑名称】
storm activate topology-name
重新部署任务命令格式:
storm rebalance 【拓扑名称】
storm rebalance topology-name
再平衡使你重分配集群任务。这是个很强大的命令。比如,你向一个运行中的集群增加了节点。再平衡命令将会停用拓扑,然后在相应超时时间之后重分配工人,并重启拓扑。
阅读全文
0 0
- Storm 集群安装&常用操作命令
- Storm集群常用批量操作命令
- 【storm】storm集群安装
- storm集群操作指南
- storm集群操作指南
- storm集群安装
- Storm集群安装详解
- Storm 集群安装
- Storm集群安装
- storm集群安装
- Storm集群安装实践
- Storm集群安装2
- storm集群安装过程
- storm集群 安装笔记
- Storm集群安装步骤
- Storm集群的安装
- storm集群安装入门
- Storm集群安装
- 自顶向下,逐步求精
- c++与JavaScript的语法差异点,小笔记
- 从函数调用栈的角度看try catch finally有返回值时的执行顺序
- eth0配置静态IP方法
- java继承与多态
- Storm 集群安装&常用操作命令
- 如何阅读Tomcat源代码?
- linux cat 文件乱码
- 闭包和变量
- Number Sequence
- Java注解
- java设计模式——设计原则
- HTML && CSS 学习笔记(4)HTML <span> 标签(关键词:HTML/span)
- Spring AOP 、IOC 理解