storm安装
来源:互联网 发布:淘宝助理编辑宝贝 编辑:程序博客网 时间:2024/05/18 00:26
1、启动zookeeper
storm运行依赖zookeeper,所以在安装storm前必须安装和启动zookeeper
2、配置storm的storm/conf/storm.yaml文件
内容:
storm.zookeeper.servers: - 127.0.0.1 storm.zookeeper.port: 2181 nimbus.host: "127.0.0.1" storm.local.dir: "/tmp/storm" supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703
这个配置文件写的时候,一定注意在每一项的开始时要加空格,冒号后也必须要加空格,否则storm就不认识这个配置文件。
说明一下:storm.local.dir表示storm需要用到的本地目录。nimbus.host表示那一台机器是master机器,即nimbus。storm.zookeeper.servers表示哪几台机器是zookeeper服务器。storm.zookeeper.port表示zookeeper的端口号,这里一定要与zookeeper配置的端口号一致,否则会出现通信错误,切记切记。当然你也可以配superevisor.slot.port,supervisor.slots.ports表示supervisor节点的槽数,就是最多能跑几个worker进程(每个spout或bolt默认只启动一个worker,但是可以通过conf修改成多个)。
执行:
# bin/storm nimbus(启动主节点)
# bin/storm supervisor(启动从节点)
执行命令:# storm jar StormStarter.jar storm.starter.WordCountTopology test
此命令的作用就是用storm将jar发送给storm去执行,后面的test是定义的toplogy名称。
搞定,任务就发送到storm上运行起来了,还可以通过命令:
# bin/storm ui
然后执行 jps 会看到 3 个进程:zookeeper 、nimbus、 supervisor
启动ui,可以通过浏览器, ip:8080/ 查看运行i情况。
0 0
- 【storm】storm集群安装
- Storm安装
- Storm安装
- storm安装
- storm-安装
- storm安装
- Storm 安装
- storm安装
- Storm安装
- storm安装
- storm安装
- Storm安装
- storm安装
- storm安装
- 安装storm
- storm安装
- storm安装
- Storm 安装
- Java Api
- Get和Post方式的区别
- 黑马程序员——数组
- Maven笔记
- xpath爬虫小例
- storm安装
- oracle索引浅谈
- 手动执行作业 出现ora-03001 未实施的功能
- Oracle ADF获取AM及VO的方法
- a标签加入单击事件 屏蔽href跳转页面
- VxWorks 系统中的几种运行 Context, Task, Exception, Interrupt
- qt
- 单例模式
- ARC中强指针与弱指针