storm源代码编译
来源:互联网 发布:淘宝交保证金的类目 编辑:程序博客网 时间:2024/06/10 11:51
storm号称是实时领域的hadoop,作为一个平台型系统,他提供了实时计算,线性扩展,ack机制,事务型Tom,DRPC,Trident等等强大的服务,应用场景也非常广泛,作为一个storm的爱好者,第一步肯定是迫不及待的想编译一下源代码,下面简单的介绍一下storm的在线编译过程,离线编译过程稍微有点复杂(有需求的可以单独联系)。
1.编译storm源代码之前需要先安装好以下软件:
jdk1.6.0_37.tgz(clojure就是运行在jvm之上,这个不用多说)
Python-2.6.tgz(可以使用python编写Topology)
e2fsprogs-1.42.3_tlinux.tar.gz(zmq依赖的uuid就在里面了)
zeromq-2.1.7.tar.gz(storm的源代码用到了zmq做数据传输,c++编写)
nathanmarz-jzmq-dd3327d.zip(storm通过jzmq对zmq的接口进行调用jni实现)
clojure-1.4.0.zip(storm使用clojure编写)
apache-maven-3.0.4-bin.tar.gz(lein构建于maven之上)
lein1.7.1(storm工程使用lein来构建)
ps:以上软件一定要最好按照顺序安装,以上版本是经过测试的,其他版本不保证正确,以上这些全是开源软件,可想而知开源现在的力量有多大,都是免费获取的。lein的安装有些特殊,这一块需要特别注意
2.准备Strom源代码
storm源代码可以从github上下载,github被GFW墙了的同学google一下怎么弄吧。Storm源代码下载地址:https://github.com/nathanmarz/storm,最新的可以选master分支。
3. 编译源代码
3.1下载依赖库
lein deps
看到下面这个说明依赖库下载成功
图1<!--[endif]-->
3.2 编译源代码
lein compile
看到下面这个就说明编译成功了:
图2<!--[endif]-->
3.3 部署源代码(主要就是打包的过程)
lein Install
会将storm的源代码打包为一个jar文件并安装到本地的maven库中去。
图3
当然了,你还可以跑一些lein test测试啥的,你可以通过lein help在查看可选项。
- storm源代码编译
- storm源代码编译 及lein用法
- Storm-Kafka源代码解析
- Ubuntu上编译storm
- storm源码编译
- 编译源代码
- 源代码编译+模块化编译
- Twitter开放实时分布式系统Storm源代码
- storm-kafka源代码阅读和使用
- Twitter Storm源代码分析之TimeCacheMap
- Twitter Storm源代码分析之TimeCacheMap
- storm源代码分析之acker工作流程
- storm源代码之topo的执行过程
- 使用Maven编译运行Storm入门代码(Storm starter)
- 如何编译gdb源代码?
- emule源代码编译
- 编译ffmeg开源代码
- TCPMP源代码编译
- 【python】导入自定义模块
- Android下getService和getSystemService
- java利器---jodd
- 百度地图SDK for Android【Demo兴趣点搜索】
- HTML5中微数据的使用举例
- storm源代码编译
- maven_学习笔记
- Android应用程序开发入门——基础概念
- uploadify 上传
- 使用opencv2.0的haar算法人脸检测分类器训练xml
- 用jQuery.ui.sortable实现拖拽排序
- jbpm4.3+struts2+spring3+hibernate3整合(二)之权限管理
- ie打开特定网站提示关闭问题的解决
- Jenkins Xvnc报错