azkaban的使用
来源:互联网 发布:淘宝店广告图怎么设置 编辑:程序博客网 时间:2024/05/17 08:35
简单记录azkaban的使用
官方文档:http://azkaban.github.io/azkaban/docs/latest/
搭建好配置好以后
将执行任务的脚本按照语法写在一个job文件里。
不同的job可以存在依赖关系。
可以创建flow
不同的flow之间也可以存在依赖关系。
job和flow文件的语法也特别简单,依赖关系都写在job或者flow中,每个文件只有几行
这样就可以通过编写job和flow文件完成复杂逻辑的任务调度
最终将所有的job文件flow文件和任务代码一起打包成zip上传到azkaban即可。
azkaban上有各种功能,具体进去瞎点几下就都知道了。
例子:
任务脚本job.sh:
你的任务启动脚本 job.sh
job文件job_1.job:
type=command
command=sh job.sh
dependencies=job_0
flow文件flow_1.flow:
type=flow
flow.name=flow_1
dependencies=flow_0
复杂的就是多个这种然后各种依赖,最后打包成zip上传,就可以定时运行。
阅读全文
0 0
- azkaban的使用
- Azkaban的使用
- Azkaban的安装和使用
- Azkaban使用的两个设计模式
- 记录-安装使用Azkaban遇到的坑
- hadoop学习之azkaban(5.1):azkaban的使用及示例
- Azkaban使用示例
- azkaban安装使用
- azkaban安装使用
- azkaban安装与使用
- Azkaban简介和使用
- Azkaban简介与使用
- Azkaban使用简单笔记
- Hadoop入门之azkaban的安装和使用
- azkaban的安装部署、使用与常见问题解决
- Azkaban的快速搭建
- Azkaban的快速搭建
- azkaban的最简版搭建
- 零配置实现Spring IoC与AOP
- 利用GDAL实现遥感影像几何校正
- 关于C++的点滴
- 寻找最大数
- 通过google的gson把xml转成json
- azkaban的使用
- 斐波那契数列的三种实现方法
- other
- JAVA中IO操作
- 排序概论——选择排序
- 如何用好 Chrome devtools
- 什么是method swizzling?
- iOS Math.h-三角函数
- InputConnection