azkaban基础操作
来源:互联网 发布:超级玛丽 跳跃算法 编辑:程序博客网 时间:2024/06/16 15:34
步骤:
1、新建job文件
2、将job资源文件打包成zip文件
3、创建project
4、上传zip文件
5、执行Execute Flow -> execute
简单命令
command.job
#command.jobtype=commandcommand=echo 'hello'
打包command.job
工作流
step1.job
# step1.jobtype=commandcommand=echo one
step2.job
# step2.jobtype=commanddependencies=step1command=echo two
打包step1.job与step2.job
mapreduce
wc.job
# wc.jobtype=commandcommand=hadoop jar wc.jar xxx.wordcount /input/wordcount /ouput/wordcount
打包 wc.job 与 wc.jar
hive
hive.job
# hive.jobtype=commandcommand=hive -f 'test.sql'
test.sql
use test;drop table if exists test;create table test(id int,name string) row format delimited fields terminated by ',';load data local inpath 'test.txt' into table aztest;
test.txt
1,java2,scala3,hadoop4,spark
打包这3个文件
阅读全文
0 0
- azkaban基础操作
- Azkaban
- Azkaban文档
- Azkaban调研
- azkaban搭建
- azkaban简介
- Azkaban文档
- Azkaban博客
- [official] Azkaban
- Azkaban文档
- Azkaban调研
- Azkaban安装
- Azkaban实战
- Azkaban文档
- azkaban入门
- azkaban配置
- Azkaban实战
- Azkaban安装
- CelebA数据库转换为VOC、YOLO格式
- hive的安装及hive与mysql的整合
- Python 的Lists、Tuples、Dictionaries和Sets
- 638. Shopping Offers
- qwt
- azkaban基础操作
- IE与DOM事件流的区别
- 活用内核链表解决约瑟夫斯问题
- 关于子类化QGraphicsTextItem只有很小一部分区域能够获取事件的问题
- TDD、BDD与ATDD CI
- 选择子序列 51Nod
- php(一)
- JAVA基础——Java中的集合。
- 【Array、List】Java数组或集合中如何删除元素