hue下oozie调度sqoop

来源:互联网 发布:windows api详解 编辑:程序博客网 时间:2024/06/05 15:34

测试环境cdh5.4.8,hue3.7

(1)      进入hue界面,登录,这里重新建立一个oozie账户,使用默认的admin也可以。


(2)      新建任务


(3)      新建


(4)      将sqoop1拖到指定位置


(5)      在出来的界面中写上需要执行的sqoop语句,点击添加


(6)      点击齿轮,添加sqoop要执行前需要执行的动作,这里需要sqoop导入之前删除已经存在的文件夹,也就是sqoop的target-dir,也可以添加需要生产的目录,执行后点击右上角按钮返回。




(7)      sqoop导入到hive需要读取hive的配置信息,点击文件


(8)      将hive-site.xml文件上传到hdfs,并选择该文件所在位置。


(9)      保存作业


(10)  提交作业,转到作业状态


(11)  定义里面可以看到自动生成的配置文件


(12)  当全部变绿色,说明执行成功。


(13)  可以在mapreduce中看到转成的mr任务状态和执行日志

 

0 0
原创粉丝点击