oozie sqoop 定位到出错的行

来源:互联网 发布:长款流苏耳环淘宝价 编辑:程序博客网 时间:2024/05/16 15:19

         在使用oozie调度sqoop时候经常会出错,而找到出错的行对解决bug至关重要。

思路:1.通过oozie的web控制台找到出错的sqoop对应的hadoop日志信息。

             2.sqoop对应的hadoop日志信息中找到出错的子任务的job_id(通常sqoop会启动多个job)

             3.通过错误的job_id在hadoop的web控制台中找到具体的错误日志信息。

             4.日志下面有错误行的具体内容,如下“On input ” 错误行内容和错误的数据文件

            

0 0
原创粉丝点击