HIVE自定义函数类型

编写代码

package UDF.UDFS_CLASS;import org.apache.commons.lang.StringUtils;import org.apache.hadoop.hive.ql.exec.UDF;import org.apache.hadoop.io.Text;public class UDFS extends UDF {public Text evaluate(Text str) {//input parameter（对日志文件分析，若为空则返回空，避免报错）if (str == null) {return null;}//     invilated（对数据分析，若为空则返回空，避免报错）if(StringUtils.isBlank(toString())){return null;}//Text result =new Text(str.toString().toLowerCase());String lineValue = str.toString();//转换大写为小写的函数        String[] strs = lineValue.toString().split("\t");Text result = new Text(strs.toString().replaceAll("\"", ""));将字符串中的所有双引号删除return result;}}

添加函数到hive

讲jar包放到hive文件夹中然后添加函数到hive的函数表

add jar /opt/cdh5.3.6/hive-0.13.1-cdh5.3.6/UFS_replace.jar ;

create temporary function UFS_replace as ' UDF.UDFS_CLASS.UDFS' ;

添加之后可以通过代码
show functions；来查看hive中所有函数

使用函数查询

select url,ufs_replace(url) ufs_url from db_udf_log;