hive 自定义函数udf  _Hadoop,ERP及大数据讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  Hadoop,ERP及大数据讨论区 »
总帖数
1
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 2705 | 回复: 0   主题: hive 自定义函数udf          上一篇   下一篇 
wzj
注册用户
等级:新兵
经验:67
发帖:64
精华:0
注册:2011-11-15
状态:离线
发送短消息息给wzj 加好友    发送短消息息给wzj 发消息
发表于: IP:您无权察看 2015-12-4 16:34:19 | [全部帖] [楼主帖] 楼主

使用的是udf示例代码。

编译sh:

#!/bin/sh 

if [ $# -ne 1 ]; then
 echo "Usage: $0 <java file="">"
 exit 1
fi

CNAME=${1%.java}
JARNAME=$CNAME.jar
JARDIR=$CNAMECLASSPATH=$(ls
$HIVE_HOME/lib/hive-serde-*.jar):$(ls $HIVE_HOME/lib/hive-exec-*.jar):$(ls $HADOOP_HOME/hadoop-
core-*.jar)
echo "javac -classpath $CLASSPATH -d $JARDIR/ $1 && jar -cf 
$JARNAME -C $JARDIR/ . && tell $1"

tell() {
       echo
       echo "$1 successfully compiled." 
       echo
}
mkdir -p $JARDIR
javac -classpath $CLASSPATH -d $JARDIR/ $1 && jar -cf $JARNAME
 -C $JARDIR/ . && tell $1

代码:

package com.example.hive.udf; 

import org.apache.hadoop.hive.ql.exec.UDF;
import org.apache.hadoop.io.Text; 

public final class Lower extends UDF { 
       public Text evaluate(final Text s) { 
             if (s == null) { 
                   return null; 
             } 
             return new Text (s.toString().toLowerCase());
       }
}

编译:

> sh compile.sh Lower.java
Lower.java successfully compiled.
> ls Lower*
Lower.jar Lower.java Lower

部署:

hive>add jar Lower.jar;hive>create temporary function my_lower as 'com.example.hive.udf.Lower';

测试:

select my_lower from xxtable;
--转自北京联动北方科技有限公司



赞(0)    操作        顶端 
总帖数
1
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论