小标
2019-02-20
来源 :
阅读 968
评论 0
摘要:本文主要向大家介绍了【云计算】hive自定义函数解析,通过具体的内容向大家展现,希望对大家学习云计算有所帮助。
本文主要向大家介绍了【云计算】hive自定义函数解析,通过具体的内容向大家展现,希望对大家学习云计算有所帮助。

【分类】
UDF(User-Defined-Function) :处理一进一出
例如:length(string)、substr(string|binary A, int start)、date_add(string startdate, int days)、 split(string str, string pat)
UDAF(User-Defined-Aggregation-Funcation):处理多进一出
例如:sum()、max()、collect_list(col)
UDTF(User-Defined Table-Generating Functions):处理一进多出
例如: explode(ARRAY)
UDF
一进一出
可以直接应用于select语句,对查询结构做格式化处理后,再输出内容
UDF使用方式
在HIVE会话中add 自定义函数的jar文件,然后创建function,继而使用函数
在进入HIVE会话之前先自动执行创建function,不用用户手工创建
把自定义的函数写到系统函数中,使之成为HIVE的一个默认函数,这样就不需要create temporary function
UDAF
UDAF:用户自定义聚合函数,处理多进一出
UDAF应用场景:需求数计算
UDTF
UDTF:处理一进多出
UDTF应用场景:切分字符串、解析JSONArrayList等
本文由职坐标整理并发布,希望对同学们有所帮助。了解更多详情请关注职坐标大数据云计算大数据安全频道!
喜欢 | 0
不喜欢 | 0
您输入的评论内容中包含违禁敏感词
我知道了

请输入正确的手机号码
请输入正确的验证码
您今天的短信下发次数太多了,明天再试试吧!
我们会在第一时间安排职业规划师联系您!
您也可以联系我们的职业规划师咨询:
版权所有 职坐标-一站式AI+学习就业服务平台 沪ICP备13042190号-4
上海海同信息科技有限公司 Copyright ©2015 www.zhizuobiao.com,All Rights Reserved.
沪公网安备 31011502005948号