12：Hive从0到1系列学习：函数之自定义函数

傷城~ 2023-10-04 17:21 69阅读 0赞

#### 内容目录 ####

*   *   *  一、自定义函数
         *  二、自定义UDF函数
         *  三、自定义UDTF函数

#### 一、自定义函数 ####

自定义函数包括三种：

①一进一出：UDF

②多进一出：UDAF—>比如max、sum、count

③一进多出：UDTF—>比如explode()

自定义函数分为三个步骤

1）编写方法的程序

（1）继承Hive提供的类

org.apache.hadoop.hive.ql.udf.generic.GenericUDF

org.apache.hadoop.hive.ql.udf.generic.GenericUDTF;

（2）实现类中的抽象方法

2）上传jar包

3）在hive的命令行窗口创建函数

create [temporary] function [dbname.]function_name AS class_name;

#### 二、自定义UDF函数 ####

比如：需要自定义一个方法实现计算给定字符串的长度

实操：

①创建一个maven工程

②引入相关依赖

<dependencies>
    		<dependency>
    			<groupId>org.apache.hive</groupId>
    			<artifactId>hive-exec</artifactId>
    			<version>3.1.2</version>
    		</dependency>
    </dependencies>

③创建一个类继承GenericUDF类

④重写三个方法

initialize、evaluate、getDisplayString

⑤打成jar包上传到服务器/opt/module/hive/datas

⑥将jar包添加到hive的classpath

add jar /opt/module/hive/datas/myudf.jar;

⑦创建临时函数

create temporary function my_len as "com.gis.hive.MyStringLength";

#### 三、自定义UDTF函数 ####

比如：自定义一个UDTF实现将一个任意分割符的字符串切割成独立的单词

①实现一个类继承GenericUDTF 类

②重写三个方法

initialize、process、close

③打成jar包上传到服务器/opt/module/hive/datas

④将jar包添加到hive的classpath

add jar /opt/module/hive/data/myudtf.jar;

⑤创建临时函数

create temporary function myudtf as "com.gis.hive.MyUDTF";

发表评论取消回复

表情：

评论列表（有 0 条评论，69人围观）

还没有评论，来说两句吧...

相关阅读

相关 HIve自定义函数

官网地址：[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF][https_cwiki.a

亦凉/ 2024年02月19日 15:34/ 0 赞/ 170 阅读

相关 Hive自定义函数

![c093f1f889cf0033f9faa8c385d13c5a.jpeg][] 自定义函数自定义函数介绍 hive的内置函数满足不了所有的业务需求。hiv

绝地灬酷狼/ 2023年10月13日 14:34/ 0 赞/ 129 阅读

相关 12：Hive从0到1系列学习：函数之自定义函数

内容目录一、自定义函数二、自定义UDF函数三、自定义UDTF函数一、自定义函数自定义函数包

傷城~/ 2023年10月04日 17:21/ 0 赞/ 70 阅读

相关 10：Hive从0到1系列学习：函数之系统内置函数

内容目录系统内置函数 ①查看系统自带的函数 ②显示自带的用法系统内置函数 ①查看

系统管理员/ 2023年10月04日 17:20/ 0 赞/ 42 阅读

相关 11：Hive从0到1系列学习：函数之常用的内置函数

内容目录常用的内置函数 ①空字段赋值：NVL ②CASE WHEN THEN ELSE EN

雨点打透心脏的1/2处/ 2023年10月04日 17:20/ 0 赞/ 97 阅读

相关 02：Hive从0到1系列学习：DDL数据定义语言

DDL数据定义语言 1、创建数据库创建数据库的语句 CREATE DATABASE [IF NOT EXISTS] database_name

一时失言乱红尘/ 2023年10月04日 17:18/ 0 赞/ 103 阅读

相关 Hive自定义函数

本文目录 1.自定义函数步骤 2.自定义UDF函数 3.自定义UDTF函数 3.1 使用自定义UDTF函数，替代explode > 本文接

我不是女神ヾ/ 2022年10月05日 05:48/ 0 赞/ 374 阅读

相关 Hive自定义函数

![Center][] ![Center 1][] 首先在上一节创建的工程中添加如下类 package com.txr.udf; impo

梦里梦外;/ 2022年06月13日 04:50/ 0 赞/ 386 阅读

相关 Hive自定义函数

Hive自定义函数 1 UDF 用户自定义函数(user defined function)针对单条记录。 1.1 创建函数流程 1. 添加pom依赖 2

Dear 丶/ 2022年06月08日 14:39/ 0 赞/ 421 阅读

相关 hive 学习系列四（用户自定义函数）

如果入参是简单的数据类型，直接继承UDF，实现一个或者多个evaluate 方法。具体流程如下： 1，实现大写字符转换成小写字符的UDF package

逃离我推掉我的手/ 2022年05月22日 01:38/ 0 赞/ 323 阅读