前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >hive自定义函数之UDF代码

hive自定义函数之UDF代码

作者头像
用户4870038
发布2021-02-05 11:25:24
6230
发布2021-02-05 11:25:24
举报
文章被收录于专栏:MyBatis入门案例-注解

文章目录

创建maven项目,导入jar包

代码语言:javascript
复制
	<repositories>
        <repository>
            <id>cloudera</id>
            <url>https://repository.cloudera.com/artifactory/cloudera-repos/</url>
        </repository>
    </repositories>
	<dependencies>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-hdfs</artifactId>
            <version>2.7.4</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-client</artifactId>
            <version>2.7.4</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-mapreduce-client-core</artifactId>
            <version>2.7.4</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>2.7.4</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-exec</artifactId>
            <version>0.13.0</version>
        </dependency>
    </dependencies>
    
    <build>
        <plugins>
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-compiler-plugin</artifactId>
                <version>3.0</version>
                <configuration>
                    <source>1.8</source>
                    <target>1.8</target>
                    <encoding>UTF-8</encoding>
                </configuration>
            </plugin>
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-shade-plugin</artifactId>
                <version>2.2</version>
                <executions>
                    <execution>
                        <phase>package</phase>
                        <goals>
                            <goal>shade</goal>
                        </goals>
                        <configuration>
                            <filters>
                                <filter>
                                    <artifact>*:*</artifact>
                                    <excludes>
                                        <exclude>META-INF/*.SF</exclude>
                                        <exclude>META-INF/*.DSA</exclude>
                                        <exclude>META-INF/*/RSA</exclude>
                                    </excludes>
                                </filter>
                            </filters>
                        </configuration>
                    </execution>
                </executions>
            </plugin>
        </plugins>
    </build>

创建一个java类继承UDF,并重载evaluate方法

代码语言:javascript
复制
package com.czxy.hive;

import org.apache.hadoop.hive.ql.exec.UDF;
import org.apache.hadoop.io.Text;

public class UTFtoLowerCase   extends UDF {
    public Text evaluate   (Text str){
        String s = str.toString().toLowerCase();
        return new Text(s);
    }
}

将项目打包,上传到集群上

先清空之前的target包

在这里插入图片描述
在这里插入图片描述

在打包,把jar包添加到桌面

在这里插入图片描述
在这里插入图片描述

把jar包添加到集群里

在这里插入图片描述
在这里插入图片描述

在hive里添加jar包

通过hive进入hive

代码语言:javascript
复制
add jar /opt/mapReduceAndHive-1.0-SNAPSHOT.jar;
在这里插入图片描述
在这里插入图片描述

设置函数与自定义函数关联

代码语言:javascript
复制
create temporary function show as 'com.czxy.hive.HiveUDF';

注意:com.czxy.hive.HiveUDF 为 全类名

在这里插入图片描述
在这里插入图片描述

使用自定义函数

代码语言:javascript
复制
select show("12s");
在这里插入图片描述
在这里插入图片描述
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019/11/25 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 文章目录
  • 创建maven项目,导入jar包
  • 创建一个java类继承UDF,并重载evaluate方法
  • 将项目打包,上传到集群上
  • 在hive里添加jar包
  • 设置函数与自定义函数关联
  • 使用自定义函数
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档