首页
学习
活动
专区
工具
TVP
发布

星汉技术

专栏作者
119
文章
194713
阅读量
45
订阅数
Hive应用:explode和lateral view
这个函数大多数人都接触过,将一行数据转换成列数据,可以用于array和map类型的数据。
云飞扬
2022-01-05
4520
Hive语法:union
本文参考官方介绍,原文地址如下: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Union
云飞扬
2022-01-05
2.8K0
Hive应用:选取分隔符
在使用hive的时候,分隔符是必不可少的,当学习的时候使用的都是常规分隔符,比如:逗号“,”、竖线“|”等,这些键盘上都可以直接输入的字符,但是这些字符只要是键盘上的,在针对复杂的业务逻辑的时候,都会失效。
云飞扬
2022-01-05
1.9K0
Hive动态分区之多分区
中文分区在hive中显示为乱码,但是不影响正常使用。Mysql中也会有显示乱码的情况,但是MySQL有一个names可以设置编码格式。
云飞扬
2021-12-31
2.3K0
Hive动态分区
hive提供了一个动态分区功能,其可以基于查询参数的位置去推断分区的名称,从而建立分区。
云飞扬
2021-12-31
1.8K0
Hive应用:explode和lateral view
这个函数大多数人都接触过,将一行数据转换成列数据,可以用于array和map类型的数据。
云飞扬
2019-04-01
14.1K0
用户属性展示项目总结 原
根据公司MySQL数据库中存储的业务数据,针对用户相关一些维度,提取用户相关的属性字段,其中包括属性字段直接提取,金额字段的计算提起,日期字段的格式转换等,最终将一个用户的各个属性在页面进行展示。
云飞扬
2019-03-13
6630
CDH的坑之Sqoop导出数据到MySQL 原
最近使用Sqoop从Hive导出数据到MySQL中,出现了一系列的问题,下面将这个问题记录一下,避免再度踩坑!
云飞扬
2019-03-13
1.7K0
Hive应用:外部分区表 原
Hive可以创建外部分区表。创建表的时候,分区要在建表语句中体现。建完之后,你不会在表中看到数据,需要进行分区添加,使用alter语句进行添加。然后数据才会显示。
云飞扬
2019-03-13
8710
Hive应用:外部表链接内部表 原
我们知道,Hive的外部表可以连接HDFS中的任何目录的数据,那么Hive的外部表是否可以连接本身的内部表的数据呢?
云飞扬
2019-03-13
8990
Hive问题之UDF语义错误10014 原
使用Hive处理数据的时候,写了一个UDF,然后上传到服务器,添加到Hive中之后,一直报如下的错误:
云飞扬
2019-03-13
3.7K0
Hive应用:设置字段默认值 原
当我们清理了一些数据之后,数据的某些字段在数据中是没有的但是需要保留这个字段,那么我们将数据插入中转表中时,就需要给这个字段赋予默认值,来让语句正确执行。
云飞扬
2019-03-13
5K0
Hive应用:设置字段自增 原
简单的说row_number()从1开始,为每一条分组记录返回一个数字,这里的ROW_NUMBER() OVER (ORDER BY xlh DESC) 是先把xlh列降序,再为降序以后的每条xlh记录返回一个序号。
云飞扬
2019-03-13
2.9K0
Hive应用:数据外置内部表 原
个人认为这种表就体现了Hive的无节操无底线。会颠覆你对外部表和内部表的传统认知。
云飞扬
2019-03-13
4800
Hive语法:union 原
本文参考官方介绍,原文地址如下: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Union
云飞扬
2019-03-12
3.6K0
Hive应用:选取分隔符 原
在使用hive的时候,分隔符是必不可少的,当学习的时候使用的都是常规分隔符,比如:逗号“,”、竖线“|”等,这些键盘上都可以直接输入的字符,但是这些字符只要是键盘上的,在针对复杂的业务逻辑的时候,都会失效。
云飞扬
2019-03-12
2K0
HIVE的UDF以及JDBC编程
HIVE的UDF以及JDBC编程 一、UDF     UDF是用来对HIVE函数库进行扩展的,可以利用java代码进行自定义的功能需求。 1、步骤     1.新建java工程。     2.导入HIVE相关包,jar包在HIVE安装程序的lib目录下,只需要拷贝jar包即可。     3.创建类继承UDF类。     4.自己编写一个名为evaluate方法,返回值和参数任意,但是方法名字必须是evluate。     为了能让mapreduce处理,String要用Text处理。     5.将写好的类
云飞扬
2018-05-11
1.2K0
HIVE内置函数
HIVE内置函数 一、内置函数     HIVE除了提供了类似mysql的sql的语法外,还提供了大量内置的函数,方便开发者来调用,编写功能丰富的处理程序。 1、内置运算符 1.关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败,因为无效的语法。 SQL使用”=”,不使用”==”。 A <> B 所有原始类型 如果A不等于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”,结果返回”NULL”。 A < B 所有原始
云飞扬
2018-05-11
3.8K0
HIVE中的表以及语法
HIVE中的表以及语法 一、HIVE的表     HIVE使用的功能性的表格分为四种:内部表、外部表、分区表、分桶表。 1、内部表、外部表 1.特点     创建hive表,经过检查发现TBLS表中,hive表的类型为MANAGED_TABLE,即所谓的内部表。     内部表的特点是,先有表后有数据,数据被上传到表对应的hdfs目录下进行管理。     其实内部表的流程和sql数据库的表流程是几乎一样的。     但是在真实开发中,很可能在hdfs中已经有了数据,希望通过hive直接使用这些数据作为表内容
云飞扬
2018-05-11
1.9K0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档