【Hive】再看看如何将宽表转换成长表

前言

长宽格式数据之间相互转换使用到的函数，可以叫做表格生成函数。前面已经介绍了在Hive中如何将长格式数据转换成宽格式数据，现介绍一下在Hive中如何将宽格式数据转换成长格式数据。

【Hive】实现长格式数据转换成宽格式数据

需求描述

某电商数据库中存在表user_info1，以宽格式数据记录着客户属性数据和消费数据，需要将左边user_info1宽格式数据转化成右边长格式数据。

需求实现

做以下说明

同样，其他数据库环境可以同等替换上面的函数。

需求实现思路

步骤一：将宽格式客户信息转化成map格式的数据

u001  {"age":"25","education":"master","first_buytime":"2018/1/3","name":"Sulie","regtime":"2018/1/2","sex":"male"}u002  {"age":"30","education":"Bachelor","first_buytime":"2018/5/5","name":"LuBan","regtime":"2018/3/4","sex":"male"}u003  {"age":"27","education":"PhD","first_buytime":"2018/5/4","name":"ZhenJi","regtime":"2018/4/3","sex":"female"}

步骤二：使用explode函数将 map格式数据中的元素拆分成多行显示u001 name Sulie u001 sex maleu001 age 25u001 education masteru001 regtime 2018/1/2u001 first_buytime 2018/1/3u002 name LuBanu002 sex maleu002 age 30u002 education Bacheloru002 regtime 2018/3/4u002 first_buytime 2018/5/5u003 name ZhenJiu003 sex femaleu003 age 27u003 education PhDu003 regtime 2018/4/3u003 first_buytime 2018/5/4

需求实现代码

步骤一实现

select user_no,         map('name',name, 'sex',sex, 'age',age, 'education',education, 'regtime',regtime, 'first_buytime',first_buytime) message1        from user_info1

使用map函数将客户信息转换成map格式的数据。

步骤二实现

select user_no, explode(message1)    from     (select user_no,         map('name',name, 'sex',sex, 'age',age, 'education',education, 'regtime',regtime, 'first_buytime',first_buytime) message1        from user_info1    ) a

使用explode函数将 map格式数据中的元素拆分成多行显示。

总结

前后两部分介绍了长宽格式数据之间如何相互转换。会发现不管是将长格式数据转换成宽格式数据还是将宽格式数据转换成长格式数据，都是先将数据转换成map格式数据。长格式数据转换成宽格式数据：先将长格式数据转换成map格式数据，然后使用列名['key']得到每一个key的value；宽格式数据转换成长格式数据：先将宽格式数据转换成map格式数据，然后使用explode函数将 map格式数据中的元素拆分成多行显示。顺便说一句，R语言中也是通过类似的方法实现长宽格式之间相互转换的。