Hive行转列与列转行

本文介绍了如何在Hive中进行行转列和列转行的操作。对于行转列,通过使用concat_ws和collect_set函数,将具有相同job和country的任务数据合并。而对于列转行,结合lateral view和explode操作,将category中的数据展开并保存到历史表tab_tmp中,拆分后的列命名为cate_name。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1.hive中的行转列

行转列表示将数据进行合并
现有如下需求:
将下表中job和country都相同的任务进行合并。

namejobcountry
赵云武将
郭嘉谋士
庞统谋士
诸葛亮谋士
张飞武将

使用hive自带的UDAF函数 concat_ws和collect_set

Select  t1.base,concat_ws(‘|’,collect_set(t1.name)) from 
(Select name,concat(job,’|’,country) base from hero) as t1
Group by t1;

转换后的效果
在这里插入图片描述

2.hive中的列转行

列转行表示将数据进行拆分
现有如下需求:
将category中数据展开

moviecategory
《疑犯追踪》悬疑,动作,科幻,剧情
《Lie to me》悬疑,警匪,动作,心理,剧情
《战狼 2》战争,动作,灾难

使用hive自带的UDTF函数explode(与lateral view 结合使用)

Select name,cate_name from 
	Movie lateral view explode(cate) tab_tmp as cate_name;

说明:其中对拆分的数据进行拆分需要保存在一张历史表中(tab_tmp),拆分后的列需要起一个别名(cate_name)。
转换后的效果:
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值