Hive（行转列 列转行）

最新推荐文章于 2025-05-19 19:09:54 发布
最新推荐文章于 2025-05-19 19:09:54 发布
阅读量8.3k 收藏 12
点赞数 1
CC 4.0 BY-SA版权
分类专栏： hql 学习 文章标签： hive 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46602525/article/details/118766013
本文介绍了Hive中如何进行数据的行转列和列转行操作。对于行转列，主要使用了collect_list和collect_set函数，通过示例展示了如何将数据聚合并在GROUP BY后生成新的列。而列转行则利用explode配合split函数，将一列数据拆分成多行。此外，还讲解了concat与concat_ws的区别，concat按位置连接，concat_ws则使用指定分隔符连接，并在数组元素间插入分隔符。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Hive（行转列 列转行）

行转列

行专列常用的几种方式有

  1. collect_list
  2. collect_set

举例说明

原数据
在这里插入图片描述
sql

SELECT concat_ws("|",collect_set(name)),concat(xz,",",xx) 
FROM db2.xyj
GROUP BY concat(xz,",",xx)

result
加粗样式
顺带说一下concat和concat_ws的区别：
concat的连接符是按位置写的比如concat（‘，’，xx，xz）那么结果就为 ,xxxz形式，而concat_ws（‘，’，xx，xz）是xx,xz形势，而且后面如果是数组两两元素之间都有间隔符

列转行

explode

常与split连用

语法格式

lateral view explode(array) tmp(临时表名) as colname(列名)

举例分析

表数据
在这里插入图片描述
sql

SELECT name,typename from movie
LATERAL VIEW explode(split(mtype,",")) t as typename

result
在这里插入图片描述

Hive列转行函数
weixin_44516261的博客
10-03 2969
Hive列转行函数 select split("a,b,c,d",','); 效果: select explode(split("a,b,c,d",',')); 效果: 案例: 原始数据 movie category 《疑犯追踪》 悬疑,动作,科幻,剧情 《Lie to me》 悬疑,警匪,动作,心理,剧情 《战狼2》 战争,动作,灾难 需求 《疑犯追踪》 悬疑 《疑犯追踪》 动作 《疑犯追踪》 科幻 《疑犯追踪》 剧情 《Lie
Hive 行转列，Hive 列转行， UDF，UDTF
ZZJXP的博客
04-07 374
Hive 行转列 hive> create table testArray2( > name string, > weight array<string> > )row format delimited > fields terminated by '\t' > COLLECTION ITEMS terminated by ','; OK Time taken: 0.172 seconds hive
hive行转列
aijia7039的博客
03-28 183
一、问题 hive如何将 a 1,2,3 b 4,7 c 5 转化成为： a 1 a 2 a 3 b 4 b 7 c 5 二、原始数据 cat row_column.txt a 1,2,3 b 4,7 c ...
十三、Hive 行列转换
最新发布
大数据领域创作新星
05-19 1万+
在数据处理中，行列转换是数据建模、清洗和可视化的“变形术”。本文以实战视角系统梳理 Hive SQL 中实现行转列与列转行的多种方法，包括 CASE WHEN + 聚合函数、COLLECT_LIST、LATERAL VIEW EXPLODE + MAP/ARRAY、STACK 等。通过经典场景演示如何用最优语法完成数据透视、结构拆分与重构，并配套 10 道进阶练习题及答案，助你全面掌握 Hive 在数据转换中的“十八般武艺”。适合想要提升数据操作技巧的工程师与数据分析师查阅收藏。
Hive--行转列/列转行
热门推荐
qq_46893497的博客
11-22 2万+
一、lateral view 分类：视图 功能：配合UDTF来使用,把某一行数据拆分成多行数据 很多的UDTF不能将结果与源表进行关联，使用lateral view ，可以将UDTF拆分的单个字段数据与原始表数据关联上 使用方式： select …… from tabelA lateral view UDTF(xxx) 视图名 as a,b,c 案例： --准备数据:vim /export/datas/lateral.txt 1 http://facebook.com/path/p1.php?q
hive 行转列
qq_43192537的博客
09-26 282
hive中行转列 1. 创建表 create table person_info( name string, constellation string, blood_type string) row format delimited fields terminated by "\t";
hive行转列、列转行真题解析
静待花开
03-31 2340
本文目录一、行转列1.1、行转列需要用到的函数1.2、真题实战1.2.1、需求1.2.2、创建hive表并导入数据1.2.3、按需求解题二、列转行2.1、列转行需要用到的函数2.2、真题实战2.2.1 、需求2.2.2、创建hive表并导入数据2.2.3、按需求解题2.2.4、详细解析上述sql三、总结 一、行转列 1.1、行转列需要用到的函数 CONCAT(string A/col, str...
Hive SQL 行转列 和 列转行 1列转多列 函数和示例
2401_84046545的博客
04-30 887
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》，点击传送门，即可获取！高 商贸高 （除上述的其他行业分类）中 IT互联网_IT信息技术中 金融_银行业|金融_保险业|金融_资本市场_证券期货中 教育中 商贸中 （除上述的其他行业分类）这样便简化了大量的开发工作，直接基于SQL便可以做匹配处理了，但是发现行业字段含有多个行业的情况，同时行业也存在细分行业，于是，便有了下面我们要介绍的，列转行，同时，行转列以及一列转多列，下面做简单的记录：介绍==列转行（一列转多行）SQL操作都是
HIVE行转列和列转行
jiantianming2的博客
01-28 1万+
行转列 select dt_month,valid_num,unvalid_num from test.test_xw_rowtocol 数据如下 转换要求：行转列需保留列名，如下图 方式一：采用union all的形式 select dt_month ,'valid_num' as type ​ ,sum(valid_num) as num
hive行转列与列转行详解(含一列枚举值拆成多列)
doudoudouy的博客
03-30 4015
1、创建学生成绩表 create table students_course(`SNO` string comment '学生编号',`name` string comment '姓名',`DEPART` string comment '选修课程',`score` int comment '分数'); 2、插入测试数据 insert into students_course values (103,'张三','公司法',30) ...
Hive之行转列/列转行
weixin_33923762的博客
08-04 240
1、行转列 场景：在hive表中，一个用户会有多个人群标签，List格式（逗号分隔如要转成List），有时我们需要统计一个人群标签下有少用户，这是就需要使用行转列了 例如，user_crowd_info有如下数据 visit_id crowds abc [100,101,102] def...
hive操作（行转列，列转行）
aiduo3346的博客
09-05 4562
一、行转列 1．相关函数说明 CONCAT(stringA/col,stringB/col…)：返回输入字符串连接后的结果，支持任意个输入字符串; CONCAT_WS(separator,str1,str2,...)：它是一个特殊形式的CONCAT()。第一个参数剩余参数间的分隔符。分隔符可以是与剩余参数一样的字符串。如果分隔符是NULL，返回值也将为NULL。这个...
Hive-行转列（explode）
weixin_30433075的博客
03-26 148
场景：通过parseHtml UDF解析一串HTML，返回一以 @@ 分割的字符串，使用split分割字符串进数组中，然后将数组的元素转列。 开始的写法 SELECT id, legal_person, explode(split(parseHtml(legal_person_track_record),'@@')) as record, amac_status FROM db_...
hive的行转列，列转行
frostbite_Sword的博客
11-23 724
HIVE 查询显示列名 及 行转列显示 http://blog.csdn.net/iquicksandi/article/details/8515453 hive行转列 （Lateral View explode()） http://blog.csdn.net/iquicksandi/article/details/8515453 =============
hive中行转列
yuanyuan___的博客
06-21 3830
hive数据统计
hive 字符串拼接_Hive行转列详解
weixin_39669701的博客
12-01 741
需求： 孙悟空 白羊座 A 沙悟净 射手座 A 宋松松 白羊座 B 猪八戒 白羊座 A ...
Hive行转列列转行
10-23
Hive是Apache Hadoop生态系统中的数据仓库工具，它支持复杂的SQL查询，其中包含一种数据转换技术叫做"行转列"（Row to Column）或"列宽化"（Flattening），反之则是"列转行"（Column to Row）。这两种操作在处理表格...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值