内容简介：HIVE中关于collect_set与explode函数妙用
hive的复合数据类型
Hive中的列支持使用三类复杂的集合数据类型，即：array，map及struct，这些类型的名称是保留字，具体用法可参见该篇博文，里面有关于三类基本集合数据类型的操作实例，注：map中可嵌套array类型。
例如，定义表：
create table example ( device_id string, login_ip array<string>, user_info map<string,array<string>> address struct<street:string,city:string,state:string> ) row format delimited fields terminated by '\001' collection items terminated by '\002' map keys terminated by '\003' lines terminated by '\n' stored as RCFile;
假设这样的数据类型以分区表存储，你要统计一段时间类no=1下的去重score，那么该怎么办了?这里可配合使用lateral view首先实现列转行的功能，如下所示：
select no,score from tablaa lateral view explode(score_set) xxx as score;
注：xxx代表虚表名称，不能缺少。
进一步深化上述代码解决统计一段时间的去重值，可写为：
select no，collect_set(score) from tablaa lateral view explode(score_set) xxx as score group by no;
这样，将两个函数结合实现了行转列或列转行的妙用。
以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持 码农网
猜你喜欢:
- 稀里糊涂系列之list函数妙用
- HIVE中关于collect_set与explode函数妙用
- axios 妙用技巧
- KeyPath在Swift中的妙用
- 哈希算法在以太坊中的妙用
- cocos creator教程之向量的妙用
本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。
数据压缩导论（第4版）
[美] Khalid Sayood / 贾洪峰 / 人民邮电出版社 / 2014-1 / 129.00
数据压缩已经成为信息革命的一门支撑技术，这场革命已经改变了我们的生活，而在此过程中，数据压缩也变得几乎无处不在。从MP3播放器到智能手机，再到数字电视和数字电影，数据压缩几乎成了所有信息技术的必备要素。 近年来，以大数据为标志的互联网技术高歌猛进。数据规模大、产生速度快、来源多样等特性，导致数据存储和处理都前所未有地复杂。《数据压缩导论（第4版）》作为迄今为止数据压缩领域最全面而深入的著作，......一起来看看 《数据压缩导论（第4版）》 这本书的介绍吧!
