hive使用lateral view explode和split将一行拆多行
2015-07-24 11:28
267 查看
问题:
有一个表(表名:book,两个字段:id,desc)
id desc
001 书名: 追风筝的人, ISBN编号: 9787208061644, 作者: 卡勒德.胡赛尼
002 书名: 秘密花园, ISBN编号: 9787550252585, 作者: 乔汉娜·贝斯福
需求:
其中desc字段包含了几个参数信息,需把它拆分开来,一行一个参数,结果如下
001 书名: 追风筝的人
001 ISBN编号: 9787208061644
001 作者: 卡勒德.胡赛尼
002 书名: 秘密花园
002 ISBN编号: 9787550252585
002 作者: 乔汉娜·贝斯福
解决办法:
select id,sp from book a lateral view explode(split(a.desc,',')) t as sp where 1=1;
id sp
001 书名: 追风筝的人
001 ISBN编号: 9787208061644
....
其中sp是拆出来的字段的,结果和需求一样。
非常简练,虽然hive有不能insert,update的缺点,但很多sql语法都支持,不失为大数据分析的一个好工具!
有一个表(表名:book,两个字段:id,desc)
id desc
001 书名: 追风筝的人, ISBN编号: 9787208061644, 作者: 卡勒德.胡赛尼
002 书名: 秘密花园, ISBN编号: 9787550252585, 作者: 乔汉娜·贝斯福
需求:
其中desc字段包含了几个参数信息,需把它拆分开来,一行一个参数,结果如下
001 书名: 追风筝的人
001 ISBN编号: 9787208061644
001 作者: 卡勒德.胡赛尼
002 书名: 秘密花园
002 ISBN编号: 9787550252585
002 作者: 乔汉娜·贝斯福
解决办法:
select id,sp from book a lateral view explode(split(a.desc,',')) t as sp where 1=1;
id sp
001 书名: 追风筝的人
001 ISBN编号: 9787208061644
....
其中sp是拆出来的字段的,结果和需求一样。
非常简练,虽然hive有不能insert,update的缺点,但很多sql语法都支持,不失为大数据分析的一个好工具!
相关文章推荐
- 关机命令
- RHEL六(监控和管理Linux进程)
- OCR文字识别HTTP restapi接口设计
- 关于程序员的面试你怎么看待
- BZOJ 1008 越狱
- 使用Dropzone上传图片及回显示例
- tcpdump非常实用的抓包实例
- 简单的游戏逻辑,用C++ console来实现简单的逻辑
- 一种基于Storm的可扩展即时数据处理架构思考
- 3.4——从无头单链表中删除结点
- C++对象模型4--有重写的单继承
- Myeclipse导出jar文件图片路径问题
- hello-win程序入门win32基本窗口框架全解析
- linux添加交换分区swap增加虚拟内存
- 为什么要使用NSURLSession
- Algorithms—25.Reverse Nodes in k-Group
- C++中的数组指针与数组引用
- .net Event/Delegate Simple Demo
- 从中国移动走出去的咪咕能成功吗?
- Python version 2.7 required, which was not found in the registry