Pig foreach用法举例
2015-06-07 22:25
267 查看
foreach:一行一行的遍历数据,处理一行的数据,然后返回一个tuple。
1)别名引用
2)位置引用
3)字段区间 ..
从name字段开始到最后一个字段
从第一个字段开始到age字段
从name字段开始开始到age字段
4)* 代表所有字段
5)+-*/%等数学运算
6)三目运算符 ? :
7)map引用
8)tuple引用
9)bag引用
引用多个字段
10)引用UDF
users = load '/users.data';
1)别名引用
f = foreach users generate name, age;
2)位置引用
f = foreach users generate $0, $1;
3)字段区间 ..
从name字段开始到最后一个字段
f = foreach users generate name..
从第一个字段开始到age字段
f = foreach users generate ..age;
从name字段开始开始到age字段
f = foreach users generate name..age;
4)* 代表所有字段
foreach users generate *;
5)+-*/%等数学运算
foreach data generate $1-$0;
6)三目运算符 ? :
f = foreach users generate name, age>18?1:0;
7)map引用
data = load 'data' as (name:chararray, team:chararray, bat:map[]); f = foreach data generate bat#'key1';
8)tuple引用
data = load 'data' as (name:chararray, team:chararray, bat:tuple(x:int, y:int)); f = foreach data generate bat.x;
9)bag引用
data = load 'data' as (name:chararray, team:charray, bat:bag{t:tuple(x:int, y:int)}); f = foreach data generate bat.x;
引用多个字段
f = foreach data generate bat.(x, y);
10)引用UDF
upped = foreach data generate UPPER($0) as a, $1 as b; grped = group data by a; sums = foreach grped generate group, SUM(b);
相关文章推荐
- BC ROUND 43# 03 HDU 5266
- 底层设计应该尽量避免泛型
- 【最小生成树】Bzoj1232 [Usaco2008Nov]安慰奶牛cheer
- chapter11test7
- C++中struct类型增强
- C++中struct类型增强
- hibernate中写配置文件xxx.hbm.xml时那个成员变量的类型type如何写的问题
- Pig load 用法举例
- 理解“属性”
- Pig是轻类型的
- POSIX信号量与互斥锁
- 【重构】SqlParameter的作用
- Open Wifi SSID Broadcast vulnerability
- Open Wifi SSID Broadcast vulnerability
- Pig类型转换
- 公头与母头器件设计参考
- 系统操作日志设计
- matlab 在柱状图上 显示数字
- How to retrieve and change partition's UUID Universally Unique Identifier on linux
- UNP学习记录---三次握手和四次挥手