Pig脚本书写时候注意事项
2014-06-21 14:14
337 查看
set mapreduce.job.cache.files 'hdfs://192.168.100.163:9000/user/blacklist.txt#blacklist';
register ExtractAndTransform.jar
all_weblogs = load 'hdfs://192.168.100.163:9000/user/apache_tsv.txt' as(ip:chararray,timestamp:long,page:chararray,http_status:int,payload_size:int,useragent:chararray);
nobots_weblogs = FILTER all_weblogs BY NOT com.sn.hadoop.extract.pig.IsUseragentBot(useragent);
store nobots_weblogs into 'hdfs://192.168.100.163:9000/user/nobots_weblogs_another';
1、路径对应的都是HDFS
2、'='两侧都应该有个空格
register ExtractAndTransform.jar
all_weblogs = load 'hdfs://192.168.100.163:9000/user/apache_tsv.txt' as(ip:chararray,timestamp:long,page:chararray,http_status:int,payload_size:int,useragent:chararray);
nobots_weblogs = FILTER all_weblogs BY NOT com.sn.hadoop.extract.pig.IsUseragentBot(useragent);
store nobots_weblogs into 'hdfs://192.168.100.163:9000/user/nobots_weblogs_another';
1、路径对应的都是HDFS
2、'='两侧都应该有个空格
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- 书写安全Shell脚本的注意事项
- linux下脚本书写注意事项
- SQL脚本书写注意事项—性能分析(一)
- DPC脚本处理注意事项
- NanUI2创建工程时候需要注意的事项
- vector的 emplace 和 insert 以及使用vector进行iterator遍历 且 erase的时候注意事项
- 数据库SQL语句书写注意事项
- 在centos系统shell脚本中cat和重定向符号<<EOF结合使用的注意事项
- mxcms发布时候注意事项
- 一段评价程序平均运行时间的shell脚本&shell脚本编写注意事项
- 在执行shell脚本命令的时候应该注意的问题
- Android Webview中调用了Js的时候混淆注意事项
- 有关xsl文件中书写html注意事项
- header('Content-Type:text/xml'); 使用header函数时候的注意事项
- HQL语句书写注意事项
- 跟我从零基础学习Unity3D开发--U3d脚本注意事项及两个基本函数的简单介绍
- server.context-path不是默认的时候的注意事项
- Java 变量定义的时候注意事项
- PHP 连接 MSSQL用port时候的注意事项
- 缓存设计的时候需要注意的事项