一些sqoop脚本任务
2016-01-04 17:21
399 查看
要把数据从Gp签到hadoop,记录一些Sqoop的脚本任务:
echo "clickdatas_1_prt_p201502 clickdatas 201502" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201502 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201502 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201503 clickdatas 201503" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201503 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201503 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201504 clickdatas 201504" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201504 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201504 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201505 clickdatas 201505" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201505 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201505 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201506 clickdatas 201506" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201506 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201506 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201507 clickdatas 201507" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201507 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201507 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201508 clickdatas 201508" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201508 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201508 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201509 clickdatas 201509" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201509 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201509 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201510 clickdatas 201510" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201510 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201510 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201511 clickdatas 201511" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201511 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201511 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000 echo "clickdatas_1_prt_p201512 clickdatas 201512" sqoop import --connect jdbc:postgresql://10.1.2.130:5432/xmo_dw --table clickdatas_1_prt_p201512 --fields-terminated-by '\t' --null-string '\\N' --null-non-string '\\N' --target-dir /staging/db_backup/greenplum/clickdatas/201512 --username xmo_summarizer --password YCt452uz --split-by id --fetch-size 50000
相关文章推荐
- 【服务器架构】经典游戏服务器端架构概述(续)
- Atitit. 订单管理 收银单持久化 功能设计 基于ecshop订单结构
- Tomcat中的设计模式--命令模式
- Exchange Server 2016 之八:高可用DAG+NLB
- Atitit. 订单管理 收银单持久化 功能设计 基于ecshop订单结构
- MAC下配置Tomcat环境
- Linux查看CPU和内存使用情况
- Atitit. 订单管理 收银单持久化 功能设计 基于ecshop订单结构
- 【服务器架构】经典游戏服务器端架构概述
- openfire源码修改后如何打包部署到linux服务器上
- linux下删除乱码文件
- Nginx PHP MySql 编译安装
- Linux 下log4cxx环境配置
- Linux下gsoap实现webservice功能
- 学习通过CSS硬件加速提升你网站的性能
- 父 shell,子 shell ,export 与 变量传递
- (转载)Hadoop2.7.1配置
- 关于java.lang.UnsatisfiedLinkError: D:\vleyong\tomcat-7.0.57\bin\tcnative-1.dll: Can't load AMD 64-bit
- OpenSSH相关漏洞解决
- windows设置通过NFS连接到Linux共享数据