00001.Shell数据割接_导记录入库

1.目录规划：

oracle@mdsp140:~/convertdata> pwd

/opt/oracle/convertdata //用于存放源数据、目标数据、转换脚本、导库脚本;

oracle@mdsp140:~/convertdata> ll

total 8

-rwxrwxrwx 1 oracle oinstall 397 2011-09-29 10:58 converter.sh //转换脚本，用于扫描源数据，提取符合规则的数据；

drwxrwxrwx 2 oracle oinstall 80 2011-09-29 10:49 source //源数据目录，用以存放待处理的数据；

-rwxrwxrwx 1 oracle oinstall 139 2011-09-29 10:47 sqlldr.ctl //导库脚本，该脚本由oracle自带的sqlldr工具，将ctl文件，导入库中；

drwxrwxrwx 2 oracle oinstall 80 2011-09-29 11:18 target //存放经过转换后的数据，作为导库脚本的数据源；

2.源数据设定：

oracle@mdsp140:~/convertdata/source> pwd

/opt/oracle/convertdata/source

oracle@mdsp140:~/convertdata/source> ls

data_sub.txt

oracle@mdsp140:~/convertdata/source> tail data_sub.txt

2,610010200845081,22365000081,0,-1,-1,NONGPRS,0,0,0,0,0,0,0,NO,NO,0,0,NOBPOS,BOTH //一行源数据

3.转换脚本：

oracle@mdsp140:~/convertdata> cat converter.sh

#!/bin/ksh

awk -F \, '{

if (match($1, "[0-9]+"))

{

field1 = $1;

field2 = $2;

field3 = $3;

printf("%s|%s|%s\n", field1, field2, field3);

}

}' ./source/* >> ./target/result.dat

//如果在windows下编写该文件，上传后，出现"^M"提示时，可用以下指领，进行文件过滤；

oracle@mdsp140:~/convertdata>cat -v converter.sh | tr -d "^M" > converter.sh

4.转换后生成的数据文件

oracle@mdsp140:~/convertdata/target> ls

result.dat

oracle@mdsp140:~/convertdata/target> tail result.dat

2|610010200845081|22365000081

5.导库脚本 sqlldr.ctl

load data

infile "./target/result.dat"

append into table import_temp

fields terminated by "|"

trailing nullcols

(HLR_INDEX,IMSI,MSISDN)

6. 创建数据库用户MDSP

7.创建导入的表：

create table import_temp (

HLR_INDEX varchar2(50),

IMSI varchar2(50),

MSISDN varchar2(50))

8.执行导库指令，导库;

//该步骤，应在与ctl文件同级目录，执行，且当前系统用户为oracle

sqlldr userid=mdsp/mdsp control=./sqlldr.ctl

也可用这种格式：

sqlplus mdsp/mdsp@本地命名 control=./sqlldr.ctl //本地命名服务，需要手动进行配置；