shell 总结

Reference:

http://saiyaren.iteye.com/blog/1943207

1.
Shell
读取文件和写文件

for line in $(<top30000.url.utf-8.http_server_front_hphp.txt); do

tmp_port=8080;

for((i=0;i<=7;i++));do

echo ${line/192\.168\.12\.63/192\.168\.12\.63:$tmp_port} >>top30000.url.utf-8.http_server_front_hphp_mul_port.txt;

tmp_port=$[tmp_port+1]

done;

done;

top30000.url.utf-8.http_server_front_hphp.txt
文件名

通过
< 读取文件
line 是每行的内容

替换文件内容
:

${
变量 /
被替换内容 /
替换内容 }

替换两边的一定要注意是
{} 不是小括号

输出文件：

echo “xxxx” >
文件名

追加输出文件：

echo “xxxx” >>
文件名

第二种读取方式：

$ cat file | while read line; do echo $line; done

例：

$ cat /root/test.txt | while read line; do

echo $line;

done

输出是：

aaaa

bbbb

cccc dddd

for
的是分割输出

$ for line in $(<file); do echo $line; done

aaaa

bbbb

cccc

dddd

2.
shell
参数

sh test.sh 111 222 333

然后再
shell 中获取参数如下获取，如：

$1
是第一个参数 111

$2
是第二个参数 222

$3
是第三个参数 333

依次类推

$0
是 shell
本身

3.
Shell if
用法

if [ $1 == "aaa" ]; then

echo $line

fi

if
后需要有空格

[
需要有空格

$1
后需要有空格

==
后需要有空格

“aaa”
后需要有空格

]
后需要有分号 (;)

;
号后有空格

如果不按照规则，那么会出现如下错误

syntax error near unexpected token `fi'
或是 then
的

shell
的 if else
用法：

if ....; then

....

elif ....; then

....

else

....

fi

当运行下面脚本时，如果
if 后的
$a 不加引号，则会报：

test.sh: line 5: [: too many arguments

这个错误；所以需要先加上“”编程字符串

a="hhvm don't run"

echo $a

if [ "$a" == "hhvm don't run" ]; then

echo "============"

fi

4.
shell
分割字符串

#!/bin/bash

str="hello,world,i,like,you,babalala"

arr=(${str//,/ })

for i in ${arr[@]}

do

echo $i

done

分割成数组
arr ，用逗号分割

方法
2 ：

$ cat split.sh

#!/bin/sh

# Script to split fields into tokens

# Here is the string where tokens separated by colons

s="first column:second column:third column"

ip_arr=()

IFS=":" # Set the field separator

set $s # Breaks the string into $1, $2, ...

i=0

for item # A for loop by default loop through $1, $2, ...

do

ip_arr=("${ip_arr[@]}" "$item")

echo "Element $i: $item"

((i++))

done

5.
Shell
获取数组长度

array=(bill chen bai hu);

num=${#array[@]}

遍历数组：

for((i=0;i<num;i++))

do

echo ${atrr[$i]};#
这里需要用 {}
引用上才可以

done;

6.
shell
创建空文件

:>input_ware_data.txt;

7.
Shell
执行命令后给变量赋值

$a=`pwd`;

echo $a

这样就可以输出
pwd 的返回值了

注意这里的引号是键盘
1 左边的那个按钮

8.
使用
wget 和
curl 时出错需要用引号引用
URL

使用
wget 和
curl 时需要用引号引用住
URL

Wget –SO
文件名 “www.baidu.com”

Curl “www.baidu.com”

9.
Shell
累加

c=0

for((i=0;i<10;i++));do

#c++;

: $[c++]

echo $c;

done;

这样去实现累加：

: $[c++]

冒号和
$ 之间要有空格

10.
Shell
整除

c=90010

echo $((c/1000))

输出
90

11.
Shell
赋值

i=$((c/1000));

赋值语句前后不能有空格

12.
Shell
多进程

for ((i=0;i<5;i++));do

} &

&
shell

13.
执行语句后面加上
2>/dev/null 就可以清楚系统的输出信息

如：

Curl
www.baidu.com 2>/dev/null

这样就不会输出提示信息了

14.
Shell
创建文件夹

mkdir –p [
文件夹 ]

-p
是递归创建

15.
shell
获取时间戳

参考网址：

http://www.2cto.com/os/201109/105312.html

当前时间戳：（年月日时分秒）

a=`date +%Y%m%d%H%M%S`

echo $a;

前
6 天时间戳：（年月日时分秒）

a=`date -d "-6 day" +%Y%m%d%H%M%S`

echo $a;

-d
中可以是 hour , day,week

16.
Shell
数组

A=(a b c def)

for i in "${A[@]}"; do

echo $i

done

#
输出 A
的下标

echo ${A[1]}

参考：

http://doudouclever.blog.163.com/blog/static/17511231020127288621354/

17.
获取输入参数数组

for i in "$@"; do

echo $i

done

$@
是获取的输入参数的数组， $i
是获取的输入的每个参数的值

如
test.sh 1 2 33

输出的内容为：

1

2

33

这就是获取到的
3 个输入参数，输入多少个参数都可以

18.
Find
遍历 删除

for file in `find . -name "Runtime"`;do

echo "$file==========="

rm -rf $file/*;

ls -l $file;

done;

19.
shell
求余

i=$((2000%1000));

echo $i;

用
% 求余

20.
Shell
字符串连接

a=”aa”;

a=$a"bb";

echo $a;

输出是
aabb

21.
Shell
抽取字符 awk

如日志是这样的：

14.245.173.44 - - [25/Apr/2013:22:24:13
+0800] "GET
/ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount
HTTP

每个空格就是一个位置，那么抽取

/ProductPageService.aspx?method=GetCommentSummaryBySkuId&referenceId=1008195527&callback=getCommentCount

这个就是第
7 位

awk '{print $7}' clubservice_aspx.log >cbs.log

抽取文件
clubservice_aspx.log ，然后输出到
cbs.log
中

详细的见下面的
url

http://hi.baidu.com/ziyingshaozhu/item/8473541d9cf6028488a95681

22.
shell
按行切割文件

#
按每个文件
1000 行来分割除

split -l 1000 httperr8007.log httperr

split -l
行数 切割的文件
生成文件前缀

详细见：

http://blog.sina.com.cn/s/blog_62db9b1901017aiz.html

23.
查找目录下的所有文件

a=`ls cbs`

#echo $a

for file in $a;do

echo $file

done

24.
shell
判断为空

1. 变量通过
" " 引号引起来

如下所示 :
，可以得到结果为 IS NULL.

#!/bin/sh

para1=

if [ ! -n "$

echo "IS NULL"

else

echo "NOT NULL"

fi

if [ -z $para1 ];then

echo “is null”

fi

2. 直接通过变量判断

如下所示 :
得到的结果为 : IS NULL

#!/bin/sh

para1=

if [ ! $para1 ]; then

echo "IS NULL"

else

echo "NOT NULL"

fi

3. 使用
test 判断

得到的结果就是
: dmin is not set!

#!/bin/sh

dmin=

if test -z "$dmin" then

echo "dmin is not set!"

else

echo "dmin is set !"

fi

4. 使用
"" 判断

#!/bin/sh

dmin=

if [ "$dmin" = "" ]; then

echo "dmin is not set!"

else

echo "dmin is set !"

fi

详细查看

http://blog.csdn.net/runming918/article/details/7226507

25.
shell
逻辑运算符

一、逻辑运算符

逻辑卷标	表示意思
1.	关于档案与目录的侦测逻辑卷标！
-f	常用！侦测『档案』是否存在 eg: if [ -f filename ]
-d	常用！侦测『目录』是否存在
-b	侦测是否为一个『 block 档案』
-c	侦测是否为一个『 character 档案』
-S	侦测是否为一个『 socket 标签档案』
-L	侦测是否为一个『 symbolic link 的档案』
-e	侦测『某个东西』是否存在！
2.	关于程序的逻辑卷标！
-G	侦测是否由 GID 所执行的程序所拥有
-O	侦测是否由 UID 所执行的程序所拥有
-p	侦测是否为程序间传送信息的 name pipe 或是 FIFO （老实说，这个不太懂！）
3.	关于档案的属性侦测！
-r	侦测是否为可读的属性
-w	侦测是否为可以写入的属性
-x	侦测是否为可执行的属性
-s	侦测是否为『非空白档案』
-u	侦测是否具有『 SUID 』的属性
-g	侦测是否具有『 SGID 』的属性
-k	侦测是否具有『 sticky bit 』的属性
4.	两个档案之间的判断与比较 ；例如 [ test file1 -nt file2 ]
-nt	第一个档案比第二个档案新
-ot	第一个档案比第二个档案旧
-ef	第一个档案与第二个档案为同一个档案（ link 之类的档案）
5.	逻辑的『和 (and) 』『或 (or) 』
&&	逻辑的 AND 的意思
||	逻辑的 OR 的意思

运算符号	代表意义
=	等于 应用于：整型或字符串比较 如果在 [] 中，只能是字符串
!=	不等于 应用于：整型或字符串比较 如果在 [] 中，只能是字符串
<	小于 应用于：整型比较 在 [] 中，不能使用 表示字符串
>	大于 应用于：整型比较 在 [] 中，不能使用 表示字符串
-eq	等于 应用于：整型比较
-ne	不等于 应用于：整型比较
-lt	小于 应用于：整型比较
-gt	大于 应用于：整型比较
-le	小于或等于 应用于：整型比较
-ge	大于或等于 应用于：整型比较
-a	双方都成立（ and ） 逻辑表达式 –a 逻辑表达式
-o	单方成立（ or ） 逻辑表达式 –o 逻辑表达式
-z	空字符串
-n	非空字符串

参考网址：

http://www.cnblogs.com/chengmo/archive/2010/10/01/1839942.html

26.
curl
引用 cookie

curl –b test=”aaa” http://club.jd.com
-b name=”value”

Test
是 name

Aaa
是 value

27.
查看进程使用物理内存

Ps aux|grep xxx

查询出
pid

比如
pid 是
11460 那么查询物理内存就如下：

cat /proc/11460/status|grep VmRSS

返回结果：

VmRSS: 190332 kB VmRSS: 190332 kB

28.
Grep
不区分大小写

grep –i “aaa”

29.
awk
分割字符串

a.
log
中的信息为：

a:1

b:2

c:3

…..

然后通过
: 分割，那么
a,b,c 就是
$1;1,2,3 就是
$2

写法如下：
-F 后面写上分割的符号

cat a.log|awk -F ':' '{print $1}'

30.
查看线程

ps -eLf|grep hhvm

31.
shell
提示符，输入内容进行选择

如提示内容，然后输入
yes no 等等的，然后进入不同分支

while true;do

#stty -icanon min 0 time 100

echo -n "Automatic execute ten seconds after,Are you sure you want to start the task(yes or no)?"

read Arg

case $Arg in

c)

echo "cc"

exit;;

Y|y|YES|yes)

break;;

N|n|NO|no)

exit;;

"") #Autocontinue

break;;

esac

done

echo

echo "others function..."

32.
curl
获取 http
状态

http_status=`curl -s -w %{http_code} -o /dev/null -e $REFERER_URL "$line" 2>/dev/null `;

-s
是清楚垃圾信息；

-w

33.
Cp
强制覆盖

yes|cp a.txt /export/

用管道线默认确认提示