linux下文本查找命令及正则表达式

马哥说了，学不好正则表达式不是linux的问题，是智商的问题。

下面我们来讨论一下在linux下面怎么查找文本，用什么方法查找文本，用什么命令查找文本，这里我们要用到的两个命令是 grep、egrep和fgrep。首先我们要了解一下什么是grep

grep:
grep的英文全称是global search REgular expression and print out the line.
意思就是说 全面搜索正则表达式并把行打印出来，全面搜索和把行打印出来我们都懂，正则表达式等会再讲，我们先来认识一下新朋友 grep

grep的用法
grep [OPTIONS] PATTERN [FILE...]
grep +[选项]+搜索模式+[目标文件]
选项：
-o：只显示匹配到的内容
-i：第一个字符不区分大小写
-v：显示不能被匹配到的行
-A#：显示被匹配到的行与它后面的#行
-B#：显示被匹配到的行与它前面的#行
-C#：显示被匹配到的行前与它的前后各#行

搜索模式(PATTERN):以正则表达式的元字符以及正常字符组合而成的搜索条件。

那么什么是正则表达式呢？

正则表达式：又叫做常规表示法（regular expression,简写为regex或RE），是使用一些特殊的字符 （元字符）组成合乎搜索条件的模型，已达到用来查找到特定文件的目的。

正则表达式元字符有哪些，他们有什么作用？由于正则表达式元字符太多，我们可以按照功能给他们分分类：

第一类：实现字符匹配的元字符，他们组合起来可以用来匹配任意字符。
.：匹配任意单个字符
[]：匹配指定范围内的任意单个字符；
[^]：匹配任意范围外的任意单个字符；
例如：
[0-9]与[:digit:]都表示任意一个数字
[a-z]与[:lower:]都表示任意一个小写字母
[A-Z]与[:upper:]都表示任意一个大写字母
[a-zA-Z]与[:aphla:]都表示任意一个字母
[1-9a-zA-Z]与[:alnum:]都表示任意一个数字或字母
[:punct:]表示任意一个标点符号
[:space:]表示任意一个空格字符

# grep [^[:digit:]][[:space:]][[:aphla:]] /tmp/grep.test.txt
表示从/tmp/grep.test.txt中查找字符串中有三个字符，第一个字符不是数字，第二个字符为空 白符，第三个字符为字母的行

第二类：实现字数匹配的元字符，在期望匹配的字符后面提供一个控制符，用来表达匹配其前面字符指 定的次数。
*：任意次
\?:1次或0次
\+:大于1次
\{m\}:左侧字符精确出现m次
\{m,n\}:至少m次，至多n次
#grep "a.*b" /tmp/grep.test.txt
表示查找ab中间可以为任意个任意字符的行，例如行里有ab，acb，a34b，abbb
#grep "ca\?b" /tmp/grep.test.txt
表示a出现一次或者一次都不出现，如cab，cb
#grep "ab\+c" /tmp/grep.test.txt
表示字符串中b至少出现一次，如abc，abbc，abbbbc
#grep "ab\{3\}c" /tmp/grep.test.txt
表示字符串中b出现三次，如abbbc
#grep "ab\{1,2\}c" /tmp/grep.test.txt
表示b至少出现1次最多出现2次，如abc，abbc

第三类：牟定位置的元字符，规定需要匹配的字符串出现在文件的什么位置上。
^：字符串出现在行首
$：字符串出现在行尾
^$:组合起来表示牟定行首与行尾，中间没有字符的话表示空白行。
#grep "^abc" /tmp/grep.test.txt
表示abc这三个字符必须出现在行首才匹配
#grep "abc$" /tmp/grep.test.txt
表示abc三个字符必须出现在行尾才匹配
#grep "^abc$" /tmp/grep.test.txt
表示整行只有abc三个字符才匹配

第四类：牟定单词的元字符，表示一个字符串必须是由某字符开头，或由某单词结尾。
\<：牟定单词首部
\>：牟定单词尾部
\<pattern\>：表示这个字符串必须作为整个单词出现
#grep "\<abc" /tmp/grep.test.txt
表示字符串中出现以字符a开头后面跟了bc的三个字符才匹配
#grep "abc\>" /tmp/grep.test.txt
表示字符串中出现以字符c结尾前面跟了ab的三个字符才匹配
#grep "\<passwd\>" /tmp/grep.test.txt
表示字符串中有passwd这个单词才匹配，如apasswd，passwd2d都不符合条件

第五类：将单词分组的元字符
\(\):用小括号将字符串分组，括号内的表示为一个整体出现。
在分组模式中，被括号内匹配到的内容将被记忆为变量，可以用grep调用 这些变量，这些变量被引用时表达为\1,\2,\3...
\#：表示模式中自左及右出现的第#个左括号以及与之对应的右括号之间匹配到 的内容。
#grep "^the\(\<pa.*wd\>\).*\1$" /tmp/grep.test.txt
表示字符串中以the开头，中间出现"pa.*wd"匹配的单词 ，行尾也出现"pa.*wd" 第一次匹配 到的单词的行 。如果"pa.*wd"匹配成passwd那么行尾必须出现passwd才行。

世界万物都是发展进步的，当一些条件不能满足人们的需求时，人类就会创造其他的条件来替代它，这就是发展。所以当grep 加正则表达式不能满足人们的查找文件需求时，扩展正则表达式以及与之对应的命令 egrep出现了，也可以说是grep -E

egrep: 是grep -E的另一种表达式，可以使用扩展正则表达式

命令用法：
egrep [OPTIONS] PATTERN [FILE...]

egrep可用选项与grep是一样的，他们的区别主要在正则表达式字符的使用上，egrep功能更强大一些，可用的功能更多一些。

扩展正则表达式元字符分类：

第一类：字符匹配项与grep相同
.,[],[^]
第二类：次数匹配，特殊符号前面的反斜线可以省略
*，？，+，{m}，{m，n}，{m，}，{，n}
第三类：位置牟定与grep相同
^:行首
$:行尾
第四类：单词牟定与grep相同，反斜线不能省
\<:词首
\>：词尾
第五类：分组，括号前反斜线可以省去,但是引用字符表达的斜线不可省去
（）：分组
\1,\2,.....
扩展：
第六类：选择符，表达或者的意思，匹配的是选择符|前后的整个字符串而不是单个字符
|：或者
例如 a|b 表示a或者b
abc|cde 表示abc或者cde
ab(c|C)de 表示ab然后小c或者大C然后de

# egrep "ab(c|C)de" /tmp/egrep.test.txt
表示从/tmp/egrep.test.txt文件中查找带有abcde或者abCde的行

fgrep:表示快速查询文本行，这个命令不能够使用正则表达式，只能匹配字符串
查询速度比grep快，但是功能较单一。

说完这三个文本行查询命令，我们来举几个例子给大家看看，毕竟只有熟练使用才能有助于记忆，多加练习才能真正掌握正则表达式，要学好linux不能只讲理论，一定要多练。
常用grep实例

(1)多个文件查询
grep "sort" *.grep #见文件名的匹配

(2)行匹配:输出匹配行的计数
grep -c "48" data.grep #输出文档中含有48字符的行数

(3)显示匹配行和行数
grep -n "48" data.grep #显示所有匹配48的行和行号

(4)显示非匹配的行
grep -vn "48" data.grep #输出所有不包含48的行

(4)显示非匹配的行
grep -vn "48" data.grep #输出所有不包含48的行

(5)大小写敏感
grep -i "ab" data.grep #输出所有含有ab或Ab的字符串的行

(6)正则表达式的应用 (注意：最好把正则表达式用单引号括起来)
grep '[239].' data.grep #输出所有含有以2,3或9开头的，并且是两个数字的行

(7)不匹配测试
grep '^[^48]' data.grep #不匹配行首是48的行

(8)使用扩展模式匹配
grep -E '219|216' data.grep #输出所有含有219或者216的行

最后借助马哥一句话勉励各位同志：莫怜己，但行好事，莫问前程，啥都不说就是干。

本文出自 “铜锣湾” 博客，请务必保留此出处http://wuhf2015.blog.51cto.com/8213008/1627299