1.正则表达式

REGEXP： Regular Expressions，由一类特殊字符及文本字符所编写的模式，其中有些字符（元字符）

不表示字符字面意义，而表示控制或通配的功能，类似于增强版的通配符功能，但与通配符不同，通配

符功能是用来处理文件名，而正则表达式是处理文本内容中字符

正则表达式被很多程序和开发语言所广泛支持：vim, less,grep,sed,awk, nginx,mysql 等

主要用来匹配字符串（命令结果，文本内容），

通配符匹配文件（而且是已存在的文件）

正则表达式—通常用于判断语句中，用来检查某一字符串是否满足某一格式。

正则表达式是由普通字符与元字符组成：

普通字符 包括大小写字母、数字、标点符号及一些其他符号。
元字符 是指在正则表达式中具有特殊意义的专用字符，可以用来规定其前导字符（即位于元字符前面的字符或表达式）在目标对象中的出现模式。

2.常见的元字符

元字符	含义
\	*转义字符，用于取消特殊符号的含义，例：\！、\n、\s等
\	匹配字符串开始的位置，例：^ a、^ the、^ #、^ [a-z]
$	匹配字符串结束的位置，例：word、^ 匹配空行
.	匹配除\n之外的任意的一个字符，有且仅有一个。例：go.d、g…d
*	匹配前面子表达式0次或者多次，例：`good`、`go.d`
[list]	匹配list列表中的一个字符，例：go[ola]d，[abc]、[a-z]、[a-z0-9]
[^list]	匹配任意非list列表中的一个字符，例：[ ^A-Z0-9]，[ ^a-z]匹配任意一位非小写字母
[[:alpha:]]	代表任意一个大小写英文字母，相当于[A-Za-z]
[:[:digit:]]	代表任意一个十进制数字，相当于[0-9]
[[:alnum:]]	代表任意一个大小写英文字母及数字，相当于[A-Za-z0-9]
\ {n\ }	匹配前面的子表达式n次，例：`go{2}d`、 `'[0-9]{2}'`匹配两位数字
\ {n,\ }	匹配前面的子表达式不少于n次，例：`go{2,}d`、`'[0-9]{2,}'`匹配两位及两位以上数字
\ {n,m\ }	匹配前面的子表达式n到m次，例：`go{2,3}d`、`'[0-9]{2,3}'`匹配两位到三位数字

注： egrep、 awk使用{n}、{n,}、{n, m}匹配时 "{ }" 前不用加" \ "

3.转义字符 ''

\ 可以把一些特殊的符号转换成普通的符号字符，还可以把一些普通字符转换成特殊功能。

	将特殊的符号转换成普通字符：
\ &	单个&代表后台运行
\ l	单个 l 代表“或”
\ !	单个 ! 代表取反
\ =	单个=代表复制或者字符判断
\ $	单个$代表引用变量
	将普通字符转换成特殊功能：
\n	转换后是换行符
\t	转换后是制表符
\r	转换后是回车符
\w	匹配包括下划线的任何单词字符
\W(大写)	匹配任何非单词字符。等价于"`[^A-Za-z0-9_]`"
\d	匹配一个数字字符
\D	匹配一个非数字字符。等价于`[^0-9]`
\s	空白符
\S	非空白符

4.示例'^'开头 '$'结尾


[root@localhost ~]# cat test1.txt 
abcdcba
aaa
bbb
ccc
ddd
a1b2c3
[root@localhost ~]# grep "^a" test1.txt ##以a开头的行
abcdcba
aaa
a1b2c3
[root@localhost ~]# grep "a$" test1.txt  ##以a结尾的行 
abcdcba
aaa

开头.png

示例 4.'.' 和 '*'

'.' :表示一个任意字符，有且仅有一个

'*' :表示表示任意字符有0次或者多次

[root@localhost ~]# grep "go.d" test1.txt ##表示go和d之间有且仅有一个字符
good
gooddddddd
gold
goad
[root@localhost ~]# grep "go*d" test1.txt ##表示go和d之间有0或者多个任意字符
god
good
gooooooood
gooddddddd

星号.png

示例5.list

[list] 匹配括号内的任意一个字符，只能匹配单个字符。

[ ^list] ，^在括号内表示取反。即匹配括号内字符以外的任意一个字符，只能匹配单个字符

[root@localhost ~]# cat test1.txt 
abcdcba
aaa
bbb
ccc
ddd
a1b2c3
god
good
gooooooood
goooabcood
gooddddddd
gold
goad
goold
goald
[root@localhost ~]# grep "go[ola]d" test1.txt 
good
gooddddddd
gold
goad
[root@localhost ~]# grep "go[^oa]d" test1.txt 
gold

匹配单个字符.png

示例6.复合使用

1.^与$复合使用

[root@localhost ~]# grep "^goo*d$" test1.txt 
god
good
gooooooood
[root@localhost ~]# grep "^goo*d" test1.txt 
god
good
gooooooood
gooddddddd

复合使用1.png

2.^与[^list]复合使用

[root@localhost ~]# grep "^[^g]" test1.txt 
abcdcba
aaa
bbb
ccc
ddd
a1b2c3

混合使用2.png

7.{n} 匹配前面的子表达式n次

[root@localhost ~]# grep "go\{1\}d" test1.txt 
god
[root@localhost ~]# grep "go\{2\}d" test1.txt 
good
gooddddddd
[root@localhost ~]# grep "go[ola]\{2\}d" test1.txt 
goold
goald

匹配表达式n次.png

8.{n,} 匹配前面的子表达式不少于n次

[root@localhost ~]# grep "go\{2,\}d" test1.txt 
good
gooooooood
gooddddddd
[root@localhost ~]# grep "go\{3,\}d" test1.txt 
gooooooood

匹配次数不少于n次.png

2.{n,m} 匹配前面的子表达式n到m次

[root@localhost ~]# grep "go\{2,3\}d" test1.txt 
good
gooddddddd
[root@localhost ~]# grep "go\{2,4\}d" test1.txt 
good
gooddddddd

几到几次.png

egrep，awk在使用{n}、{n,}、{n,m}时，括号{}前不需要加反斜杠\。如果加了\，反而失去效果。

2.正则表达式元字符

（支持的工具：egrep、 awk、 grep-E、 sed -r）

元字符	含义
+	匹配前面子表达式1次及以上，例: go+d，将匹配至少一个o，如god、good、 goood等
?	匹配前面子表达式0次或者1次，例: go?d,将匹配gd或god
( )	将括号中的字符串作为一个整体，例1: g(0o)+d,将匹配oo整体1次以上，如good、gooood等
l	以"或"的方式匹配字符串

示例：+

+：匹配前面的子表达式1次及以上（至少1次）。

[root@localhost ~]# egrep "go+d" test1.txt 
god
good
gooooooood
gooddddddd
ooooogooooood
[root@localhost ~]# egrep "go*d" test1.txt 
god
good
gooooooood
gooddddddd
gd
oooooogd
ooooogooooood

+.png

示例：？

?：匹配前面子表达式0次或者1次


[root@localhost ~]# cat test1.txt 
abcdcba
aaa
bbb
ccc
ddd
a1b2c3
god
good
gooooooood
goooabcood
gooddddddd
gold
goad
goold
goald
gd
oooooogd
ooooogooooood
[root@localhost ~]# egrep "go?d" test1.txt 
god
gd
oooooogd

？.png

示例：（）

[root@localhost ~]# egrep "g(ol)d" test1.txt 
gold
[root@localhost ~]# egrep "g(oo)d" test1.txt 
good
gooddddddd
[root@localhost ~]# egrep "g(oo)+d" test1.txt 
good
gooooooood
gooddddddd
ooooogooooood
[root@localhost ~]# egrep "g(oo)*d" test1.txt 
good
gooooooood
gooddddddd
gd
oooooogd
ooooogooooood

（）.png

示例：|

|：以"或"的方式匹配字符串

[root@localhost ~]# egrep "g(oo|oa)d" test1.txt 
good
gooddddddd
goad
[root@localhost ~]# egrep "g(oo|ol)d" test1.txt 
good
gooddddddd
gold
[root@localhost ~]# egrep "go(o|a)d" test1.txt 
good
gooddddddd
goad

或.png

3.实验

1.匹配电话号码

实验要求：

匹配 025 开头的区号。

电话号码要5 或者 8开头的八位数。

格式如下：

 区号 号码
 区号-号码
 区号号码
 123

要求全号码格式匹配

[root@localhost ~]# cat dianhua.txt 
02588888888          
025-5555555555      
025 12345678
025 54321678         
025ABC88888
025-85432109         
0251-85432109
0025-85432109

[root@localhost ~]# egrep "(^025)[- ]?[58][0-9]$" dianhua.txt
02588888888          
025-5555555555
025-85432109

shell脚本之正则表达式