1、什么是正则表达式

简单的说,正则表达式就是为处理大量的字符串而定义的一套规则和方法

例如:

假设“@”代表oldboy,“!”代表oldgirl。echo "@!"==“oldboyoldgirl”

通过定义的这些特殊符号的辅助,系统管理员就可以快速过滤,替换或输出需要的字符串

linux正则表达式一般以行为单位处理的。

正则表达式:

    1)linux正则表达式(grep awk sed)

    2)PHP、JAVA、PERLPYTHON(Perl兼容正则 PCRE)

2、为什么要学正则表达式?

在企业工作中,我们每天做的linux运维工作中,时刻都会面对大量带有字符串的文本配置、程序、命令输出及日志文件等,而我们经常会有迫切的需要,从大量的字符串内容中查找符合工作需要的特定的字符串。这就要靠正则表达式。因此,可以说正则表达式就是为过滤字符的需求而生的!

例如:ifconfig的输出取IP,例如:cat /var/log/messages输出等

3、容易混淆的两个注意事项:

1)正则表达式应用非常广泛,存在于各种语言中,例如:php、python、java

等。但是我们今天讲的linux系统运维工作中的正则表达式,即linux正则表达式,最常用正则表达式的命令就是grep(egrep)、sed、awk,换句话说linux三剑客要想工作的各高效,那一定离不开正则表达式配合的。

2)正则表达式和我们常用的通配符特殊字符是用本质去别的,这一点要注意

通配符例子:

ls *.log这里的*就是通配符(表示所有),不是正则表达式

基本组成部分:

正则表达式的基本组成部分。

正则表达式

描述

示例

\

转义符,将特殊字符进行转义,忽略其特殊意义

a\.b匹配a.b,但不能匹配ajb.被转义为特殊意义

^

匹配行首,awk中,^则是匹配字符串的开始

^tux匹配以tux开头的行

$

匹配行尾,awk中,$则是匹配字符串的结尾

tux$匹配以tux结尾的行

.

匹配除换行符\n之外的任意单个字符,awk则中可以

ab.匹配abcbad,不可匹配abcdabde,只能匹配单字符

[ ]

匹配包含在[字符]之中的任意一个字符

coo[kl]可以匹配cookcool

[^ ]

匹配[^字符]之外的任意一个字符

123[^45]不可以匹配1234123512361237都可以

[ - ]

匹配[]中指定范围内的任意一个字符,要写成递增

[0-9]可以匹配123等其中任意一个数字

?

匹配之前的项1次或者0

colou?r可以匹配color或者colour,不能匹配colouur

+

匹配之前的项1次或者多次

sa-6+匹配sa-6sa-666,不能匹配sa-

*

匹配之前的项0次或者多次

co*l匹配clcolcoolcoool

()

匹配表达式,创建一个用于匹配的子串

ma(tri)?匹配maxmaxtrix

{ n }

匹配之前的项n次,n是可以为0的正整数

[0-9]{3}匹配任意一个三位数,可以扩展为[0-9][0-9][0-9]

{n,}

之前的项至少需要匹配n

[0-9]{2,}匹配任意一个两位数或更多位数

{n,m}

指定之前的项至少匹配n次,最多匹配m次,n<=m

[0-9]{2,5}匹配从两位数到五位数之间的任意一个数字

|

交替匹配|两边的任意一项

ab(c|d)匹配abcabd

POSIX字符类

POSIX字符类是一个形如[:...:]的特殊元序列(metasequence),他可以用于匹配特定的字符范围。

正则表达式

描述

示例

[:alnum:]

匹配任意一个字母或数字字符

[[:alnum:]]+

[:alpha:]

匹配任意一个字母字符(包括大小写字母)

[[:alpha:]]{4}

[:blank:]

空格与制表符(横向和纵向)

[[:blank:]]*

[:digit:]

匹配任意一个数字字符

[[:digit:]]?

[:lower:]

匹配小写字母

[[:lower:]]{5,}

[:upper:]

匹配大写字母

([[:upper:]]+)?

[:punct:]

匹配标点符号

[[:punct:]]

[:space:]

匹配一个包括换行符、回车等在内的所有空白符

[[:space:]]+

[:graph:]

匹配任何一个可以看得见的且可以打印的字符

[[:graph:]]

[:xdigit:]

任何一个十六进制数(即:0-9a-fA-F

[[:xdigit:]]+

[:cntrl:]

任何一个控制字符(ASCII字符集中的前32个字符)

[[:cntrl:]]

[:print:]

任何一个可以打印的字符

[[:print:]]

元字符

元字符(meta character)是一种Perl风格的正则表达式,只有一部分文本处理工具支持它,并不是所有的文本处理工具都支持。

正则表达式

描述

示例

\b

单词边界

\bcool\b 匹配cool,不匹配coolant

\B

非单词边界

cool\B 匹配coolant,不匹配cool

\d

单个数字字符

b\db 匹配b2b,不匹配bcb

\D

单个非数字字符

b\Db 匹配bcb,不匹配b2b

\w

单个单词字符(字母、数字与_

\w 匹配1a,不匹配&

\W

单个非单词字符

\W 匹配&,不匹配1a

\n

换行符

\n 匹配一个新行

\s

单个空白字符

x\sx 匹配x x,不匹配xx

\S

单个非空白字符

x\S\x 匹配xkx,不匹配xx

\r

回车

\r 匹配回车

\t

横向制表符

\t 匹配一个横向制表符

\v

垂直制表符

\v 匹配一个垂直制表符