linux 正则表达式

正则表达式

REGEXP: Regular Expressions,由一类特殊字符所编写的模式,其中有些字符(元字符)不表示字符字面意义,而表示控制或通配的功能,类似于增强版的通配符功能

正则表达式被很多程序和开发语言所广泛支持: vim, less,grep,sed,awk, nginx,mysql 等

正则表达式分两类:

  • 基本正则表达式:BRE
  • 扩展正则表达式:ERE

正则表达式引擎:

采用不同算法,检查处理正则表达式的软件模块,如:PCRE(Perl Compatible Regular Expressions)

正则表达式的元字符分类:字符匹配、匹配次数、文职锚定、分组

帮助:man 7 regex

基本正则表达式元字符

字符匹配

.           匹配任意单个字符
[]          匹配指定范围内的任意单个字符,示例:[wang]   [0-9]    [a-z]   [a-zA-Z]
[^]         匹配指定范围外的任意单个字符,示例:[^wang] 
[:alnum:]   字母和数字
[:alpha:]   代表任何英文大小写字符,亦即 A-Z, a-z
[:lower:]   小写字母,示例:[[:lower:]],相当于[a-z]
[:upper:]   大写字母
[:blank:]   空白字符(空格和制表符)
[:space:]   水平和垂直的空白字符(比[:blank:]包含的范围广)
[:cntrl:]   不可打印的控制字符(退格、删除、警铃...)
[:digit:]   十进制数字
[:xdigit:]  十六进制数字
[:graph:]   可打印的非空白字符
[:print:]   可打印字符
[:punct:]   标点符号

范例

[19:26:21 root@centos8 ~]#ls /etc/ |grep 'rc[.0-6]'
rc0.d
rc1.d
rc2.d
rc3.d
rc4.d
rc5.d
rc6.d
rc.d
rc.local
[19:26:46 root@centos8 ~]#ls /etc/ |grep 'rc[.0-6].'
rc0.d
rc1.d
rc2.d
rc3.d
rc4.d
rc5.d
rc6.d
rc.d
rc.local
[19:27:33 root@centos8 ~]#ls /etc/ |grep 'rc[.0-6]\.'
rc0.d
rc1.d
rc2.d
rc3.d
rc4.d
rc5.d
rc6.d


匹配次数

用在要指定次数的字符后面,用于指定前面字符要出现的次数

*       匹配前面的字符任意次,包括0次,贪婪模式:尽可能长的匹配
.*      任意长度的任意字符
\?      匹配其前面的字符0或1次,即:可有可无
\+      匹配其前面的字符至少1次,即:肯定有
\{n\}   匹配前面的字符n次
\{m,n\} 匹配前面的字符至少m次,至多n次
\{,n\}  匹配前面的字符至多n次
\{n,\}  匹配前面的字符至少n次

范例:

[19:39:05 root@centos8 ~]#echo /etc/ |grep -E "/etc/?"
/etc/
[19:39:09 root@centos8 ~]#echo /etc |grep -E "/etc/?"
/etc

范例

[root@centos8 ~]#cat test.txt
google
goooooooooooooooooogle
ggle
gogle
gooooOOOOO00000gle
gooogle
[root@centos8 ~]#grep 'go\{2,\}gle' test.txt
google
goooooooooooooooooogle
gooogle
[root@centos8 ~]#grep 'goo\+gle' test.txt
google
goooooooooooooooooogle
gooogle
[root@centos8 ~]#grep 'goo*gle' test.txt
google
goooooooooooooooooogle
gogle
gooogle
[root@centos8 ~]#grep 'gooo*gle' test.txt
google
goooooooooooooooooogle
gooogle

#匹配正负数
[root@centos8 ~]#echo -1 -2 123 -123 234 |grep  '-\?[0-9]\+'
grep: invalid option -- '\'
Usage: grep [OPTION]... PATTERN [FILE]...
Try 'grep --help' for more information.

[root@centos8 ~]#echo -1 -2 123 -123 234 |grep  '\-\?[0-9]\+'
-1 -2 123 -123 234

[root@centos8 ~]#echo -1 -2 123 -123 234 |grep -E  '-?[0-9]+'
grep: invalid option -- '?'
Usage: grep [OPTION]... PATTERN [FILE]...
Try 'grep --help' for more information.

[root@centos8 ~]#echo -1 -2 123 -123 234 |grep -E  '\-?[0-9]+'
-1 -2 123 -123 234
[root@centos8 ~]#echo -1 -2 123 -123 234 |grep -E -- '-?[0-9]+'
-1 -2 123 -123 234
[root@centos8 ~]#echo -1 -2 123 -123 234 |grep -E '(-)?[0-9]+'
-1 -2 123 -123 234

位置锚定

位置锚定可以用于定位出现的位置

^           行首锚定,用于模式的最左侧
$           行尾锚定,用于模式的最右侧
^PATTERN$   用于模式匹配整行
^$          空行
^[[:space:]]*$  空白行
\< 或 \b         词首锚定,用于单词模式的左侧
\> 或 \b         词尾锚定,用于单词模式的右侧
\<PATTERN\>      匹配整个单词

范例:

#不以#号开头的行
[root@centos8 ~]#grep '^[^#]' /etc/fstab
UUID=acf9bd1f-caae-4e28-87be-e53afec61347 /                       xfs     defaults        0 0
UUID=1770b87e-db5a-445e-bff1-1653ac64b3d6 /boot                   ext4    defaults        1 2
UUID=ffffd919-d674-44d9-a4e7-402874f0a1f0 /data                   xfs     defaults        0 0
UUID=409e36d2-ac5e-423f-ad78-9b12db4576bd swap                    swap    defaults        0 0

#排除掉空行和#开头的行
[root@centos8 ~]#grep -v '^$' /etc/profile|grep -v '^#'
[root@centos8 ~]#grep  '^[^$#]' /etc/profile


分组

分组

分组:()将一个或多个字符捆绑在一起,当作一个整体处理,如:(root)+

分组括号中的模式匹配到的内容会被正则表达式引擎记录于内部的变量中,这些变量的命名方式为,\1,\2,\3,...

\1 表示从左侧起第一个左括号以及与之匹配的括号之间的模式所破配到的字符

范例

\(string1\(string2\)\)
\1 :string1\(string2\)
\2 :string2

后向引用:引用前面的分组括号中的模式所匹配到的字符,而非模式本身

或者

逻辑或:\|

范例

a\|b            #a或b 
C\|cat          #C或cat   
\(C\|c\)at      #Cat或cat

范例:排除空行和#开头的行

[root@centos6 ~]#grep -v '^#' /etc/httpd/conf/httpd.conf |grep -v ^$
[root@centos6 ~]#grep -v '^#\|^$' /etc/httpd/conf/httpd.conf
[root@centos6 ~]#grep -v '^\(#\|$\)' /etc/httpd/conf/httpd.conf 
[root@centos6 ~]#grep "^[^#]" /etc/httpd/conf/httpd.conf

扩展正则表达式

字符匹配元字符

.       任意单个字符
[wang]  指定范围的字符
[^wang] 不在指定范围的字符
[:alnum:] 字母和数字
[:alpha:] 代表任何英文大小写字符,亦即 A-Z, a-z
[:lower:] 小写字母,示例:[[:lower:]],相当于[a-z]
[:upper:] 大写字母
[:blank:] 空白字符(空格和制表符)
[:space:] 水平和垂直的空白字符(比[:blank:]包含的范围广)
[:cntrl:] 不可打印的控制字符(退格、删除、警铃...)
[:digit:] 十进制数字
[:xdigit:]十六进制数字
[:graph:] 可打印的非空白字符
[:print:] 可打印字符
[:punct:] 标点符号

次数匹配

*       匹配前面字符任意次
?       0或1次
+       1次或多次
{n}     匹配n次
{m,n}   至少m,至多n次

位置锚定

^   行首
$   行尾
\<, \b  语首
\>, \b  语尾

分组其它

() 分组
后向引用:\1, \2, ...
| 或者
a|b         #a或b
C|cat       #C或cat
(C|c)at     #Cat或cat

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,290评论 6 491
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,107评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,872评论 0 347
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,415评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,453评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,784评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,927评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,691评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,137评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,472评论 2 326
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,622评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,289评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,887评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,741评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,977评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,316评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,490评论 2 348