正则表达式
一、简介
正则表达式(Regular Expression /'reɡjələr/ɪk'spreʃn/
)是一种文本匹配模式,其使用一组由字母和符号组成的特殊文本来描述用户自定义规则的字符串,用于查找或替换满足你想要格式的文本。许多程序设计语言和脚本语言都支持利用正则表达式进行字符串操作(例如:C# 编程语言、python 脚本语言),以及很多专业文本编辑软件都支持利用正则表达式进行文本查找替换操作(例如:Notepad++ 代码编辑软件、Meld 代码比较工具)。注意:因为正则表达式并不仅限于某一种语言/软件,所以在每种语言中都会有细微的差别。
二、语法
1、额外标记
标记也称为修饰符,正则表达式的标记用于指定额外的匹配策略,可以理解为微调全局匹配规则。
例如:i
表示将匹配更改为不区分大小写。
语法:/相关匹配表达式/额外标记
实例:/[a-z]+/ig
额外标记 |
描述 |
---|---|
i | ignore —— 忽略大小写,将匹配更改为不区分大小写。 |
g | global —— 全局匹配,表示查找所有匹配项。 |
m | multi line – 多行匹配,使边界字符 ^ 和 $ 匹配更改为每一行的开头和结尾,而不是整段字符串的开头和结尾。 |
s | 将. 的匹配更改为包含换行符(\n)。 |
2、语法特殊符
2.1、在普通的字符中,存在隐性的控制符,例如 Tab 符和回车符等,这些字符需要转义才能表达出来。
控制类-特殊字符 |
描述 |
---|---|
\cX |
表达一个由 X 指明的控制字符。例如:\cM 表达一个回车符。X 的值必须为 A-Z 或 a-z 之一。否则,将 c 视为一个原义的 ‘c’ 字符。 |
\t |
表示一个 制表符。等价于 \x09 或 \cI。 |
\n |
表示一个 换行符。等价于 \x0a 或 \cJ。 |
\v |
表示一个垂直制表符。等价于 \x0b 或 \cK。 |
\f |
表示一个 换页符。等价于 \x0c 或 \cL。 |
\r |
表示一个 回车符。等价于 \x0d 或 \cM。 |
2.2、匹配语法中,使用了十几个特殊符号来表达匹配规则。当需要显示符号本身时需要转义来呈现。
匹配类-特殊字符 |
描述 |
---|---|
\\ \/ \| \( \) \[ \] \{ \} \* \+ \? \. \^ \$ |
字符转义:匹配中一些特殊字符需要用\ 转义来显示符号本身,主要包括 15 个特殊字符:\ | / ( ) [ ] { } * + ? . ^ $ ,其中 ] } 两个符号可以不用\ 转义。 |
\ | 转义字符:将字符转义 为特殊字符、或八进制转义符等等。 |
| | 匹配或项:为或 运算符,两项表达式中只要有一项匹配即表示符合规则。 |
( ) | 匹配捕获:在匹配获得的字符串中,捕获 ( ) 内规则内容放到缓存,简称捕获物/集合 ,可以有多个捕获物,最多 99 个,\1 表示访问第一个捕获物(如:(([0-9])\2) 其中 \1 表示第一个捕获物为整体,\2 表示为第二个捕获物的克隆,即表示本例有两个数字)。注:(?xxx) 语句不是捕获物。 |
[ ] | 匹配字集:与自定义字符集 其中一个字符 匹配。例如 [0-9] 表示与数字匹配,[^0-9] 表示与非数字匹配。 |
{ } | 匹配次数:限制其左边一个字符或一个捕获物的匹配次数 为用户指定。例如 [0-9]{3}、[0-9]{3,}、[0-9]{3,5} 分别表示匹配 3 个、n~3 个、5~3 个数字,如果后面加一个? 修饰则 [0-9]{3,5}? 表示匹配 3~5 个数字。 |
* | 匹配次数:限制其左边一个字符或一个捕获物的匹配次数为n~0 ,如果后加多一个? 修饰则表示匹配次数为0~n 。 |
+ | 匹配次数:限制其左边一个字符或一个捕获物的匹配次数为n~1 ,如果后加多一个? 修饰则表示匹配次数为1~n 。 |
? | 匹配次数:限制其左边一个字符或一个捕获物的匹配次数为1~0 ,如果后加多一个? 修饰则表示匹配次数为0~1 。 |
. | 匹配字集:与除换行符 ‘\n’ 之外的任何单字符 匹配。备注:个人认为应该是只包括空格、Tab格、及可见字符的任一单字符! |
^ | 匹配位置:匹配输入字符串的开头位置 。例如 ^[0-9]+ 表示整体以数字开始。如果在 [ ] 里面使用,则表示在 ^ 右边的字符集除外的其它字符集。 |
$ | 匹配位置:匹配输入字符串的结尾位置 。例如 [0-9]+$ 表示整体以数字结束。如果设置了 RegExp 对象的 Multiline 属性,则 $ 同时匹配 ‘\n’ 或 ‘\r’,即视一行作为一整体。 |
(?:X) | 匹配集合:由于规则有优先级,特别是匹配或项 “|” 的使用,使用匹配集合 有效解决组合问题。例如 Version_(?:Alpha|Beta) 表示匹配 Version_Alpha 或 Version_Beta 两个字段。 |
(?<=X) (?=X) | 匹配位置:匹配符合 X 表达式(真条件 )的相对开始位置 、相对结尾位置 ,类同 ^ 和 $。例如 (?<=[0-9]+)[a-z]+、[a-z]+(?=[0-9]+) 分别表示匹配以数字开始、以数字结束的文本位置上。 |
(?<!X) (?!X) | 匹配位置:匹配符合 非X 表达式(假条件 )的相对开始位置 、相对结尾位置 ,类同 ^ 和 $。例如 (?<![0-9]+)[a-z]+、[a-z]+(?![0-9]+) 分别匹配表示以非数字开始、以非数字结束的文本位置上。 |
\b | 匹配位置:匹配一个单词边界位置 ,即字与空格间的位置。而大写 \B 表示“非”。 |
\d | 匹配字集:与数字 匹配,即 [0-9]。而大写 \D 表示“非”,即 [^0-9]。 |
\w | 匹配字集:与任何的字母、数字、下划线 匹配,即 [a-zA-Z0-9_]。而大写 \W 表示“非”,即 [^a-zA-Z0-9_]。 |
\s | 匹配字集:与任何的空白字符 匹配,即 [ \t\n\v\f\r]。而大写 \S 表示“非”,即 [^ \t\n\v\f\r]。注意:包括空格。注意 Unicode 正则表达式会匹配全角空格符。 |
3、语法优先级
运算符 | 描述 |
---|---|
\ | 转义符 |
()、(?:)、(?=)、(?!)、[] | 括号符 |
*、+、?、{n}、{n,}、{n,m} | 限定符 |
^、$ | 定位符 |
| | 或项符 |
4、语法的图解
在【菜鸟教程-正则表达式】网页中嵌入的【测试工具】非常形象展示正则表达式的语法匹配,利用它加快我们理解正则表达式的语法。
匹配符 |
展示 |
---|---|
( ) | ◆①【n~1 位相邻相同数字】匹配: |
[ ] | ◆①【1 位数字 + 1 位字母】匹配: |
{ } | ◆①【3 位数字 + 3 位字母】匹配: ◆②【n~3 位数字 + n~3 位字母】匹配: ◆③【3~n 位数字 + 3~n 位字母】匹配: ◆④【4~3 位数字 + 4~3 位字母】匹配: |
* | ◆①【n~0 位数字 + n~0 位字母】匹配: ◆②【0~n 位数字 + 0~n 位字母】匹配: ◆③【0~n 位数字 + n~0 位字母】匹配: ◆④【0~n 位数字 + “abc"字母】匹配: |
+ | ◆①【n~1 位数字 + n~1 位字母】匹配: ◆②【1~n 位数字 + 1~n 位字母】匹配: |
? | ◆①【1~0 位数字 + 1~0 位字母】匹配: ◆②【0~1 位数字 + 0~1 位字母】匹配: ◆③【1~0 位数字 + “hi"字母】匹配: |
. | ◆①【1 位字符 + “hi"字母】匹配: ◆②【n~1 位字符 + “hi"字母】匹配: |
^ | ◆①【整段字符前 10 个字符】匹配: ◆②【每行字符前 10 个字符】匹配: ◆③【整行为大写字符】匹配: |
$ | ◆①【整段字符后 10 个字符】匹配: ◆②【每行字符后 10 个字符】匹配: ◆③【整行为日期字符】匹配: |
(?:X) | ◆①【“23"或"78"数字 + n~1 位字母】匹配: |
(?<=X) (?=X) | ◆①【在"23"数字后面的 n~1 位字母】匹配: ◆②【在"55"数字前面的 n~1 位字母】匹配: |
(?<!X) (?!X) | ◆①【在非"78" 后面的 n~1 位字母】匹配:◆②【在 非"55" 前面的 n~1 位字母】匹配: |
\b | ◆①【在单词边界后面的 n~1 位字母】匹配: ◆②【在 非单词边界 后面的 n~1 位字母】匹配: |
\d | ◆①【n~1 位数字】匹配: ◆②【n~1 位 非数字 】匹配: |
三、应用
1、应用软件
只要有文本查找、替换操作,都有可能使用到正则表达式,它们包括文本编辑软件、脚本、编程语言。下面列出相关应用软件对正则表达式的支持度:
软件/语言 |
. | [ ] | ^ | $ | \( \) | \{ \} | ? | + | | | ( ) |
---|---|---|---|---|---|---|---|---|---|---|
vi | √ | √ | √ | √ | √ | |||||
sed | √ | √ | √ | √ | √ | √ | ||||
awk | √ | √ | √ | √ | √ | √ | √ | √ | √ | |
perl | √ | √ | √ | √ | √ | √ | √ | √ | √ | |
python | √ | √ | √ | √ | √ | √ | √ | √ | √ | √ |
javascript | √ | √ | √ | √ | √ | √ | √ | √ | √ | |
Visual C++ | √ | √ | √ | √ | √ | |||||
C# | √ | √ | √ | √ | √ | √ | √ | √ | ||
delphi | √ | √ | √ | √ | √ | √ | √ | √ | √ | |
java | √ | √ | √ | √ | √ | √ | √ | √ | √ | √ |
php | √ | √ | √ | √ | √ |
备注:
正则表达式的( )
和{ }
匹配字符,为何上表为何写成\( \)
和\{ \}
呢?那是因为相关软件所在工作环境影响,例如:在 shell 命令窗口执行时,大部分符号为 shell 的普通字符,所以只能反过来使用\
转义表示!同时,也不排除其它符号也是如此!正则表达式并不仅限于某一种语言/软件,在每种语言中会都有细微的差别。
2、应用实例
网上早已收集一些常用正则表达式,这就无需我们重复编写了,劳烦你动一下左手的两根手指
Ctrl+C
和Ctrl+V
。^0^ 。
一、校验数字的表达式
- 数字:^[0-9]*$
- n位的数字:^\d{n}$
- 至少n位的数字:^\d{n,}$
- m-n位的数字:^\d{m,n}$
- 零和非零开头的数字:^(0|[1-9][0-9]*)$
- 非零开头的最多带两位小数的数字:^([1-9][0-9]*)+(\.[0-9]{1,2})?$
- 带1-2位小数的正数或负数:^(\-)?\d+(\.\d{1,2})$
- 正数、负数、和小数:^(\-|\+)?\d+(\.\d+)?$
- 有两位小数的正实数:^[0-9]+(\.[0-9]{2})?$
- 有1~3位小数的正实数:^[0-9]+(\.[0-9]{1,3})?$
- 非零的正整数:^[1-9]\d*$ 或 ^([1-9][0-9]*){1,3}$ 或 ^\+?[1-9][0-9]*$
- 非零的负整数:^\-[1-9][]0-9”*$ 或 ^-[1-9]\d*$
- 非负整数:^\d+$ 或 ^[1-9]\d*|0$
- 非正整数:^-[1-9]\d*|0$ 或 ^((-\d+)|(0+))$
- 非负浮点数:^\d+(\.\d+)?$ 或 ^[1-9]\d*\.\d*|0\.\d*[1-9]\d*|0?\.0+|0$
- 非正浮点数:^((-\d+(\.\d+)?)|(0+(\.0+)?))$ 或 ^(-([1-9]\d*\.\d*|0\.\d*[1-9]\d*))|0?\.0+|0$
- 正浮点数:^[1-9]\d*\.\d*|0\.\d*[1-9]\d*$ 或 ^(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*))$
- 负浮点数:^-([1-9]\d*\.\d*|0\.\d*[1-9]\d*)$ 或 ^(-(([0-9]+\.[0-9]*[1-9][0-9]*)|([0-9]*[1-9][0-9]*\.[0-9]+)|([0-9]*[1-9][0-9]*)))$
- 浮点数:^(-?\d+)(\.\d+)?$ 或 ^-?([1-9]\d*\.\d*|0\.\d*[1-9]\d*|0?\.0+|0)$
二、校验字符的表达式
- 汉字:^[\u4e00-\u9fa5]{0,}$
- 英文和数字:^[A-Za-z0-9]+$ 或 ^[A-Za-z0-9]{4,40}$
- 长度为3-20的所有字符:^.{3,20}$
- 由26个英文字母组成的字符串:^[A-Za-z]+$
- 由26个大写英文字母组成的字符串:^[A-Z]+$
- 由26个小写英文字母组成的字符串:^[a-z]+$
- 由数字和26个英文字母组成的字符串:^[A-Za-z0-9]+$
- 由数字、26个英文字母或者下划线组成的字符串:^\w+$ 或 ^\w{3,20}$
- 中文、英文、数字包括下划线:^[\u4E00-\u9FA5A-Za-z0-9_]+$
- 中文、英文、数字但不包括下划线等符号:^[\u4E00-\u9FA5A-Za-z0-9]+$ 或 ^[\u4E00-\u9FA5A-Za-z0-9]{2,20}$
- 可以输入含有^%&',;=?$\“等字符:[^%&',;=?$\x22]+
- 禁止输入含有~的字符:[^~]+
三、特殊需求表达式
- Email地址:^\w+([-+.]\w+)*@\w+([-.]\w+)*\.\w+([-.]\w+)*$
- 域名:[a-zA-Z0-9][-a-zA-Z0-9]{0,62}(\.[a-zA-Z0-9][-a-zA-Z0-9]{0,62})+\.?
- InternetURL:[a-zA-z]+://[^\s]* 或 ^http://([\w-]+\.)+[\w-]+(/[\w-./?%&=]*)?$
- 手机号码:^(13[0-9]|14[01456879]|15[0-35-9]|16[2567]|17[0-8]|18[0-9]|19[0-35-9])\d{8}$
- 电话号码(“XXX-XXXXXXX”、“XXXX-XXXXXXXX”、“XXX-XXXXXXX”、“XXX-XXXXXXXX”、“XXXXXXX"和"XXXXXXXX):^(\(\d{3,4}-)|\d{3.4}-)?\d{7,8}$
- 国内电话号码(0511-4405222、021-87888822):\d{3}-\d{8}|\d{4}-\d{7}
- 电话号码正则表达式(支持手机号码,3-4位区号,7-8位直播号码,1-4位分机号): ((\d{11})|^((\d{7,8})|(\d{4}|\d{3})-(\d{7,8})|(\d{4}|\d{3})-(\d{7,8})-(\d{4}|\d{3}|\d{2}|\d{1})|(\d{7,8})-(\d{4}|\d{3}|\d{2}|\d{1}))$)
- 身份证号(15位、18位数字),最后一位是校验位,可能为数字或字符X:(^\d{15}$)|(^\d{18}$)|(^\d{17}(\d|X|x)$)
- 帐号是否合法(字母开头,允许5-16字节,允许字母数字下划线):^[a-zA-Z][a-zA-Z0-9_]{4,15}$
- 密码(以字母开头,长度在6~18之间,只能包含字母、数字和下划线):^[a-zA-Z]\w{5,17}$
- 强密码(必须包含大小写字母和数字的组合,不能使用特殊字符,长度在 8-10 之间):^(?=.*\d)(?=.*[a-z])(?=.*[A-Z])[a-zA-Z0-9]{8,10}$
- 强密码(必须包含大小写字母和数字的组合,可以使用特殊字符,长度在8-10之间):^(?=.*\d)(?=.*[a-z])(?=.*[A-Z]).{8,10}$
- 日期格式:^\d{4}-\d{1,2}-\d{1,2}
- 一年的12个月(01~09和1~12):^(0?[1-9]|1[0-2])$
- 一个月的31天(01~09和1~31):^((0?[1-9])|((1|2)[0-9])|30|31)$
- 钱的输入格式:
- 有四种钱的表示形式我们可以接受:“10000.00” 和 “10,000.00”, 和没有 “分” 的 “10000” 和 “10,000”:^[1-9][0-9]*$
- 这表示任意一个不以0开头的数字,但是,这也意味着一个字符"0"不通过,所以我们采用下面的形式:^(0|[1-9][0-9]*)$
- 一个0或者一个不以0开头的数字.我们还可以允许开头有一个负号:^(0|-?[1-9][0-9]*)$
- 这表示一个0或者一个可能为负的开头不为0的数字.让用户以0开头好了.把负号的也去掉,因为钱总不能是负的吧。下面我们要加的是说明可能的小数部分:^[0-9]+(.[0-9]+)?$
- 必须说明的是,小数点后面至少应该有1位数,所以"10.“是不通过的,但是 “10” 和 “10.2” 是通过的:^[0-9]+(.[0-9]{2})?$
- 这样我们规定小数点后面必须有两位,如果你认为太苛刻了,可以这样:^[0-9]+(.[0-9]{1,2})?$
- 这样就允许用户只写一位小数.下面我们该考虑数字中的逗号了,我们可以这样:^[0-9]{1,3}(,[0-9]{3})*(.[0-9]{1,2})?$
- 1到3个数字,后面跟着任意个 逗号+3个数字,逗号成为可选,而不是必须:^([0-9]+|[0-9]{1,3}(,[0-9]{3})*)(.[0-9]{1,2})?$
- 备注:这就是最终结果了,别忘了”+“可以用”*“替代如果你觉得空字符串也可以接受的话(奇怪,为什么?)最后,别忘了在用函数时去掉去掉那个反斜杠,一般的错误都在这里
- xml文件:^([a-zA-Z]+-?)+[a-zA-Z0-9]+\\.[x|X][m|M][l|L]$
- 中文字符的正则表达式:[\u4e00-\u9fa5]
- 双字节字符:[^\x00-\xff] (包括汉字在内,可以用来计算字符串的长度(一个双字节字符长度计2,ASCII字符计1))
- 空白行的正则表达式:\n\s*\r (可以用来删除空白行)
- HTML标记的正则表达式:<(\S*?)[^>]*>.*?|<.*? /> ( 首尾空白字符的正则表达式:^\s*|\s*$或(^\s*)|(\s*$) (可以用来删除行首行尾的空白字符(包括空格、制表符、换页符等等),非常有用的表达式)
- 腾讯QQ号:[1-9][0-9]{4,} (腾讯QQ号从10000开始)
- 中国邮政编码:[1-9]\d{5}(?!\d) (中国邮政编码为6位数字)
- IPv4地址:((2(5[0-5]|[0-4]\d))|[0-1]?\d{1,2})(\.((2(5[0-5]|[0-4]\d))|[0-1]?\d{1,2})){3}