详解Python 正则表达式模块


Posted in Python onNovember 05, 2018

由于最近需要使用爬虫爬取数据进行测试,所以开始了爬虫的填坑之旅,那么首先就是先系统的学习下关于正则相关的知识啦。所以将下面正则方面的知识点做了个整理。语言环境为Python。主要讲解下Python的Re模块。

下面的语法我就主要列出一部分,剩下的在python官网直接查阅即可: docs.python.org/3/library/r…

一、基础语法总结

1.1、匹配单个字符

a . \d \D \w \W \s \S [...] [^...]

匹配单个字符(.)

规则:匹配除换行之外的任意字符

In [24]: re.findall("f.o","foo is not fao")
Out[24]: ['foo', 'fao']

匹配任意(非)数字字符(\d \D)

\d   [0-9]
\D   [^0-9]

匹配任意(非)普通字符(\w \W)

\w 普通字符 包括[_0-9A-Za-z] 同时也包括汉字
\W 非普通字符

匹配任意(非)空字符(\s \S)

\s 匹配任意空字符  [\r\n\t]
\S 匹配任意非空字符

匹配字符集合([...])

[A-Z][a-z][0-9][_123a-z]

匹配字符集([^...])

规则:字符集取非,除列出的字符之外的任意一个字符

[^abc] --> 除a b c之外任意字符

1.2、匹配多个字符

* 匹配0次或者多次
+ 匹配1次或者多次
? 匹配0次或者1次
{m} 匹配m次
{m,n} 匹配m次到n次区间内的任意一次

1.3、匹配位置

^ 匹配开始位置
$ 匹配结束位置
\A 匹配开始位置
\Z 匹配结束位置
\b 匹配单词边界位置(一般用于首字母大写的匹配)
\B 匹配非单词边界问题

1.4、转义

在正则表达式中有一类特殊字符需要转移,只需要在特殊字符之间加上 \ 表示转移即可

. * + ? ^ $ [] {} () | \

1.5、子组

使用() 可以为正则表达式建立内部分组,子组为正则表达式的一部分,可以看做一个内部整体。

In [61]: re.search(r"(https|http|ftp):\/\/\w+\.\w+\.(com|cn)","https://www.baidu.com").group(0)
Out[61]: 'https://www.baidu.com'
In [62]: re.search(r"(https|http|ftp):\/\/\w+\.\w+\.(com|cn)","https://www.baidu.com").group(1)
Out[62]: 'https'

1.6、贪婪模式和非贪婪模式

正则表达式的重复匹配总是尽可能多的向后匹配更多的内容。 贪婪模式包括:* + ? {m,n}

非贪婪模式:尽可能少的匹配内容 贪婪模式转换为非贪婪模式:*? +? ?? {m,n}?

In [106]: re.findall(r"ab+?","abbbbbbbb")
Out[106]: ['ab']
In [107]: re.findall(r"ab??","abbbbbbbb")
Out[107]: ['a']

二、Re模块

详解Python 正则表达式模块

接下来我所有函数里面的参数解释如下:

pattern:正则表达式
string:目标字符串
pos:截取目标字符串起始位置
endpose:截取目标字符串结束位置
flags:功能标志
replaceStr:替换的字符串
max:最多替换几处(默认替换全部)

有上图我们看出来,接下来我们要将的Python中re模块、regex对象、match对象三者之间是存在一定关系的。

1、re模块的compile方法返回一个regex对象
2、re模块和regex对象的finditer()、fullmatch()、match()、search()等方法返回一个match对象
3、他们分别有自己的属性和方法

2.1、compile

regex = re.compile(pattern, flags = 0) # 生成正则表达式对象

2.2、findall

re.findall(pattern,string,pos,endpose) # 从目标字符串中匹配所有符合条件的内容

2.3、split

re.split(pattern,string,flags) #根据正则表达式对目标字符串进行分割

In [79]: re.split(r'\s+',"Hello World")
Out[79]: ['Hello', 'World']

2.4、sub

re.sub(pattern,replaceStr,string,max,flags)

In [80]: re.sub(r'\s+',"##","hello world")
Out[80]: 'hello##world'

2.5、subn

re.subn(pattern,replaceStr,string,max,flags)  #功能同sub,但是返回值返回替换后的字符串和替换了几处

In [80]: re.sub(r'\s+',"##","hello world")
Out[80]: ('hello##world',1)

2.6、finditer

re.finditer(pattern,string)  #使用正则表达式匹配目标字符串,返回一个match对象,match对象调用group()之后才能拿到值

In [87]: it = re.finditer(r'\d+',"2014nianshiqiqngduo 08aoyun 512dizhen")

In [88]: for i in it:
 ....: print(i)
 ....: 
<_sre.SRE_Match object at 0x7f0639767920>
<_sre.SRE_Match object at 0x7f0639767ac0>
<_sre.SRE_Match object at 0x7f0639767920>
In [93]: it = re.finditer(r'\d+',"2014nianshiqiqngduo 08aoyun 512dizhen")
In [94]: for i in it:
 ....: print(i.group())
 ....: 
2014
08
512

2.7、fullmatch

fullmatch(pattern,string,flags) #完全匹配目标字符串,相当于加了^ 和 $

2.8、match

re.match(pattern,string,flags)  #匹配目标字符串开头的位置

2.9、search

re.search(pattern,string,flags) #  正则表达式匹配目标字符串,只匹配第一处

三、一些练习题

3.1、匹配首字母大写的单词

import re
f = open('test.txt')
pattern= r'\b[A-Z][a-zA-Z]*\s*'
# pattern= r'\b[A-Z]\S'
L = []
for i in f:
 L += re.findall(pattern,i)
print(L)

test.txt文档内容如下:

Hello World -12.6
Nihao 123
How are you -12
1.24
asdk 34%,
占比 1/2
2003 - 2005./%

3.2、匹配数字(正数、负数、小数、百分数、分数)

import re
pattern = "-?\d+((/?\d+)|((\.)?\d+)|((\%)?))"
f = open('test.txt')
l = []
for line in f:
 l += re.finditer(pattern,line)
for i in l:
 print(i.group())

总结

以上所述是小编给大家介绍的Python 正则表达式模块,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对三水点靠木网站的支持!

Python 相关文章推荐
python实现rest请求api示例
Apr 22 Python
Python FTP操作类代码分享
May 13 Python
Python实现FTP上传文件或文件夹实例(递归)
Jan 16 Python
python爬虫实战之最简单的网页爬虫教程
Aug 13 Python
python实现百万答题自动百度搜索答案
Jan 16 Python
Python生成任意范围任意精度的随机数方法
Apr 09 Python
python opencv3实现人脸识别(windows)
May 25 Python
详解Django项目中模板标签及模板的继承与引用(网站中快速布置广告)
Mar 27 Python
pycharm通过anaconda安装pyqt5的教程
Mar 24 Python
Python中and和or如何使用
May 28 Python
Python文件名匹配与文件复制的实现
Dec 11 Python
pytorch 梯度NAN异常值的解决方案
Jun 05 Python
用python3教你任意Html主内容提取功能
Nov 05 #Python
用Python实现读写锁的示例代码
Nov 05 #Python
详解如何为eclipse安装合适版本的python插件pydev
Nov 04 #Python
详解Python下Flask-ApScheduler快速指南
Nov 04 #Python
Python中修改字符串的四种方法
Nov 02 #Python
Python中flatten( )函数及函数用法详解
Nov 02 #Python
[原创]Python入门教程5. 字典基本操作【定义、运算、常用函数】
Nov 01 #Python
You might like
PHP setcookie() cannot modify header information 的解决方法
2009/01/09 PHP
Php Mssql操作简单封装支持存储过程
2009/12/11 PHP
PHP5多态性与动态绑定介绍
2015/04/03 PHP
详解Grunt插件之LiveReload实现页面自动刷新(两种方案)
2015/07/31 PHP
PHP的Yii框架中移除组件所绑定的行为的方法
2016/03/18 PHP
Bootstrap的图片轮播示例代码
2015/08/31 Javascript
jQuery点击其他地方时菜单消失的实现方法
2016/04/22 Javascript
浅谈bootstrap源码分析之scrollspy(滚动侦听)
2016/06/06 Javascript
关于JSON.parse(),JSON.stringify(),jQuery.parseJSON()的用法
2016/06/30 Javascript
JS实现线性表的顺序表示方法示例【经典数据结构】
2017/04/11 Javascript
JavaScript基于扩展String实现替换字符串中index处字符的方法
2017/06/13 Javascript
推荐15个最好用的JavaScript代码压缩工具
2019/02/13 Javascript
小程序的上传文件接口的注意要点解析
2019/09/17 Javascript
React 父子组件通信的实现方法
2019/12/05 Javascript
[03:04]DOTA2超级联赛专访ZSMJ “莫名其妙”的逆袭
2013/05/23 DOTA
python 不关闭控制台的实现方法
2011/10/23 Python
一个基于flask的web应用诞生 组织结构调整(7)
2017/04/11 Python
python WindowsError的错误代码详解
2017/07/23 Python
使用Python操作excel文件的实例代码
2017/10/15 Python
wxPython的安装图文教程(Windows)
2017/12/28 Python
python微信跳一跳系列之自动计算跳一跳距离
2018/02/26 Python
使用python判断jpeg图片的完整性实例
2019/06/10 Python
python 魔法函数实例及解析
2019/09/25 Python
基于Python爬取爱奇艺资源过程解析
2020/03/02 Python
python3 logging日志封装实例
2020/04/08 Python
python安装mysql的依赖包mysql-python操作
2021/01/01 Python
HTML5 Canvas draw方法制作动画效果示例
2013/07/11 HTML / CSS
设置器与访问器的定义以及各自特点
2016/01/08 面试题
直接有效的自我评价
2014/01/11 职场文书
物业管理毕业生的自我评价
2014/02/17 职场文书
财务简历的自我评价
2014/03/05 职场文书
三方协议书范本
2014/04/22 职场文书
2014年物流工作总结
2014/11/25 职场文书
司机岗位职责
2015/02/04 职场文书
超详细教你怎么升级Mysql的版本
2021/05/19 MySQL
在 SQL 语句中处理 NULL 值的方法
2021/06/07 SQL Server