大数据挖掘—（九）：爬虫利器

Python 正则表达式

re 模块使 Python 语言拥有全部的正则表达式功能。

compile 函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式匹配和替换。

re 模块也提供了与这些方法功能完全一致的函数，这些函数使用一个模式字符串做为它们的第一个参数。

re.match函数

re.match 尝试从字符串的起始位置匹配一个模式，如果不是起始位置匹配成功的话，match()就返回none。

re.match(pattern, string, flags=0)

函数参数说明：

参数描述pattern匹配的正则表达式string要匹配的字符串。flags标志位，用于控制正则表达式的匹配方式，如：是否区分大小写，多行匹配等等

import re print(re.match('po', 'powers python big data').span()) 不在起始位置匹配 >>>(0, 2) None re.search函数

re.search 扫描整个字符串并返回第一个成功的匹配。

函数语法：

re.search(pattern, string, flags=0) print(re.search('pow', 'powers python big data').span()) 不在起始位置匹配 (0, 3) (19, 22)

re.match只匹配字符串的开始，如果字符串开始不符合正则表达式，则匹配失败，函数返回None；而re.search匹配整个字符串，直到找到一个匹配。

检索和替换

Python 的 re 模块提供了re.sub用于替换字符串中的匹配项。

语法：re.sub(pattern, repl, string, count=0, flags=0)

参数：

pattern : 正则中的模式字符串。repl : 替换的字符串，也可为一个函数。string : 要被查找替换的原始字符串。count : 模式匹配后替换的最大次数，默认 0 表示替换所有的匹配。phone = "086-0532-8888 .*$', "", phone) print ("the phone num is: ", num) num = re.sub(r'D', "", phone) print ("the phone num is : ", num) >>>the phone num is: 086-0532-8888 the phone num is : 08605328888 re.compile 函数

compile 函数用于编译正则表达式，生成一个正则表达式（ Pattern ）对象，供 match() 和 search() 这两个函数使用。

语法格式为：

re.compile(pattern[, flags])

参数：

pattern : 一个字符串形式的正则表达式flags : 可选，表示匹配模式，比如忽略大小写，多行模式等，具体参数为：re.I 忽略大小写re.L 表示特殊字符集 w, W, b, B, s, S 依赖于当前环境re.M 多行模式re.S 即为 . 并且包括换行符在内的任意字符（. 不包括换行符）re.U 表示特殊字符集 w, W, b, B, d, D, s, S 依赖于 Unicode 字符属性数据库re.X 为了增加可读性，忽略空格和 re.I 表示忽略大小写 m = pattern.match('powers python big data') print(m.group()) >>>powers findall

在字符串中找到正则表达式所匹配的所有子串，并返回一个列表，如果没有找到匹配的，则返回空列表。

findall(string[, pos[, endpos]])

参数：

string : 待匹配的字符串。pos : 可选参数，指定字符串的起始位置，默认为 0。endpos : 可选参数，指定字符串的结束位置，默认为字符串的长度。pattern = re.compile(r'powers', re.I) re.I 表示忽略大小写 c=pattern.finditer('powers python big data,powers11') for it in c: print (it.group() ) >>>powers powers re.split

split 方法按照能够匹配的子串将字符串分割后返回列表，它的使用形式如下：

re.split(pattern, string[, maxsplit=0, flags=0])

pattern匹配的正则表达式string要匹配的字符串。maxsplit分隔次数，maxsplit=1 分隔一次，默认为 0，不限制次数。flags标志位，用于控制正则表达式的匹配方式，如：是否区分大小写，多行匹配等等。

pattern = re.compile(r'powers', re.I) # re.I 表示忽略大小写 d=pattern.split('powers python big data,powers11') print(d) >>>['', ' python big data,', '11'] 正则表达式模式

正则表达式模式

正则表达式实例

特殊字符类

下期预告：

关于正则表达式的具体使用，大家可以自行搜索学习，下期我们继续爬虫的例子，爬取美女图片信息以及保存图片

谢谢大家的点赞与转发，关于分享的文章，大家有任何问题，可以在评论区一起探讨学习！！！

本站所发布的文字与图片素材为非商业目的改编或整理，版权归原作者所有，如侵权或涉及违法，请联系我们删除

窝牛号

大数据挖掘—（九）：爬虫利器 _正则表达式

相关推荐

热门信息

快速导航

窝牛号

最新推荐

最新推荐