2017-04-11

学习python,免不了应对爬虫,初学爬虫最难理解的就是正则表达式。

比如我们要爬去网页上的某些内容,就像下面这种形式:

<p>safdsf</p><p>sdhjrth</p>

我们要提取标签内的内容,可以尝试来一次正则提取:

>>>s="<p>safdsf</p><p>sdhjrth</p>"

print(re.findall(r'<p>(.*)</p>',s)),这里我们使用findall方法,大家可以思考一下输出的结果,

['safdsf</a><a>sdhjrth']结果有点不尽人意,并没有将<p>标签完全去掉。这就要涉及到贪婪与非贪婪模式了,简单点来说就是一个?的问题

修改过后:

print(re.findall(r'<a>(.*?)</a>',s))

['safdsf', 'sdhjrth']

这样输出的结果就比较符合我们的要求了。所以正则表达式是非常值得研究的

下面介绍正则表达式的几个常用方法;

1,match()方法

大家不妨实验一下match()的方法,这里就简单说一下

>>>p=re.compile(r'[a-z]+')

首先我们先匹配一下,从字母a到z,

>>>print(p.match('345sdf5ggd6fg'))
输出:None

这里我们可以看到输出的结果是none,这是因为match()从字符串的第一位开始匹配,如果第一位不是字母,那么它就不会继续匹配下去。

>>>print(p.match('a345sdf5ggd6fg'))

<_sre.SRE_Match object; span=(0, 1), match='a'>

也就是说只要第一位不是字母,就无法匹配成功。大家可以看一下将p=re.compile(r'[a-z]+')后面的加号换成* 或者去掉。

p=re.compile(r'[a-z]+')

print(p.match('abcasd'))     结果:<_sre.SRE_Match object; span=(0, 6), match='abcasd'>

去掉之后

  p=re.compile(r'[a-z]')

pritn(p.match('abcasd'))  结果:  <_sre.SRE_Match object; span=(0, 1), match='a'>

这里的加号代表

匹配前面的子表达式一次或多次,关于正则表达的所有符号大家自己百度。

2..search()方法

关于search()方法,看上去就比 match更加完美了。

它没有match()只在第一位匹配的限制了。

>>>p=re.compile(r'[a-z]+')

>>>print(m=p.search('234abc'))

结果:<_sre.SRE_Match object; span=(3, 6), match='abc'>

的确是比match()方法好,主要看个人的实际应用。

3.finditer()方法

finditer() 则是将匹配对象作为一个迭代器返回,举个简单的例子吧。

p=re.compile(r'\d+')
for a in p.finditer('今天是4月11号'):
print(a.group(),a.span()) 4 (3, 4)
11 (5, 7)

4.findall()方法

与finditer不同的是,findall()方法返回的是一个列表,和search() match()一样。

5.返回的方法

group() 返回匹配的字符串
start() 返回匹配的开始位置
end() 返回匹配的结束位置
span() 返回一个元组表示匹配位置(开始,结束)

正则表达式的高级方法这里就不多说了,会在近期的文章中一一探讨。(大神勿喷)

python 正则基本方法的更多相关文章

  1. Python正则式的基本用法

    Python正则式的基本用法 1.1基本规则 1.2重复 1.2.1最小匹配与精确匹配 1.3前向界定与后向界定 1.4组的基本知识 2.re模块的基本函数 2.1使用compile加速 2.2 ma ...

  2. Python正则匹配字母大小写不敏感在读xml中的应用

    需要解决的问题:要匹配字符串,字符串中字母的大小写不确定,如何匹配? 问题出现之前是使用字符串比较的方式,比如要匹配'abc',则用语句: if s == 'abc':#s为需要匹配的字符串 prin ...

  3. python字符串的方法

    python字符串的方法 ############7个基本方法############ 1:join def join(self, ab=None, pq=None, rs=None): # real ...

  4. Python正则替换字符串函数re.sub用法示例(1)

    本文实例讲述了Python正则替换字符串函数re.sub用法.分享给大家供大家参考,具体如下: python re.sub属于python正则的标准库,主要是的功能是用正则匹配要替换的字符串然后把它替 ...

  5. python 正则进阶常用方法

    表达式 描述 正则表达式示例 符号 literal 匹配文本字符串的字面值literal foo rel1|rel2 匹配正则表达式rel1或rel2 foo|bar . 匹配任何字符(除了\n之外) ...

  6. 认识python正则模块re

    python正则模块re python中re中内置匹配.搜索.替换方法见博客---python附录-re.py模块源码(含re官方文档链接) 正则的应用是处理一些字符串,phthon的博文python ...

  7. python 正则相关函数全解析

    前言:网上有很多关于python正则函数的方法说明,这里尽可能用最简单的demo把所有函数之间的逻辑关系说清楚,供参考. 1.最原始的 re.compile()这个函数一般是需要和其它函数一起使用的, ...

  8. Python测试函数的方法之一

    Python测试函数的方法之一 首先介绍简单的try......except尝试运行的放例如下面的图和代码来简单介绍下: 注释:提醒以下代码环境为2.7.x 请3.x以上的同学们老规矩print(把打 ...

  9. 使用python原生的方法实现发送email

    使用python原生的方法实现发送email import smtplib from email.mime.text import MIMEText from email.mime.multipart ...

随机推荐

  1. c++中new的三种用法详细解析

    转载至: http://www.jb51.net/article/41524.htm 以下的是对c++中new的三种使用方法进行了详细的分析介绍,需要的朋友可以过来参考下,希望对大家有所帮助. 一. ...

  2. cocoapod引入FLEX,debug模式正常,Release报错library not found for -lXXX

    cocoapod引入FLEX,debug模式正常,Release报错library not found for -lXXX, 因为podfile是这么写的: pod 'FLEX', '~> 2. ...

  3. jquery 数组的操作

    1.数组的创建 var arrayObj = new Array(); //创建一个数组 var arrayObj = new Array([size]); //创建一个数组并指定长度,注意不是上限, ...

  4. Asp.net Mvc action返回多个模型实体给view

    1.controller中action代码: public class HomeController : Controller { public ActionResult Detail(int id) ...

  5. python练习题-day3

    1.有变量name="aleX leNb" 1)移除 name 变量对应的值两边的空格,并输出处理结果 print(name.strip()) 2)移除name变量左边的" ...

  6. 中文全文检索讯搜xunsearch安装

    Xunsearch (迅搜)是一套免费开源的专业中文全文检索解决方案,简单易用而且 功能强大.性能卓越能轻松处理海量数据的全文检索.它包含后端索引.搜索服务程序和前端 脚本语言编写的开发工具包(称之为 ...

  7. 如何在js中将统计代码图标隐藏

    建站时我们都会加一下网站统计,方便把控内容的内容的运营.大部分站长安装的站点统计是第三方统计代码,js形式的,很少用以服务器日志为基础分析的统计.(当然能通过网站日志来分析网站的运营者比一般的站长水平 ...

  8. 关于ios下字体描边的一个细节

    转载请注明,来自:http://blog.csdn.net/skyman_2001    CGContextSetTextDrawingMode(context, kCGTextStroke);    ...

  9. 线程安全问题.md

    # 线程安全问题: - 如果一个资源/变量,他对于多线程来讲,不用加锁也不会引起任何问题,则称为线程安全 - 线程不安全变量类型:list, set, dict - 线程安全变量类型: queue # ...

  10. test TSS Work about

     activity01   activity02   FamilyNew   workTest