题外话:

爬虫学到这里,我想你大部分的网站已经不再话下了对吧?有检测报文头的,我们可以伪造报文头为浏览器,有检测IP,我们可以用代理IP,有检测请求速度的,我们可以用time模块停顿一下,需要登录验证的,我们可以用cookielib模块搞定登录,HTML标签嵌套太多层的,我们可以用BeautifulSoup轻松取出来,等等方法,反正反爬虫机制怎么样,我们基本都有方法解决。

很厉害对吧?别得意忘形了,还有些反爬虫机制,网页是JS动态加载的,或者AJAX异步加载的,还有动态验证码验证的等等的,这些机制造成的难度那才是真正的难度。后期也会跟着解析

其实你有没有发现,在我们写爬虫的过程中,在潜移默化的复习前面的基础知识,很不错对吧?既能写爬虫,还能复习,在其中能掌握好多好多知识,是的。不过在这里,我还是建议大家稍微的了解一下html标签和css样式,或者你还可以学习一下js,这样对后期搞爬虫很有帮助,需要去了解每个标签或者代码是什么含义,什么作用,当写爬虫时遇到了,才能立马做出解决方法对吧?

好的,有没有朋友想过,既然爬虫这么厉害,可以伪造浏览器,那么可以用真实的浏览器操作吗?那是当然可以的,python,就是这么灵活,那么怎么控制真实的浏览器呢?终于说道本篇文章的主角了——webbrowser模块

webbrowser模块

1.简介

顾名思义,web不用说是什么意思了吧?browser就是浏览器的意思嘛,那么webbrower就是web浏览器嘛。通俗简短的说,它可以打开本地计算机的浏览器,然后进行更一步的操作,怎么操作就随你了

webbrowser是一个内置的模块,python2和python3都有的

2.方法/属性

python2下:

python3下:

稍稍的有一些不同,不过不影响,那些我们基本很少用

3.常用方法/属性解析

webbrowser.open(url[, new=0[, autoraise=1]]):用本机默认的浏览器操作

  • url:网页链接/地址
  • new = 0, 那么url会在同一个浏览器窗口下打开;如果new = 1, 会打开一个新的窗口,如果new = 2, 会打开一个新的浏览器标签页;
  • autoraise = true,窗口会自动增长

例:

首先,我本机默认的浏览器是火狐浏览器

import webbrowser
webbrowser.open('www.baidu.com') #这里可以不用加http://了,这直接是在浏览器上操作了,会自动识别

结果:

使用new参数后,其实没多大区别,效果一样的,自己测试了


webbrowser.open_new(url)
:在默认浏览器中打开一个新的窗口来打开url

其效果等价于webbrowser.open(url,new=1),自己测试了


webbrowser.open_new_tab(url)
:在默认浏览器中当开一个新的tab来打开url

其效果等价于webbrowser.open(url,new=2),略过


webbrowser.get([name])
:根据name返回一个浏览器对象,如果name为空,则获取到系统默认浏览器的操作对象

webbrowser.register(name, construtor[, instance])
:注册一个名字为name的浏览器,如果这个浏览器类型允许被注册就可以用get()方法来获取

允许被注册的浏览器类型有:

'mozilla' Mozilla('mozilla')   
'firefox' Mozilla('mozilla')   
'netscape' Mozilla('netscape')   
'galeon' Galeon('galeon')   
'epiphany' Galeon('epiphany')   
'skipstone' BackgroundBrowser('skipstone')   
'kfmclient' Konqueror() (1)
'konqueror' Konqueror() (1)
'kfm' Konqueror() (1)
'mosaic' BackgroundBrowser('mosaic')   
'opera' Opera()   
'grail' Grail()   
'links' GenericBrowser('links')   
'elinks' Elinks('elinks')   
'lynx' GenericBrowser('lynx')   
'w3m' GenericBrowser('w3m')   
'windows-default' WindowsDefault (2)
'macosx' MacOSX('default') (3)
'safari' MacOSX('safari') (3)
'google-chrome' Chrome('google-chrome')   
'chrome' Chrome('chrome')   
'chromium' Chromium('chromium')   
'chromium-browser' Chromium('chromium-browser')

其中,以上的Chrome,Chromium,MacOSX等等的都是webbrowser里的属性或者方法

例:

import webbrowser
print(webbrowser.get())
webbrowser.register('chrome',None,webbrowser.Chrome('chrome'))
print(webbrowser.get('chrome'))

结果:

启动指定浏览器

我们已经知道webbrowser模块会启动本机默认浏览器,那么我们想启动指定的浏览器呢?

也是可以的:

import webbrowser
browser_path = r'C:\Users\Administrator\AppData\Local\Google\Chrome\Application\chrome.exe' #你的浏览器主程序路径
webbrowser.register('chrome',None,webbrowser.BackgroundBrowser(browser_path)) #此处的'chrome'可以用其它任意名字,如test,但是必须给一个,不然又会是默认浏览器执行
webbrowser.get('chrome').open('www.baidu.com',new=1,autoraise=True)

结果:

关闭浏览器

有打开自然有关闭对吧,关闭命令:taskkill /F /IM XX.exe(XX为主程序名)

这次我打开ie浏览器:

import webbrowser,os,time
browser_path = r'C:\Program Files\Internet Explorer\iexplore.exe' #你的浏览器主程序路径,linux,mac等操作环境也一样
webbrowser.register('chrome',None,webbrowser.BackgroundBrowser(browser_path))
webbrowser.get('chrome').open('www.baidu.com',new=1,autoraise=True)
time.sleep(3)
os.system('taskkill /F /IM iexplore.exe') #这里的'ieexplore.exe'是进程名称,必须和浏览器主程序名一致,不然无法关闭,taskkill是windows下的命令,linux下没记错是kill

在三秒过后确实自动关闭,由于效果不好展示,你们在本机体验吧

webbrowser可以打开其他程序吗?

这里有朋友有个想法了,你说,既然打开的是一个主程序,我可以打开QQ吗?甚至可以打开其他任何的exe程序吗?好像可行啊,注意一个命令:webbrowser.open(),这个命令打开的必须是一个合法的url,不然报错,所以,当然是不可以打开其他程序,能传入一个url的是不是只有浏览器啊?

实战,刷博客访问量

首先,我个人是不喜欢刷访问量的,刷来有什么用,自己骗自己嘛对吧?这里做个案例讲解一下,我建议大家还是不要去刷博客访问量,没什么意思,又不能体现自己的价值,也换不了钱对吧?

import webbrowser,time,os
count = 1
browser_path = r'C:\Users\Administrator\AppData\Local\Google\Chrome\Application\chrome.exe' #由于我用默认的浏览器火狐正在编辑本篇文章呢,所以使用的指定打开浏览器方法,你们可以直接默认的,减少代码
while count <= 9:  #最多打开九个窗口,超过就杀死进程
    webbrowser.register('chrome',None,webbrowser.BackgroundBrowser(browser_path))
    webbrowser.get('chrome').open_new_tab('http://www.cnblogs.com/yangva/p/7811622.html')
    count += 1
    time.sleep(2)
else:
    os.system('taskkill /F /IM chrome.exe')

结果:这里我设置只有注册用户才能查看,所以提示需要登录的,不影响,结果是实现了的

洗礼灵魂,修炼python(68)--爬虫篇—番外篇之webbrowser模块的更多相关文章

  1. 洗礼灵魂,修炼python(69)--爬虫篇—番外篇之feedparser模块

    feedparser模块 1.简介 feedparser是一个Python的Feed解析库,可以处理RSS ,CDF,Atom .使用它我们可从任何 RSS 或 Atom 订阅源得到标题.链接和文章的 ...

  2. Python之路【番外篇】回顾&类的静态字段

    回顾 回顾:字符串.列表.字典的修改关于内存的情况 一.字符串 str1 = 'luotianshuai' str2 = str1 print id(str1) print id(str2) prin ...

  3. python之爬虫--番外篇(一)进程,线程的初步了解

    整理这番外篇的原因是希望能够让爬虫的朋友更加理解这块内容,因为爬虫爬取数据可能很简单,但是如何高效持久的爬,利用进程,线程,以及异步IO,其实很多人和我一样,故整理此系列番外篇 一.进程 程序并不能单 ...

  4. 给深度学习入门者的Python快速教程 - 番外篇之Python-OpenCV

    这次博客园的排版彻底残了..高清版请移步: https://zhuanlan.zhihu.com/p/24425116 本篇是前面两篇教程: 给深度学习入门者的Python快速教程 - 基础篇 给深度 ...

  5. python的类和对象——番外篇(类的静态字段)

    什么是静态字段 在开始之前,先上图,解释一下什么是类的静态字段(我有的时候会叫它类的静态变量,总之说的都是它.后面大多数情况可能会简称为类变量.): 我们看上面的例子,这里的money就是静态字段,首 ...

  6. python自动化测试应用-番外篇--接口测试1

    篇1                 book-python-auto-test-番外篇--接口测试1 --lamecho辣么丑 1.1概要 大家好! 我是lamecho(辣么丑),至今<安卓a ...

  7. python自动化测试应用-番外篇--接口测试2

    篇2                 book-python-auto-test-番外篇--接口测试2 --lamecho辣么丑 大家好! 我是lamecho(辣么丑),今天将继续上一篇python接 ...

  8. python的类和对象——类的静态字段番外篇

    什么是静态字段 在开始之前,先上图,解释一下什么是类的静态字段(我有的时候会叫它类的静态变量,总之说的都是它.后面大多数情况可能会简称为类变量.): 我们看上面的例子,这里的money就是静态字段,首 ...

  9. #3使用html+css+js制作网页 番外篇 使用python flask 框架 (II)

    #3使用html+css+js制作网页 番外篇 使用python flask 框架 II第二部 0. 本系列教程 1. 登录功能准备 a.python中操控mysql b. 安装数据库 c.安装mys ...

随机推荐

  1. Ajax 上传input type file 文件

    Html: <div class="attach-img"> <label><input type="file" id=" ...

  2. 始于阿里,回归社区:阿里8个项目进入CNCF云原生全景图

    破土而出的生命力,源自理想主义者心底对技术的信念. 云原生技术正席卷全球,云原生基金会在去年KubeCon +CloudNativeCon NA的现场宣布: 其正在孵化的项目已达14个,入驻的厂家或产 ...

  3. 【Flask-RESTPlus系列】Part1:快速入门

    0x00 内容概览 Flask-RESTPlus安装 快速入门 初始化 一个最简单的API示例 资源路由 端点 参数解析 数据格式化 顺序保留 完整例子 0x01 Flask-RESTPlus安装 1 ...

  4. Dockerfile 中的 multi-stage(多阶段构建)

    在应用了容器技术的软件开发过程中,控制容器镜像的大小可是一件费时费力的事情.如果我们构建的镜像既是编译软件的环境,又是软件最终的运行环境,这是很难控制镜像大小的.所以常见的配置模式为:分别为软件的编译 ...

  5. go使用context包避免goroutine泄露问题

    go是带内存自动回收的特性,因此内存一般不会泄漏.但是Goroutine确存在泄漏的情况,同时泄漏的Goroutine引用的内存同样无法被回收. 下面的程序中后台Goroutine向管道输入自然数序列 ...

  6. [EOJ629] 两开花

    Description 给定一棵以 \(1\) 为根 \(n\) 个节点的树. 定义 \(f(k)\) :从树上等概率随机选出 \(k\) 个节点,这 \(k\) 个点的虚树大小的期望. 一个点 \( ...

  7. Go基础系列:nil channel用法示例

    Go channel系列: channel入门 为select设置超时时间 nil channel用法示例 双层channel用法示例 指定goroutine的执行顺序 当未为channel分配内存时 ...

  8. 实战!基于lamp安装wordpress详解-技术流ken

    简介 LAMP 是Linux Apache MySQL PHP的简写,其实就是把Apache, MySQL以及PHP安装在Linux系统上,组成一个环境来运行动态的脚本文件.现在基于lamp搭建wor ...

  9. python中的模块和包

    模块 一 什么是模块 模块就是一组功能的集合体,可以通过导入模块来复用模块的功能. 比如我在同一个文件夹定义两个.py文件,分别命名为A.py和B.py,那么可以通过在A文件里通过import B来使 ...

  10. RDD内存迭代原理(Resilient Distributed Datasets)---弹性分布式数据集

    Spark的核心RDD Resilient Distributed Datasets(弹性分布式数据集)   Spark运行原理与RDD理论 Spark与MapReduce对比,MapReduce的计 ...