我们经常会在网上搜索井下载图片，然而一张一张地下载就太麻烦了，本案例

就是通过网络爬虫技术， 一次性下载该网站所有的图片并保存 。
网站图片下载并保存

将指定网站的 .jpg 和 .png 格式的图片全部下载井保存在自己本地新建的 images 文件夹中 。

import requests,os

from bs4 import BeautifulSoup

from urllib.request import urlopen

url = 'http://www.tooopen.com/img/87.aspx'

html = requests.get(url)

html.encoding="utf-8"

sp = BeautifulSoup(html.text, 'html.parser')
# 建立images目录保存图片

images_dir="E:\\images\\"

if not os.path.exists(images_dir):

    os.mkdir(images_dir)
# 取得所有 <a> 和 <img> 标签

all_links=sp.find_all(['a','img']) 

for link in all_links:

    # 读取 src 和　href 属性内容

    src=link.get('src')

    href = link.get('href')

    attrs=[src,src]

    for attr in attrs:

        # 读取　.jpg 和　.png 檔

        if(attr != None)and(('.jpg' in attr)or('.png' in attr)):

            # 设置图片文件完整路径

            full_path = attr

            filename = full_path.split('/')[-1]  # 取得图片名

            ext = filename.split('.')[-1]  #取得扩展名

            filename = filename.split('.')[-2] #取得主文件名

            if('jpg' in ext):

                filename = filename + '.jpg'

            else:

                filename = filename + '.png'

            print(attr)

            # 保存图片

            try:

                image = urlopen(full_path)

                f = open(os.path.join(images_dir,filename),'wb')

                f.write(image.read())

                f.close()

            except:

                print("{} 无法读取!".format(filename))

print("当前页图片下载完了")
/static/image/logo.png

logo.png 无法读取!

/static/image/logo.png

logo.png 无法读取!

https://www.tooopen.com/static/ad/1500X50-viw.png

https://www.tooopen.com/static/ad/1500X50-viw.png

https://www.tooopen.com/static/ad/1500X50-too.png

https://www.tooopen.com/static/ad/1500X50-too.png

http://img08.tooopen.com/20190807/tooopen_wk_131356135671827.jpg

tooopen_wk_131356135671827.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135671827.jpg

tooopen_wk_131356135671827.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135689691.jpg

tooopen_wk_131356135689691.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135689691.jpg

tooopen_wk_131356135689691.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131355135547978.jpg

tooopen_wk_131355135547978.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131355135547978.jpg

tooopen_wk_131355135547978.jpg 无法读取!

http://img08.tooopen.com/20191204/tooopen_sl_135027502737700.jpg

tooopen_sl_135027502737700.jpg 无法读取!

http://img08.tooopen.com/20191204/tooopen_sl_135027502737700.jpg

tooopen_sl_135027502737700.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102334233455130.jpg

tooopen_sl_102334233455130.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102334233455130.jpg

tooopen_sl_102334233455130.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_095522552259405.jpg

tooopen_sl_095522552259405.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_095522552259405.jpg

tooopen_sl_095522552259405.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093830383053575.jpg

tooopen_sl_093830383053575.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093830383053575.jpg

tooopen_sl_093830383053575.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093534353474034.jpg

tooopen_sl_093534353474034.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093534353474034.jpg

tooopen_sl_093534353474034.jpg 无法读取!

http://img08.tooopen.com/20191205/tooopen_sl_134926492663201.jpg

tooopen_sl_134926492663201.jpg 无法读取!

http://img08.tooopen.com/20191205/tooopen_sl_134926492663201.jpg

tooopen_sl_134926492663201.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102328232897349.jpg

tooopen_sl_102328232897349.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102328232897349.jpg

tooopen_sl_102328232897349.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_162428242838278.jpg

tooopen_sl_162428242838278.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_162428242838278.jpg

tooopen_sl_162428242838278.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093827382762634.jpg

tooopen_sl_093827382762634.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093827382762634.jpg

tooopen_sl_093827382762634.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093529352941470.jpg

tooopen_sl_093529352941470.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093529352941470.jpg

tooopen_sl_093529352941470.jpg 无法读取!

http://img08.tooopen.com/20191006/tooopen_sl_09550855847444.jpg

tooopen_sl_09550855847444.jpg 无法读取!

http://img08.tooopen.com/20191006/tooopen_sl_09550855847444.jpg

tooopen_sl_09550855847444.jpg 无法读取!

http://img08.tooopen.com/20191119/tooopen_sl_115948594813304.jpg

tooopen_sl_115948594813304.jpg 无法读取!

http://img08.tooopen.com/20191119/tooopen_sl_115948594813304.jpg

tooopen_sl_115948594813304.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_16270727715545.jpg

tooopen_sl_16270727715545.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_16270727715545.jpg

tooopen_sl_16270727715545.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093822382227436.jpg

tooopen_sl_093822382227436.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093822382227436.jpg

tooopen_sl_093822382227436.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092538253863445.jpg

tooopen_sl_092538253863445.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092538253863445.jpg

tooopen_sl_092538253863445.jpg 无法读取!

http://img08.tooopen.com/20190924/tooopen_sl_095323532347706.jpg

tooopen_sl_095323532347706.jpg 无法读取!

http://img08.tooopen.com/20190924/tooopen_sl_095323532347706.jpg

tooopen_sl_095323532347706.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_101744174437980.jpg

tooopen_sl_101744174437980.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_101744174437980.jpg

tooopen_sl_101744174437980.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_094151415155508.jpg

tooopen_sl_094151415155508.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_094151415155508.jpg

tooopen_sl_094151415155508.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093819381985689.jpg

tooopen_sl_093819381985689.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093819381985689.jpg

tooopen_sl_093819381985689.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092534253435074.jpg

tooopen_sl_092534253435074.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092534253435074.jpg

tooopen_sl_092534253435074.jpg 无法读取!

https://www.tooopen.com/static/image/tooopen-2w.png

https://www.tooopen.com/static/image/tooopen-2w.png

当前页图片下载完了

吴裕雄--天生自然python学习笔记：编写网络爬虫代码获取指定网站的图片的更多相关文章

  1. 吴裕雄--天生自然python学习笔记：python爬虫PM2.5 实时监测显示器

    PM2.5 对人体的健康影响很大,所以空气中的 PM2.5 实时信息受到越来越多的关注. Python 的 Pandas 套件不但可以自动读取网页中的表格 数据 , 还可对数据进行修改.排序等处理,也 ...

  2. 吴裕雄--天生自然PYTHON学习笔记：python自动登录网站

    打开 www. 5 l eta . com 网站,如果己经通过某用户名进行了登录,那么先退出登录 . 登录该网站 的步骤一般如下 : ( 1 )单击右上角的“登录”按钮. ( 2 )先输入账号. ( ...

  3. 吴裕雄--天生自然python学习笔记：Python MongoDB

    MongoDB 是目前最流行的 NoSQL 数据库之一,使用的数据类型 BSON(类似 JSON). PyMongo Python 要连接 MongoDB 需要 MongoDB 驱动,这里我们使用 P ...

  4. 吴裕雄--天生自然python学习笔记：Python3 OS 文件/目录方法

    os 模块提供了非常丰富的方法用来处理文件和目录.常用的方法如下表所示: 序号 方法及描述 1 os.access(path, mode) 检验权限模式 2 os.chdir(path) 改变当前工作 ...

  5. 吴裕雄--天生自然python学习笔记：python 用pyInstaller模块打包文件

    要想在没有安装 Python 集成环境的电脑上运行开发的 Python 程序,必须把 Python 文件打包成 .exe 格式的可执行 文件. Python 的打包工作 PyInstaller 提供了 ...

  6. 吴裕雄--天生自然python学习笔记：python 文件批量查找

    在多个文本文件中查找 我们首先来学习文本文件的查找字符 . 我们通过 os.walk 扩大查找范围, 查找指定目录和子目录下的文件. 应用程序总览 读取 当 前目录及子目录下的所有 PY 和 txt ...

  7. 吴裕雄--天生自然python学习笔记：python 用 Tesseract 识别验证码

    用 Selenium 包实现网页自动化操作的案例中,发现很多网页都因 需输入图形验证码而导致实验无法进行 . 解决的办法就是对验证码进行识别 . 识 别的方法之 一 是通过图形处理包将验证码的大部分背 ...

  8. 吴裕雄--天生自然python学习笔记：pandas模块强大的数据处理套件

    用 Python 进行数据分析处理,其中最炫酷的就属 Pa ndas 套件了 . 比如,如果我 们通过 Requests 及 Beautifulsoup 来抓取网页中的表格数据 , 需要进行较复 杂的 ...

  9. 吴裕雄--天生自然python学习笔记：Beautiful Soup 4.2.0模块

    Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时 ...

随机推荐

  1. 1811 06 pygame 的继续开发

    早上看了  高数和python   好像系统没有保存  桑心啊 关于游戏背景的制作 游戏背景就是    背景在移动  而主人物还在原位置的    常常用于跑酷游戏类  背景开始绘制两张图像  一张完全 ...

  2. 系统 win 10 专业版 下载地址

    thunder://QUFodHRwOi8veHoyLjgxMDg0MC5jb20vY25fd2luZG93c18xMF9jb25zdW1lcl9lZGl0aW9uc192ZXJzaW9uXzE4MD ...

  3. 一个支持种子、磁力、迅雷下载和磁力搜索的APP源代码

    磁力搜索网站2020/01/12更新 https://www.cnblogs.com/cilisousuo/p/12099547.html 一个支持种子.磁力.迅雷下载和磁力搜索的APP源代码 Lic ...

  4. .NET 请求认证之access-token（oauth2.0与owin的结合）

    公司对外开放的接口,大多需要请求认证,如微信,阿里等.最近我刚好在搭建webapi框架.记录一下自己的理解. 一:请求认证的目的   之所以要对我们的接口进行请求认证,就是为了安全考虑的.以前都是在用 ...

  5. py02_01：初识模块

    模块的定义:模块是一个包含所有你定义的函数和变量的文件,其后缀名是.py.模块可以被别的程序引入,以使用该模块中的函数等功能.(可以理解为:库) 模块分为三类 ( 1. 标准库:     直接导入使用 ...

  6. Promoter complex|转录组水平RNA的复杂度|

    生命组学 Promoter complex Tata box识别位点 Enhancer加入之后增强转录 不确定性与确定性之间的关系,原因中存在这不确定性,但是结果表达又是确定的.因为promoter的 ...

  7. NWERC 2015

    2015-2016 Northwestern European Regional Contest (NWERC 2015) F H没做 似乎只有 B 题有点意思 D:数论分块枚举所有上取整区间,只需要 ...

  8. mybatis使用Map<String,Object>映射mysql结果集，关于字段的问题

    --mysql常用字段类型如图 --mybatis使用Map<String,Object>映射,会将tinyint映射成Integer类型.decimal映射成BigDecimal类型 所 ...

  9. 3）PHP基本语法和变量基础，区分大小写

    (1)语法环境: PHP嵌入到html到代码中: . <?php 这里是PHP代码 ?> 标准形式: <script language='php'> 这里是PHP代码 < ...

  10. IDEA中的常用插件安装以及使用的介绍

    IDEA中的lombok插件安装以及各注解的详细介绍 Grep Console 当你密密麻麻一大片的日志,去查看起来,很容易看花眼:这个工具正好解决了这个痛点,可以说它就是 IDEA 自带 Conso ...