import requests
from bs4 import BeautifulSoup

s=requests.Session()
r=s.get('https://www.tumblr.com/login')
htmldoc=r.text
test=BeautifulSoup(htmldoc)报错信息

首先这不是错，是警告，引发原因是你的操作虽然没有错，但却不合规范。

BeautifulSoup(content, "html5lib")安装 html5lib才符合规范
												


											
爬虫工具--Beautifusoup的更多相关文章
	

    
								
  1. MinerUtil.java 爬虫工具类
		
    MinerUtil.java 爬虫工具类 package com.iteye.injavawetrust.miner; import java.io.File; import java.io.File ...
    
		
    2. 
						
  2. python爬虫工具集合
		
    python爬虫工具集合 大家一起来整理吧!强烈建议PR.这是初稿,总是有很多问题,而且考虑不全面,希望大家支持! 源文件 主要针对python3 常用库 urllib Urllib是python提供 ...
    
		
    3. 
						
  3. python爬虫工具
		
    一直都听说python写爬虫工具非常方便,为了获取数据,我也要写点爬虫,但是python太灵活了,不知道python爬虫要哪些框架,要了解,比如beatiful soup,scrapy, 爬虫的额主要 ...
    
		
    4. 
						
  4. 常见Python爬虫工具总结
		
    常见Python爬虫工具总结 前言 以前写爬虫都是用requests包,虽然很好用,不过还是要封装一些header啊什么的,也没有用过无头浏览器,今天偶然接触了一下. 原因是在处理一个错误的时候,用到 ...
    
		
    5. 
						
  5. Python 爬虫工具 —— fake_useragent
		
    服务器为避免爬虫工具无休止的请求,以减轻负载,会对 user agent 进行校验,即判断某一 user-agent 是否不断地进行请求.可采用如下方式进行绕过服务器的校验. UserAgent_Li ...
    
		
    6. 
						
  6. Windows下安装配置爬虫工具Scrapy及爬虫环境
		
    爬虫工具Scrapy在Mac和Linux环境下都相对好装,但是在Windows上总会碰到各种莫名其妙的问题.本文记录下Scrapy在Window上的安装过程. 本文是基于Python2.7及Windo ...
    
		
    7. 
						
  7. Nodejs书写爬虫工具
		
    看了几天的nodejs,的确是好用,全当是练手了,就写了一个爬虫工具. 爬虫思路都是一致的,先抓取页面数据,然后分析页面,获取到所需要的数据,最后获得这些数据,是写入到硬盘,还是显示到网页,自己看着办 ...
    
		
    8. 
						
  8. node.js 基于cheerio的爬虫工具，需要登录权限的爬虫工具
		
    公司有过一个需求,需要拿一个网页的的表格数据,数据量达到30w左右:为了提高工作效率. 结合自身经验和网上资料.写了一套符合自己需求的nodejs爬虫工具.也许也会适合你的. 先上代码.在做讲解 'u ...
    
		
    9. 
						
  9. 一个python爬虫工具类
		
    写了一个爬虫工具类. # -*- coding: utf-8 -*- # @Time : 2018/8/7 16:29 # @Author : cxa # @File : utils.py # @So ...
    
		
    10. 
		

	


随机推荐
	

    
									
  1. jetty+httpClient使用
			
    背景: 看了https://www.cnblogs.com/donlianli/p/10954716.html这篇文章之后,突然发现自己的知识面太窄了,连这些几乎可以说基础的工具都没怎么用过,于是决定 ...
    
			
    2. 
						
  2. lucene_08_solr导入数据库数据
			
    一步:在solr家目录中导入 下图的jar包 第二步:配置solr 家目录 solr_home\collection1\conf\solrconfig.xml.在config标签下加入requestH ...
    
			
    3. 
						
  3. [bzoj4027][HEOI2015]兔子与樱花_贪心_树形dp
			
    兔子与樱花 bzoj-4027 HEOI-2015 题目大意:每个点有c[i]朵樱花,有一个称重m, son[i]+c[i]<=m.如果删除一个节点,这个节点的樱花或移动到它的祖先中深度最大的, ...
    
			
    4. 
						
  4. codevs 2460 树的统计
			
    2460 树的统计   题目描述 Description 一棵树上有n个节点,编号分别为1到n,每个节点都有一个权值w. 我们将以下面的形式来要求你对这棵树完成一些操作: I.             ...
    
			
    5. 
						
  5. MySQL备份 博客---MYSQLDBA  黄杉
			
    http://blog.csdn.net/mchdba/article/category/1598781
    
			
    6. 
						
  6. Unity3D 射线指定层获取GameObject 注意  LayerMask
			
    这一篇是纯技术讨论,看过我前面文章的童鞋应该清楚,我的奔跑是靠鼠标响应的,鼠标点到哪就跑到哪,后来又有了界面,麻烦就来了,我的界面居然能点 穿.我不希望点界面的时候还能点到界面后面的地面上,角色傻不拉 ...
    
			
    7. 
						
  7. Noip2011瑞士轮题解
			
    题目背景 在双人对决的竞技性比赛.如乒乓球.羽毛球.国际象棋中.最常见的赛制是淘汰赛和循环赛.前者的特点是比赛场数少.每场都紧张刺激,但偶然性较高.后者的特点是较为公平,偶然性较低,但比赛过程往往十分 ...
    
			
    8. 
						
  8. Android+Jquery Mobile学习系列(1)-开发环境
			
    开发环境是老生常谈的问题了,网上有很多关于Android环境安装的文章,我这里也就简单说明一下,不做过多分析. 想了解详细的安装说明,可以参见[百度经验] Java环境安装直接跳过,说一下Androi ...
    
			
    9. 
						
  9. css3 animate基本属性
			
    Css3animate属性 属性 描述 Css Animation 所有动画属性的简写属性,除了animation-play-state属性 Animation:name duration timin ...
    
			
    10. 
						
  10. Linux Shell Scripting Cookbook 读书笔记 1
			
    本系列文章为<Linux Shell Scripting Cookbook>的读书笔记,只记录了我觉得工作中有用,而我还不是很熟练的命令 书是很好的书,有许多命令由于我比较熟悉,可能就没有 ...
    
			
    11.