登录流程: 实例化一个driver,然后driver.get()发送请求 最重要的:切换iframe子框架,因为豆瓣的网页中的登录那部分是一个ifrme,必须切换才能寻找到对应元素 利用selenium切换到账号密码登录 利用selenium输入账户和密码 利用selenium点击登录按钮 然后利用字典推导式保存了一下cookie 代码实现: import time from selenium import webdriver # 实例化driver driver = webdriver.Chr…

#请求豆瓣网 from selenium import webdriverimport timedriver = webdriver.Chrome() driver.get("http://www.douban.com") driver.find_element_by_name("q").send_keys("速度与激情7")time.sleep(1)driver.find_element_by_class_name("bn"…

from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.wait import WebDriverWait from selenium.webdriver.support import expected_conditions as EC USERNAME = '' # 输入你的账号 PASSWORD = '' # 输入你的密码 driver…

在利用scrapy框架爬各种网站时,一定会碰到某些网站是需要登录才能获取信息. 这两天也在学习怎么去模拟登录,通过自己码的代码和借鉴别人的项目,调试成功豆瓣的模拟登录,顺便处理了怎么自动化的处理验证码. 一般都是通过打码平台处理的,当然你也可以机器学习的知识去识别验证码.后期我想自己做一个关于机器学习识别验证码的API,训练主流的网站,方便自己调用.(还不知道能不能做出来呢,走一步看一步咯!) 思路 一.想要实现登录豆瓣关键点 分析真实post地址 ----寻找它的formdata,如下图,按浏…

selenium模拟登录豆瓣和qq空间今天又重新学习了下selenium,模拟登录豆瓣,发现设置等待时间真的是很重要的一步,不然一直报错:selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element另外,豆瓣的主页(https://www.douban.com/)使用了iframe嵌套了登录页面:<iframe style="height: 300p…

首先是加速度代码 def get_tracks(distance): """ 拿到移动轨迹,模仿人的滑动行为,先匀加速后匀减速 匀变速运动基本公式: ①v = v0+at ②s = v0t+1/2at^2 """ #初速度 v = 0 #单位时间为0.3s来统计轨迹,轨迹即0.3内的位移 t = 0.31 #位置/轨迹列表,列表内的一个元素代表0.3s的位移 tracks = [] #当前位移 current = 0 #到达mid值开始减速 mi…

利用selenium 模仿浏览器,登陆豆瓣 重点: 1. 要设置好 chromedriver配置与使用, chromedriver.exe 和 Chrome的浏览器版本要对应, http://chromedriver.storage.googleapis.com/index.html 2. Js代码写完可以在浏览器F12的控制台交互测试一下 from selenium import webdriver import time driver = webdriver.Chrome() driver.…

学习了urllib.urllib2及cookielib常用方法的使用登录豆瓣,由于有验证码,采取的办法是将验证码图片下载到同目录下,查看图片后输入验证码即可登录.发帖帖子内容写死在代码中了 [Python]代码 # -- coding:gbk --import sys, time, os, reimport urllib, urllib2, cookielib loginurl = 'https://www.douban.com/accounts/login'cookie = cookielib…

声明:本程序仅用于学习爬网页数据,不可用于其它用途. 本程序仍有很多不足之处,请读者不吝赐教. 依赖:本程序依赖BeautifulSoup4和lxml,如需正确运行,请先安装.下面是代码: #!/usr/bin/env python # -*- coding: utf-8 -*- import sys reload(sys) sys.setdefaultencoding('utf-8') #解决编码问题 """一个简单的从豆瓣网获取电影标签的示例, 1. 首先获取所有标签以及…

2017-10-09 19:06:22 版权声明:本文为博主原创文章,未经博主允许不得转载. 前言: 先获得cookie,然后自动登录豆瓣和新浪微博 系统环境: 64位win10系统,同时装python2.7和python3.6两个版本(本次使用python3.6),IDE为pycharm,浏览器为chorme,使用的python第三方库为requests 查看cookie: 首先登陆豆瓣首页,并且登录账户(注意练习爬虫时最好用小号),右键检查,点击Network,然后按Fn+F5刷新页面,点击…