Selenium+PhantomJS实现简易有道翻译爬虫

Selenium一款自动化测试工具，当然用来写爬虫也是没有问题的。它支持Chrome、Safari、Firefox等主流界面式浏览器，另外它也支持多种语言开发，比如 Java，C，Ruby，Python等。PhantomJS是一个无界面的，可脚本编程的WebKit浏览器引擎，当我们爬一些网站，页面全js渲染，如果逐个去分析后台请求，对于web高手无所谓，但对于像我这样连js都不太懂的小白来说，简直崩溃。这个时候用PhantomJS就可以帮助我们像浏览器一样渲染js处理的页面。

代码很简单，关键地方已注释：

 #!/usr/bin/env python
 # -*- coding: utf-8 -*-
 # @Time     : 2018/1/5 16:55
 # @Author   : Eivll0m
 # @Site     : https://github.com/Eivll0m
 # @File     : YD_dict.py
 # @Software : PyCharm

 from selenium import webdriver
 from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
 import sys
 reload(sys)
 sys.setdefaultencoding('utf8')

 class YoudaoDict:
     def __init__(self):
         self.url = 'http://fanyi.youdao.com'
         self.agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36'
         self.dcap = dict(DesiredCapabilities.PHANTOMJS)
         self.dcap["phantomjs.page.settings.userAgent"] = self.agent
         self.service_args = []
         self.service_args.append('--load-images=no')  ##关闭图片加载
         self.service_args.append('--disk-cache=yes')  ##开启缓存
         self.service_args.append('--ignore-ssl-errors=true')  ##忽略https错误
         self.browser = webdriver.PhantomJS('D:\\Program Files\\phantomjs-2.1.1-windows\\bin\\phantomjs.exe',service_args=self.service_args)

     def transTarget(self):
         browser = self.browser
         browser.get(self.url)
         browser.implicitly_wait(3)
         text = browser.find_element_by_id('inputOriginal')
         text.clear()
         while 1:
             key = str(raw_input('请输入您需要翻译的内容：'))
             if key == 'quit':
                 browser.quit()
                 exit()
             if key:
                 break
         text.send_keys(key.decode('utf-8'))
         while 1:
             try:
                 bro = browser.find_element_by_css_selector('#transTarget > p > span')
                 break
             except:
                 print '还未定位到元素!'
         return bro.text

 if __name__ == '__main__':
     D = YoudaoDict()
     while 1:
         print D.transTarget()

运行效果：