Selenium+PhantomJS实现简易有道翻译爬虫

Selenium一款自动化测试工具，当然用来写爬虫也是没有问题的。它支持Chrome、Safari、Firefox等主流界面式浏览器，另外它也支持多种语言开发，比如 Java，C，Ruby，Python等。PhantomJS是一个无界面的，可脚本编程的WebKit浏览器引擎，当我们爬一些网站，页面全js渲染，如果逐个去分析后台请求，对于web高手无所谓，但对于像我这样连js都不太懂的小白来说，简直崩溃。这个时候用PhantomJS就可以帮助我们像浏览器一样渲染js处理的页面。

代码很简单，关键地方已注释：

#!/usr/bin/env python
# -*- coding: utf-8 -*-
# @Time     : 2018/1/5 16:55
# @Author   : Eivll0m
# @Site     : https://github.com/Eivll0m
# @File     : YD_dict.py
# @Software : PyCharm

from selenium import webdriver
from selenium.webdriver.common.desired_capabilities import DesiredCapabilities
import sys
reload(sys)
sys.setdefaultencoding('utf8')

class YoudaoDict:
    def __init__(self):
        self.url = 'http://fanyi.youdao.com'
        self.agent = 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36'
        self.dcap = dict(DesiredCapabilities.PHANTOMJS)
        self.dcap["phantomjs.page.settings.userAgent"] = self.agent
        self.service_args = []
        self.service_args.append('--load-images=no')  ##关闭图片加载
        self.service_args.append('--disk-cache=yes')  ##开启缓存
        self.service_args.append('--ignore-ssl-errors=true')  ##忽略https错误
        self.browser = webdriver.PhantomJS('D:\Program Files\phantomjs-2.1.1-windows\bin\phantomjs.exe',service_args=self.service_args)

    def transTarget(self):
        browser = self.browser
        browser.get(self.url)
        browser.implicitly_wait(3)
        text = browser.find_element_by_id('inputOriginal')
        text.clear()
        while 1:
            key = str(raw_input('请输入您需要翻译的内容：'))
            if key == 'quit':
                browser.quit()
                exit()
            if key:
                break
        text.send_keys(key.decode('utf-8'))
        while 1:
            try:
                bro = browser.find_element_by_css_selector('#transTarget > p > span')
                break
            except:
                print '还未定位到元素!'
        return bro.text

if __name__ == '__main__':
    D = YoudaoDict()
    while 1:
        print D.transTarget()

运行效果：