爬虫实战十一、Selenium开发环境（Win10+Anaconda3）搭建

一、Selenium介绍

Selenium是一个用于Web应用程序测试的工具。Selenium测试直接运行在浏览器中，就像真正的用户在操作一样。支持的浏览器包括IE（7, 8, 9, 10,11），Mozilla Firefox，Safari，Google Chrome，Opera等。这个工具的主要功能包括：测试与浏览器的兼容性——测试你的应用程序看是否能够很好得工作在不同浏览器和操作系统之上。测试系统功能——创建回归测试检验软件功能和用户需求。支持自动录制动作和自动生成 .Net、Java、Perl等不同语言的测试脚本。

二、Selenium安装（以谷歌浏览器为例）

2-1、安装selenium

pip install selenium

2-2、下载对应浏览器版本的驱动程序

谷歌浏览器：chromedriver

下载对应版本：

图片.png

查看谷歌浏览器版本：

chrome://version/

图片.png

注意：针对Linux等服务器没有安装浏览器的情况，可以下载无头浏览器驱动

无头浏览器驱动下载地址

2-3、将驱动放在Python安装路径的Script文件夹下

图片.png

2-4、Selenium测试使用

pycharm编写以下脚本，直接运行

# -*- coding: utf-8 -*-
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.support.wait import WebDriverWait
import time

browser = webdriver.Chrome()
try:
    browser.get("https://www.baidu.com")
    input = browser.find_element_by_id("kw")
    input.send_keys("Python")
    input.send_keys(Keys.ENTER)
    wait = WebDriverWait(browser, 10)
    wait.until(EC.presence_of_element_located((By.ID, "content_left")))
    print(browser.current_url)
    print(browser.get_cookies())
    print(browser.page_source)
    time.sleep(10)
finally:
    browser.close()

查看结果

图片.png