【开发环境配置】【Python爬虫】请求库的安装

请求库的安装

  • requests的安装
      • 1.pip安装
      • 2. 验证是否安装成功
  • selenium的安装
      • 1.pip安装
      • 2.验证是否安装成功
  • ChromeDriver的安装
      • 1.下载链接
      • 2.查看Chrome浏览器版本
      • 3.下载ChromeDriver
      • 4.环境变量配置
      • 5.验证安装

requests的安装

1.pip安装

无论是Windows、Linux还是Mac,都可以通过pip这个包管理工具来安装。在命令行界面中运行如下命令,即可完成requests库的安装:

pip3 install requests

这是最简单的安装方式,推荐使用这种方法安装。

2. 验证是否安装成功

打开命令行工具cmd,进入Python环境,输入import requests,没有报错则说明安装成功。

selenium的安装

Selenium是一个自动化测试工具,利用它我们可以驱动浏览器执行特定的动作,如点击、下拉等操作。对于一些JavaScript渲染的页面来说,这种抓取方式非常有效。

下面我们来看看selenium的安装过程。

1.pip安装

pip3 install selenium

2.验证是否安装成功

方法与安装requests库时的验证方法一样,打开cmd输入python,然后继续输入import selenium,没报错则说明安装成功。
【开发环境配置】【Python爬虫】请求库的安装_第1张图片

ChromeDriver的安装

前面我们成功安装好了selenium库,但是它是一个自动化测试工具,需要浏览器来配合使用,本节中我们就介绍一下ChromeDriver驱动的配置。
首先,下载Chrome浏览器。
随后安装ChromeDriver。只有安装ChromeDriver,才能驱动Chrome浏览器完成相应的操作。接下来,我们来安装ChromeDriver。

1.下载链接

官方网站

下载地址

2.查看Chrome浏览器版本

【开发环境配置】【Python爬虫】请求库的安装_第2张图片
这里我的Chrome版本是90.0。记住你们的Chrome版本号,因为选择ChromeDriver版本时需要用到。

3.下载ChromeDriver

打开ChromeDriver的官方网站,选择对应的版本号进行下载。
【开发环境配置】【Python爬虫】请求库的安装_第3张图片

4.环境变量配置

下载完成后,将ChromeDriver的可执行文件配置到环境变量下。
在Windows下,建议直接将ChromeDriver.exe文件拖到Python的script目录下,如图所示。
【开发环境配置】【Python爬虫】请求库的安装_第4张图片

5.验证安装

配置完成后,就可以在命令行下直接执行ChromeDriver命令了:
chromedriver
如果控制台有类似如下图所示的输出,则说明ChromeDriver的环境变量配置好了。
【开发环境配置】【Python爬虫】请求库的安装_第5张图片
随后再在程序中测试。执行如下Python代码:

from selenium import webdriver

driver = webdriver.Chrome()
driver.get("https://www.baidu.com")

driver.find_element_by_id("kw").send_keys("selenium")
driver.find_element_by_id("su").click()

运行之后,如果弹出一个空白的Chrome浏览器,则说明所有的配置都没有问题。如果出现闪退情况,可能是ChromeDriver版本与浏览器版本不兼容,请更换ChromeDriver版本。
【开发环境配置】【Python爬虫】请求库的安装_第6张图片

你可能感兴趣的:(工具,python,selenium)