利用selenium + python 打开网页

利用selenium + python 打开网页

其中需要注意的问题:

1.解决selenium.common.exception.WebDriverException:Message:'chromedriver' executable needs to be in Path

解决办法:没有下载驱动,

Chrome驱动下载地址:http://chromedriver.storage.googleapis.com/index.html

一定要下载Chrome浏览器对应版本

2.selenium中打开Chrome会出现“Chrome正在受到自动测试软件的控制”

解决办法:

option = webdriver.ChromeOptions()
option.add_argument('disable-infobars')
driver = webdriver.Chrome(executable_path=chrome_driver,chrome_options=option)

3.ModuleNotFoundError: No module named 'selenium'

解决办法:

安装selenium,利用pip install -U selenium命令

示例代码:

#!/usr/bin/env python
from selenium import webdriver
import requests
option = webdriver.ChromeOptions()
option.add_argument('disable-infobars')
chrome_driver = '/Users/admin/Downloads/chromedriver'
driver_recom=webdriver.Chrome(executable_path=chrome_driver,chrome_options=option)
driver_recom.get("https://blog.csdn.net/")
print(driver_recom.title)
driver_recom.get("https://www.baidu.com")
driver_recom.close()

注意点

1.其中chrome_driver = '/Users/admin/Downloads/chromedriver'   的目录要替换成你下载的驱动(解压后)chromedriver.exe的目录

2。如果是windows系统目录路径的前面要加上 字符,例如:

chrome_driver = r'C:\Users\2023\AppData\Local\Continuum\anaconda3\Lib\site-packages\selenium\webdriver\chrome\chromedriver.exe'

 

 

你可能感兴趣的:(网络爬虫)