python爬虫之selenium的安装使用

selenium是爬虫几大利器之一,他可以用来爬取一些使用requests库爬取不了的东西,它是打开一个浏览器,并且操作这个浏览器,使其爬虫过程拟人化,下面来介绍selenium的安装方法,这里以chrom浏览器为例子
1、安装selenium模块,在控制台输入pip install selenium
2、确保电脑安装了chrom,并且下载同版本的chromdrive.exe,并复制到python的目录里
python爬虫之selenium的安装使用_第1张图片
3、接下来就可以去试试selenium模块了,在代码里介绍相应的函数和用法

from selenium import webdriver
#导入selen包
brwser = webdriver.Chrome()
#加载和打开chrom浏览器
brwser.get('http://www.baidu.com')
#打开百度网页
inputs = brwser.find_element_by_css_selector('#kw')
#获取百度首页输入框
#此处用的为css选择器,除此之外还有
#brwser.find_element_by_class_name() class选择器
# brwser.find_element_by_id()   id选择器
#还有其他一些选择器,都类似于JavaScript的选择器
inputs.click()
#点击输入框
inputs.send_keys('python的selenium')
#向输入框中输入python的selenium
print(brwser.page_source)
#brwser.page_source可以获取网页源码
brwser.execute_script('window.open()')
#使用JavaScript代码,相当于在控制台输入window.open()
brwser.switch_to_window(brwser.window_handles[0])
#切换到第一个窗口
#brwser.window_handles[0]是获取浏览器当前窗口,返回为列表

在这里插入图片描述

python爬虫之selenium的安装使用_第2张图片

你可能感兴趣的:(python)