爬虫学习笔记(三)

安装selenium

在下载前先要确定自己的chrome的版本号,在浏览器的帮助->关于chrome可以看到。

安装chromedriver

爬虫学习笔记(三)_第1张图片
登录
https://sites.google.com/a/chromium.org/chromedriver/downloads
可能国内用户无法登陆
爬虫学习笔记(三)_第2张图片
下载安装
爬虫学习笔记(三)_第3张图片
然后将.exe文件放到chrome的安装文件中,chrome安装路径我的是:C:\Users\Atticus\AppData\Local\Google\Chrome,可以在桌面选中chrome右击打开文件位置来找。放好后将这个路径添加到环境变量中,win10的话直接搜索环境变量如下:
爬虫学习笔记(三)_第4张图片
打开后选择环境变量打开
爬虫学习笔记(三)_第5张图片
然后选择path打开,注意是系统变量的path,然后添加进去就ok了。

安装selenium

安装比较方便,直接pip install selenium就好了。
在安装时要注意,如果电脑上有多个版本python(比如python3.x、python2.x、anaconda自带的python等等)要选对pip来安装,我由于工作需要,python3版本有64位跟32位,还有anaconda的python,所以直接用pip install selenium安装会默认安装到python3的64位中。
由于平常一直都是用的anaconda,所以又在anaconda中安装了下,我的方法是pip show selenium找到刚才安装的库路径:c:\users\Atticus\appdata\local\programs\python\python64\lib\site-packages
然后直接找到selenium库的文件夹cope到anaconda安装目录中C:\Users\Atticus\Anaconda3\Lib\site-packages文件夹下。

试用selenium

from selenium import webdriver

browser = webdriver.Chrome()
browser.get("http://www.baidu.com")

->>> runfile(‘F://spyder/selenium_test.py’, wdir=‘F://spyder/selenium_test’)

会弹出chrome的窗口,并显示chrome正受到自动测试软件的控制。
爬虫学习笔记(三)_第6张图片

利用selenium登陆163邮箱

import time
from selenium import webdriver
#from selenium.webdriver.common.keys import Keys


browser = webdriver.Chrome()
url = 'http://mail.163.com/'
browser.get(url)
time.sleep(3)

browser.maximize_window()#打开网页窗口

time.sleep(5)

browser.switch_to.frame(0)#找到邮箱账号登录框对应的iframe,由于网页中iframe的id是动态的,所以不能用id寻找

email = browser.find_element_by_name('email')#找到邮箱账号输入框

email.send_keys('[email protected]')#将自己的邮箱地址输入到邮箱账号框中
    
password = browser.find_element_by_name('password')#找到密码输入框
    
password.send_keys('******')#输入自己的邮箱密码
    
login_em = browser.find_element_by_id('dologin')#找到登陆按钮
    
login_em.click()#点击登陆按钮
      
time.sleep(10)

IP相关知识

学习自:
https://blog.csdn.net/weixin_43720396/article/details/88218204

你可能感兴趣的:(爬虫,python)