Python项目实战:爬虫学习,利用selenium浏览器来爬取

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

前言

相信大家在刚开始学习爬虫的时候都是用requests,BeautifulSoup这两种简单,基础的爬虫方式吧,这两种是非常符合我们刚入门的小伙伴学习的,因为简单易懂,容易我们消化,下面来了介绍一下用selenium利用浏览器来进行爬虫学习

导入第三方库

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第1张图片

 

打开浏览器

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第2张图片

 

学习从来不是一个人的事情,要有个相互监督的伙伴,工作需要学习python或者有兴趣学习python的伙伴可以私信回复小编“学习” 获取资料,一起学习

抓取索引页

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第3张图片

 

提取数据

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第4张图片

 

保存至文件夹

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第5张图片

 

遍历执行

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第6张图片

 

运行结果

Python项目实战:爬虫学习,利用selenium浏览器来爬取_第7张图片

 

转载于:https://my.oschina.net/u/4104998/blog/3033788

你可能感兴趣的:(Python项目实战:爬虫学习,利用selenium浏览器来爬取)