Datewhale爬虫学习活动打卡——Task0环境安装

文章目录

  • 前言
    • 优化访问github的速度
    • 安装Anaconda
    • 安装ChromeDriver

前言

受疫情影响,教培行业颓靡,上班也没以前那么忙了。半年前主要学的是java,最近半年主要使用的是c++和python,由于还没上手过什么python项目,于是参加了这个活动练练手。可以用github和CSDN打卡,懒得用github了,遂打开了好久没有打开的markdown编辑器,翻了下之前学编程认识的小伙伴们的博客,倍感怀念。
这个学习活动是根据他人开源在github上的爬虫知识进行自学的,8天完成爬虫知识的学习。看了一下群里的打卡,还是大学生和研究生多,社畜默默流下了眼泪。
废话到此为止,今天是第一天Task00,完成环境的搭建。

优化访问github的速度

开源的资料链接:
Python爬虫编程实践
一开始就遇到了一件烦人的事,github的访问速度太慢了,于是参考了大神的做法,修改本地hosts文件,具体方法请去大神的文章里学习:
GitHub访问速度慢的一种优化方法

安装Anaconda

什么是anaconda?
Anaconda下载地址
Anaconda安装教程
完成。
Datewhale爬虫学习活动打卡——Task0环境安装_第1张图片

安装ChromeDriver

Selenium与ChromeDriver
Selenium 1是一个支持多种浏览器的浏览器自动化测试工具,通过使用它我们能够直接在浏览器中运行我们的测试,模拟用户的手动操作(通过注入js来实现)。
Selenium 2(WebDriver),它在上一代Selenium的基础上集成了WebDriver,而WebDriver是利用浏览器的原生API来进行浏览器操作的,从而获得了速度和稳定性的提升,我们可以使用Python来访问WebDriver API。
ChromeDriver是Chrome浏览器提供的驱动程序,是Chrome浏览器和selenium 2的桥梁,要想使用selenium 2来控制Chrome浏览器必须正确安装ChromeDriver。
ChromeDriver下载链接:
ChromeDriver Mirror
ChromeDriver安装教程:
selenium 安装与 chromedriver安装
安装完之后运行测试代码,结果正确,完成。
Datewhale爬虫学习活动打卡——Task0环境安装_第2张图片
Datewhale爬虫学习活动打卡——Task0环境安装_第3张图片
至此爬虫环境的搭建算是完成了,下一个阶段的学习是学习html和request,get的知识,算是小有基础吧,这次要了解的更深入一些。

你可能感兴趣的:(学习打卡)