月薪50K程序猿花一周时间整理出的Python爬虫学习路线，太详细了

想用Python做爬虫，而你却还不会Python的话，那么这些入门基础知识必不可少。很多小伙伴，特别是在学校的学生，接触到爬虫之后就感觉这个好厉害的样子，我要学。但是却完全不知道从何开始，很迷茫，学的也很杂，下面就跟着小编一起来看看想用python来做爬虫到底需要学习哪些知识吧！

Python入门

1、基本知识、数据类型、流程控制。

人生苦短，快用Python

 

在这里还是要推荐下我自己建的Python开发学习群:301056051，群里都是学Python开发的，如果你正在学习Python ，小编欢迎你加入,大家都是软件开发党，不定期分享干货（只有Python软件开发相关的），包括我自己整理的一份2018最新的Python进阶资料和高级开发教程，欢迎进阶中和进想深入Python的小伙伴
 

2、函数

人生苦短，只用Python

3、用模块

人生苦短，快用Python

4、I/O基础

人生不短，也用Python

5、Linux基础

Linux基础

最后包管理和虚拟环境都要有所了解，怎么样，这些基础你都会了嘛！

 

web前端

当然光学了基础是远远不够的，我们要深入做爬虫，首先得了解这个东西是怎么做的了解清楚它的原理，那么web前端方面的学习是必不可少的，下面我们来了解一下。

1、标签

标签

2、样式

样式

3、JS语法

JS语法

4、jQuery

jQuery

5、Ajax

Ajax

6、bootstrap

bootstrap

前端部分不用涉及太深，只是学爬虫的话这些就完全够用了，俗话说“工欲善其事，必先利其器”，所以我们再把下面这些Python知识学完后，就可以毫无后顾之忧的来学习爬虫了。

Python进阶

1、面向对象

面向对象

2、装饰器、惰性器

 

 

装饰器、惰性器

3、高级模块

高级模块

4、 并发编程（多线程与多进程）

什么是进程、线程

多进程

多线程

 

 

Future实现多进程、多线程

5、并发编程（协程、异步IO）

 

协程、异步IO

好了，这些东西全部学会以后，就可以进行正式的爬虫学习了，在之后的学习路途中很多东西一看到就胸有成竹，想皮都皮不起来。

爬虫基础

学习爬虫，我们首先要了解什么是爬虫以及它的工作流程，知己知彼，方能百战百胜嘛。当然这些大家都知道的，废话不多说，先来看看爬虫基础知识点。

1、请求与响应

请求与响应

2、爬虫与反爬虫

爬虫与反爬虫

3、开发工具

开发工具

4、Urllib库使用详解与项目实战

 

Urllib库使用详解与项目实战

5、requests库安装使用与项目实战

requests库安装使用与项目实战

6、太多了看图

爬虫基础最后一弹

好了，如果只是想入个门的话，这些都差不多了，但我想每个学爬虫的小伙伴，都是想成为一个伟大的爬虫攻城狮的吧！来来来，让我们继续看看进阶学习方法。

爬虫进阶

1、爬虫框架实现

爬虫框架实现

2、破解反爬技术

破解反爬技术

3、代理池实现

 

代理池实现

4、模拟登陆

模拟登陆

5、pyspider框架

pyspider框架

爬虫高级部分

1、APP的抓取

APP的抓取

2、Scrapy框架

Scrapy框架

3、分布式爬虫实战

分布式爬虫实战

4、分布式爬虫部署

分布式爬虫部署

这些知识完全学会后，下一个爬虫大神就是你！