python爬虫教程:windows下搭建python scrapy爬虫框架步骤

在本文内容里小编给大家分享的是关于windows下搭建python scrapy爬虫框架的教学内容,需要的朋友们学习下。
网络上现有的windows下搭建scrapy教程都比较旧,一般都是咔咔咔安装一堆软件,太麻烦,这是因为scrapy框架用到好多不同的模块,其实查阅最新的官网scrapy文档,在windows下搭建scrapy框架,官方文档是建议使用集成包的,以免安装太过复杂而出现问题,首先百度scrapy,就可以找到scrapy的官方文档

python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第1张图片
1、找到windows下的框架安装的文档教程,这里建议我们安装Anaconda或者Miniconda集成包,下面我选择安装Miniconda安装包来安装scrapy框架python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第2张图片
2、百度Miniconda python集成安装包,根据自己的python版本和windows版本选择对应的安装包下载即可python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第3张图片
3、下载完成后进入安装界面,全程下一步即可python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第4张图片
4、在cmd窗口中用conda list 命令检验conda是否安装成功python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第5张图片
5、如果检验命令无效,检查下环境变量里是否有正确的读取路径,如果还是不行,尝试重新安装python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第6张图片
6、使用 conda install -c conda-forge scrapy 命令安装scrapy框架python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第7张图片
7、等待框架的各个组件下载安装完成,安装界面很炫酷哦
等待框架的各个组件下载安装完成,安装界面很炫酷哦
8、最后一步,使用 scrapy startproject tutorial 命令生成scrapy爬虫模版,然后就可以根据文档对scrapy爬虫模版进行改写来完成我们自己的网络爬虫了,大功告成!!!python爬虫教程:windows下搭建python scrapy爬虫框架步骤_第8张图片
最后给大家推荐一个资源很全的python学习聚集地,[点击进入],这里有我收集以前学习心得,学习笔记,还有一线企业的工作经验,且给大定on零基础到项目实战的资料,大家也可以在下方,留言,把不懂的提出来,大家一起学习进步
总结:以上就是关于在WIN下安装python爬虫框架的步骤教学

你可能感兴趣的:(python爬虫教程)