【Python】记一次pip安装scrapy爬虫框架

一、准备（前提条件）：

1、电脑安装好了Python环境

2、电脑上安装了pip

3、确定电脑上安装的python环境的版本（python版本、python的位数）

二、安装

1、打开cmd 输入pip -install scrapy

2、如果出现Successfully install scrapy字样，恭喜你，说明你顺利安装成功了！

3、如果没有，而是像我这样不太幸运，怎么办呢？解决问题

（1）pip版本过低 

    由于我是不经常用python的，所以很久没有更新python相关的工具了，我这里就出现了版本过低的问题

如下图，提示如下：

You are using pip version 10.0.0b2, however version 18.0 is available.
You should consider upgrading via the 'python -m pip install --upgrade pip' command.

这里按照提示，运行'python -m pip install --upgrade pip更新pip版本

如上图，出现类似Successfully installed pip-18.0带有Successfully  xxxx的字样即为升级成功。

（2） Microsoft Visual C++ 14.0没有安装上

错误提示如下：

Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

根据在网上查询到的结果，scrapy是依赖于 Microsoft Visual C++ 14.0编译器，提示这个错误的原因，就是电脑没有安装上编译器。怎么办呢？当然是补安装啊。怎么安装呢？这不是提示了安装方法了吗？Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

如果你按照他的提示去做，那你就傻眼了，得安装几个g大小的C++开发工具。而且我看网上一些人的说法，似乎是安装了还得做另外的配置才能使用。

 我就在想，还有没有其他的安装方法呢？后来，忘了是在谷歌还是百度上查询到，安装Twisted包就行了

ps：Twisted是个什么东西？an event-driven networking engine.

Twisted下载地址：https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted

安装方式：

在cmd里运行pip install F:\python\Twisted-18.7.0-cp36-cp36m-win_amd64.whl 

这里的路径是你存放whl安装包的地方，注意修改

如果像我这样提示：Twisted-18.7.0-cp36-cp36m-win_amd64.whl is not a supported wheel on this platform.

应该就是下载的位数版本跟python版本位数不对，重新下载对应的版本就行

下载正确的版本，安装，提示Successfully installed Twisted-18.7.0类似字样则说明安装成功

重新运行pip install scrapy安装scrapy ，安装成功！

结束

三、总结：

        由于本次使用python的目的是想写个爬虫下载爬自己喜欢的一个音乐网站上的音乐，出于这样一个显得蛋疼的目的，scrapy框架安装得有点曲折，本来有点想放弃的，但是好在总是坚持下来了，尴尬，，，原谅我有点三分钟热度。

       总之，就是遇到问题，细心分析，多谷歌查一下，问下度娘，一般都能解决问题的。我们遇到的问题，多数别的优秀的开发前贤已经帮我们踩过坑了。感谢前贤们的无私分享，我写这篇博文，一个是为了做个笔记，同时也是为了能给遇到问题的道友一些帮助，我也希望大家，在自己有精力的前提下，多写点分享博客，利人利己。

       时间有限，排版有点乱（其实没有排版），见谅。