Pycharm下安装scrapy

1、先建立一个文件夹(test_Scrapy),用Pycharm打开,(用pycharm打开这个文件夹)
第一步先安装wheel
这里写图片描述

2、然后进入https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml去下载Twisted
https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
(scrapy依赖Twisted)

下载完成后,将Twisted包放入之前建立好的文件夹(test_Scrapy)(这点很重要)
然后在Terminal下安装

pip install Twisted‑18.7.0‑cp36‑cp36m‑win_amd64.whl
(这是Twisted的全部版本,在其中选择自己适用的版本下载)
(cp:python的版本号)
Twisted‑18.7.0‑cp27‑cp27m‑win32.whl
Twisted‑18.7.0‑cp27‑cp27m‑win_amd64.whl
Twisted‑18.7.0‑cp34‑cp34m‑win32.whl
Twisted‑18.7.0‑cp34‑cp34m‑win_amd64.whl
Twisted‑18.7.0‑cp35‑cp35m‑win32.whl
Twisted‑18.7.0‑cp35‑cp35m‑win_amd64.whl
Twisted‑18.7.0‑cp36‑cp36m‑win32.whl
Twisted‑18.7.0‑cp36‑cp36m‑win_amd64.whl
Twisted‑18.7.0‑cp37‑cp37m‑win32.whl
Twisted‑18.7.0‑cp37‑cp37m‑win_amd64.whl

3、安装Scrapy
同理第二步先下载scrapy包,然后安装
Scrapy‑1.5.0‑py2.py3‑none‑any.whl

 pip install Scrapy‑1.5.0‑py2.py3‑noneany.whl

4、下载完成后,先去验证一下是否安装成功
在Terminal中输入

scrapy -v

结果如下
Pycharm下安装scrapy_第1张图片

5、安装成功了,但是当启动项目时一般会报错:没有win32模块
下载 win32模块

pip install pypiwin32

5、判断是否可以运行
在Terminal中输入

scrapy shell 

如下为部分运行结果
Pycharm下安装scrapy_第2张图片

ok~

你可能感兴趣的:(Python爬虫)