PyCharm创建scrapy项目

 

1、新建Python项目，如 “Demo”

 

2、默认设置

（1）File → Default Settings → Project Interpreter

（2）选择Python安装目录下的系统Interpreter

注意区分Python解析器、PyCharm解析器和项目解析器，都是python.exe只是Package路径不同

 

（3）点“+”增加Scrapy包

  

 

 

3、生成Scrapy框架结构

（1）PyCharm → Terminal

（2）输入指令 “scrapy startproject module”，其中module为模块名，如Find

 

（3）框架结构如图

    1）scrapy.cfg 框架的基本设置

    2）settings.py 用户的相关设置

    3）spiders 用户自己实现的spider文件夹

    4）items.py 数据条目

    5）pipelines 管道

 

4、说明

Interpreter路径选择为PyCharm或Project所属的python.exe时，Terminal指令如下：

（1）cd D:/Demo/venv/Lib/site-packages

（2）scrapy startproject Find

（3）剪切文件夹D:/Demo/venv/Lib/site-packages/Find至D:/Demo目录下