pycharm 配置scrapy

1.首先创建scrapy 项目  以伯乐在线网站为例

首先找到目录创建 : 在F盘下的pachong文件夹里创建

win+r

pycharm 配置scrapy_第1张图片

回车 启动cmd 窗口

然后输入 F: 找到爬虫文件夹

cd pachong 进入爬虫 目录

输入 scrapy startproject bole  创建文件夹


pycharm 配置scrapy_第2张图片

创建成功后 在F盘下的pachong 文件夹下面 你就会发现有个bole文件夹

打开pycharm


pycharm 配置scrapy_第3张图片

在main.py里面配置 我们需要找到main.py所在的目录的父类

#coding:utf-8

fromscrapy.cmdlineimportexecute     #导入需要的包

importsys 

importos

#sys.path.append(os.path.abspath(__file__)) #找到main.py

#通过os.path.dimame 找到父类

#可以打印看一下

#py3 打印

#print (sys.path.append(os.path.dirname(os.path.abspath(__file__))))

sys.path.append(os.path.dirname(os.path.abspath(__file__))) 


pycharm 配置scrapy_第4张图片

execute(["scrapy","crawl","job"])    #最三个参数 对应自己创建项目的参数然后run 就会发现scrapy运行了


pycharm 配置scrapy_第5张图片



你可能感兴趣的:(pycharm 配置scrapy)