在linux系统创建部署scrapy爬虫项目

我的主机最近一直出问题,所有的python环境全在物理机上面,现在装新的第三方库总是容易出问题,所以我决定把环境放到虚拟机的环境中,然后存个快照,我的编译器是pycharm,scrapy不像django一样能够直接创建,所以在创建项目的时候不能在本地创建,遇到了问题,不过现在已经解决,如果你也有这种问题,可以根据我的步骤继续操作。

随意创建一个python的项目,但是注意选择好项目名字,最重要的是选择好远程linux上面的python环境,然后点击创建。

           在linux系统创建部署scrapy爬虫项目_第1张图片

 

在linux系统上面创建项目:python3 -m scrapy startproject ScrapySpider                                                                                      (注:因为我有两个python环境,所以我写的python3  -m,如果你有一个环境,就直接用python)

在右侧选择RemoteHost,然后找到你创建文件的文件夹,在上图中可以看到,然后右键,选择从这里下载,然后就可以同步到本地啦。

在linux系统创建部署scrapy爬虫项目_第2张图片

打开目录,就可以看到你的scrapy项目啦。这种方法非常适合个人使用,我比较推荐。

                                                            在linux系统创建部署scrapy爬虫项目_第3张图片

你可能感兴趣的:(Python)