scrapyd部署到服务器

1、首先把自己的scrapy项目上传到阿里云服务器

2、修改scrapy.cfg 文件

[deploy:设置部署名称tencent]

取消注释url行

3、命令窗口输入：scrapyd-deploy -l     启动服务，可以看到我们设置的部署名称

4、执行打包命令： scrapyd-deploy 部署名称 -p 项目名称

scrapyd-deploy tencent -p Tencent

此时，scrapy项目已经打包成功

5、进入scrapyd的dbs 和 eggs目录可以看到

6、此时，就可以远程开启爬虫项目

curl http://localhost:6800/schedule.json -d project=scrapy项目名称 -d spider=爬虫名称

开启成功