scrapy笔记

scrapy 的命令行工具

查看所有命令 scrapy -h
查看帮助信息 scapy –help
查看版本信息 scrapy version
新建一个工程 scrapy startproject spider_name
构建爬虫 scrapy genspider name domain
查看当前项目内有多少爬虫 scrapy list
使用浏览器打开网页 scrapy view http://www.baidu.com
shell命令, 进入scrpay交互环境 scrapy shell http://baidu.com
命令用于直接运行创建的爬虫, 并不会运行整个项目 scrapy runspider 爬虫名称

你可能感兴趣的:(python)