Windows7-64bit系统基于Python3.5.2爬虫框架Scrapy运行命令

[Command] [Scrapy-Windows]

  1. 创建项目(cmd模式下进入项目的目录):
scrapy startproject tutorial 
  1. 执行(cmd模式下 进入到项目的根目录):
scrapy crawl dmoz
  1. 在shell中尝试Selector(cmd模式下 进入到项目根目录下):
scrapy shell "http://www.dmoz.org/Computers/Programming/Languages/Python/Books/"

载入shell后 将得到一个response变量
3.1 输入:

response.body 

得到response的包体
3.2 输入:

response.headers 

得到response的包头
3.3 输入:

response.selector 

获取一个selector容器以及映射到response.selector.xpath()和response.selector.css() 的方法(shortcut: response.xpath()和response.css())

你可能感兴趣的:(Windows7-64bit系统基于Python3.5.2爬虫框架Scrapy运行命令)