scrapy爬虫框架的使用③—调试输出和级别

scrapy shell调试

1 安装ipython

pip install ipython

2 使用

安装完成后,打开命令窗口,输入命令:

scrapy shell www.baidu.com

scrapy日志文件

from scrapy.utils import log

LOG_LEVEL = 'WARNING' #日志级别 #必须大写
LOG_FILE = './log.log' #日志名称
scrapy爬虫框架的使用③—调试输出和级别_第1张图片

运行用log:

log.logger.warning()
scrapy爬虫框架的使用③—调试输出和级别_第2张图片

可以改变级别。

你可能感兴趣的:(scrapy框架学习,scrapy,爬虫,python)