scrapy 使用 -o 命令输出json文件

json文件空白的原因可能的原因有:

1. settings.py文件中是否启用了pipeline, ROBOTSTXT_OBEY = False, 是否修改user-agent
2. 如果是普通的模板, 注意return item和return items,前者只能返回一个item, 最好使用yield item
3. 如果是crawlspider,检查rules中的Rule是否有callback, callback的值为解析函数名称或者解析函数名称字符串(个人感觉字符串比较好,直接写解析函数名称在pycharm中提示unresolved reference,官方文档的例子也是使用解析函数名称的字符串,callback=“parse_item”)

json文件中文乱码:
scrapy crawl spider -o xxx.json 如果输出文件中需要显示中文,需要在setting.py文件中设置
FEED_EXPORT_ENCODING = ‘utf-8’