Scrapy输出CSV指定item的顺序

百度搜索出来的上的另一个回答,我用了一下,发现不行。于是从stackoverflow找到了一个更简洁的方法

1)在spiders中增加文件csv_item_exporter.py

fromscrapy.conf impor tsettings
fromscrapy.contrib.exporter import CsvItemExporter

classMyCsvItemExporter(CsvItemExporter):
    def__init__(self,*args,**kwargs):
        kwargs['fields_to_export'] = settings.getlist('EXPORT_FIELDS' )or None
        super(AvioCsvItemExporter,self).__init__(*args,**kwargs)

2)在settings.py中添加如下代码

FEED_EXPORTERS = {
    'csv' : 'tutorial.spiders.csv_item_exporter.MyCsvItemExporter'
}
# tutorial替换成你的project名

EXPORT_FIELDS = [
    'item1',
    'item2',
    'item3',
    'item4',
]

这个方法挺简单的,但是不是很喜欢,因为要再创建一个新文件,而实际上scrapy提供了pipelines.py来处理提取出来的item,还是应该利用原有的方法最好,今天暂时没空研究了,下次再说

附上链接
https://stackoverflow.com/questions/20753358/how-can-i-use-the-fields-to-export-attribute-in-baseitemexporter-to-order-my-scr/20758558#20758558

你可能感兴趣的:(Scrapy输出CSV指定item的顺序)