爬虫工作量由小到大的思维转变---<第三十六章 Scrapy 关于CrawlSpider引发的议题>
前言:因为scrapy-redis里面有两个spider,一个basespider,一个crawlspider;有人分不清他们的区别;本文就来掰一掰他们的事;正文:`CrawlSpider`和`Spider`是两个不同的爬虫类,具有以下区别:1.`Spider`类:`Spider`是Scrapy中最基本的爬虫类。你可以从`scrapy.Spider`类派生出自定义的爬虫类。在基本的`Spider`