Scrapy数据流转分析(一)

很多scrapy初学者经常在其他博客看到这张图:


Scrapy架构概览

这张图很清晰的展示了Scrapy中几个组件的关系以及一个请求是怎样从发起到结束的。Scrapy是怎么实现这样功能的呢(一个请求是如何从Schedule经过Downloader Middlewares跑到Downloader的)?本文将从源码入手分析上面这张图,欢迎各路大佬、萌新点评指正,谢谢!

你可能感兴趣的:(Scrapy数据流转分析(一))