python爬虫框架Scrapy

爬虫框架Scrapy

• Scrapy简介
• 第一个Scrapy应用
• Scrapy核心概念
• Scrapy Spider（爬虫）
• Scrapy Request（请求）
• Scrapy Response（响应）
• Scrapy Item（数据项）
• Scrapy Pipeline（管道）
• Scrapy Middleware（中间件）
• Scrapy Downloader Middleware（下载器中间件）
• Scrapy Spider Middleware（Spider中间件）
• Scrapy Item Pipeline Middleware（管道中间件）
• Scrapy Selector（选择器）
• Scrapy Downloader（下载器）
• Scrapy Scheduler（调度器）
• Scrapy Crawl（爬取）
• Scrapy 数据存储
• Scrapy 数据存储到数据库
• Scrapy 数据存储到文件
• Scrapy 数据导出