爬虫学习笔记-scrapy爬取汽车之家

1.终端运行scrapy startproject scrapy_carhome,创建项目

爬虫学习笔记-scrapy爬取汽车之家_第1张图片2.接口查找

爬虫学习笔记-scrapy爬取汽车之家_第2张图片

3.终端cd到spiders,cd scrapy_carhome/scrapy_carhome/spiders,运行 scrapy genspider audi https://car.autohome.com.cn/price/brand-33.html

爬虫学习笔记-scrapy爬取汽车之家_第3张图片

 4.打开audi,编写代码,xpath获取页面车型价格列表

爬虫学习笔记-scrapy爬取汽车之家_第4张图片爬虫学习笔记-scrapy爬取汽车之家_第5张图片爬虫学习笔记-scrapy爬取汽车之家_第6张图片

5.运行项目,执行scrapy crawl audi

爬虫学习笔记-scrapy爬取汽车之家_第7张图片6.执行结果

爬虫学习笔记-scrapy爬取汽车之家_第8张图片

你可能感兴趣的:(爬虫,学习,笔记)