webscraper-如何爬取某列表下项目的详情内容?

webscraper做为chrome的插件爬虫工具,不仅可以当前页面的内容爬取,还有很多种方式进行数据组合爬取。这篇主要是讲如何通过 link的方式组合爬取数据。

关于如何安装及使用webscraper请看:利用webscraper插件来爬数据

一、建立link链接项目

例如:爬取豆瓣电影周榜单的电影详细数据。

1、创建爬虫第一级页面


2、创建link跳转页面

3、创建 link跳转后的页面爬取的内容

二、创建爬取数据的细项


成功爬取到的数

你可能感兴趣的:(webscraper-如何爬取某列表下项目的详情内容?)