前嗅ForeSpider脚本教程-数据抽取脚本实战教程

阅读更多

今天,小编给大家带来的教程为:前嗅ForeSpider脚本教程-数据抽取脚本实战教程的,应用场景,数据在源码的html标签里写脚本。具体内容如下:

 

一.应用场景

当所需要的数据字段大部分需要配置脚本时,可将所有字段的抽取统一放在数据抽取脚本中。

可能用到的类:DOM、EXTRACT。

配置方法:选中数据抽取,点击“脚本窗口”,点击创建按钮。即可在新建的代码框内输入代码。前嗅ForeSpider脚本教程-数据抽取脚本实战教程_第1张图片

 

二.数据在源码的html标签里写脚本

目标数据可在源码中查找到。在目标网页右键,选择“查看源代码”,键盘点击“ctrl+F”,查找目标数据所在位置。

1.数据需要循环

场景:目标数据集中分布,如评论数据。

2.数据不循环

场景:目标数据分散分布。

示例:获取聚美优品网,关键词搜索之后的列表页的页数。前嗅ForeSpider脚本教程-数据抽取脚本实战教程_第2张图片查看源码,得知在源码中的位置。前嗅ForeSpider脚本教程-数据抽取脚本实战教程_第3张图片

由图可知,页码所在

的class属性值唯一,所以可以根据class属性值找到该

脚本实例:

 

var div = DOM.FindClass(“head_pageInfo”);  //获取目标数据节点位置

var num=DOM.GetTextAll(div).Middle("/",页).ToInt();  //获取目标数据,并转为int型

 

你可能感兴趣的:(前嗅,数据采集,ForeSpider数据采集,采集教程,脚本教程)