大屏监控系统实战(9)-爬取所有博主实时投票票数并存数据库

一、概述

这一节的目标,因为投票网只显示博主的实时投票数,所以我们计划每隔五分钟去爬取投票网站,获取该时段的博主实时票数,并将该时段所有博主的票数持久化到数据库,为后续的大屏展示提供数据支撑。

投票网排名地址:http://m234140.nofollow.ax.mvote.cn/action/viewvotewxorderlist.html?voteguid=43ced329-3a4b-0a5d-a13c-f088cf8eafef

投票网的实时数据如下图所示:

大屏监控系统实战(9)-爬取所有博主实时投票票数并存数据库_第1张图片

共有201名博主的实时排名和当前票数,我们要获取的就是这些数据,并将这些数据保存到数据库中。

二、页面元素分析

打开f12对页面元素进行分析,可以非常明显地看到,所有的博主信息都在一个table标签的tbody中,每个博主就是一个tr标签,而tr下面又有三个td,分别对应了该博主的实时名次、博主序号加名字以及投票数。我们就是要获取这些信息并且存在数据库中。

大屏监控系统实战(9)-爬取所有博主实时投票票数并存数据库_第2张图片

你可能感兴趣的:(大屏监控系统实战)