CSDN什么时候更新排名,爬虫项目告诉你

编写目的

因为好奇心,所以写代码。到底csdn什么时候回更新自己的排名?不妨写一个爬虫软件,定时爬数据,查看什么时候发生了变化。

详细过程

可以使用java爬虫,但是java爬虫写多了没什么意思,玩一下node.js爬虫。
首先给源码地址https://github.com/smile-yan/node-csdn
晚上启动,一直到第二天起床后就可以看到效果如下:

可以看出,csdn更新排名时间就是早上这个时间点了(7点后几分钟内)。
CSDN什么时候更新排名,爬虫项目告诉你_第1张图片
而关于如何使用node.js爬虫csdn,可以参考这个例子https://blog.csdn.net/smileyan9/article/details/99687536

总结

基本思路很简单,定时爬虫,比较排名是否发生了变化,只要发生了变化就进行alert操作。当然,为了不被csdn封了自己的IP地址,不能够太频繁爬虫(我是每分钟爬虫一次)。
这个应该是既 node.js 爬虫的简单例子(查看CSDN访客,排名,分数) 之后另外一个非常简单的爬虫例子。

Smileyan
2019年8月21日 17:45

你可能感兴趣的:(我的爬虫记)