JSONP导致无法爬取网页数据的记录

要爬的网站和原有方法

https://lakemead.water-data.com/index2.php
选择Average by Month并点击查询后会出现一个表格。想要爬取表格中的数据内容。
为此抓取网络接口。发现唯一长得比较像表格数据的请求,其响应和标头如下。
JSONP导致无法爬取网页数据的记录_第1张图片
在这里插入图片描述
其他请求都没有响应数据
在这里插入图片描述
于是研究下该sodar开头的请求的响应内容,发现也是比较特殊且不常见的数据,不是想要的表格内容。推测应该是页面的广告内容或者chrome自带的api返回的数据啥的。

你可能感兴趣的:(爬虫)