微信采集阅读和赞的那个key怎么获取,客户端参考

大规模批量采集微信公众号文章

记录一下今天的成果,确实可以抓取到,配置完成之后1分钟可以抓取100+(后来优化了一下,可以达到300左右)片吧,我没有用多进程,如果是多进程的话,效率会翻倍的增加。

抓取思路

  网上的方法大约有三种

  第一:通过搜狗微信  搜索入口 ,模拟搜索抓取,效率比较低,而且还有验证码,反爬虫机制;建议放弃。

  第二:通过抓包工具截取htts请求的数据包,意思就是使用pc端微信登录,监听公众号的推送消息,每当监听到推送之后就把数据获取下来,缺点是无法获取以前的历史记录

  第三:通过微信公众号的后台获取cookie和token来抓取;缺点是需要注册一个公众号,而且token有过期时间

第四:万能key或者公众号key抓取 ,key有效时间为两个小时,每个微信号一天最多可以抓取1200次,优势只要解决key的自动获取就非常方便自动。

以上几种是网友提供的思路,都可以实现,但同时也都有缺点。

以下是我用第三种方法实现的;

使用php,node.js都可以抓取;

  1.注册微信公众,登录之后选择新建素材,然后点击超链接,搜索任意公众号,保存该公众号的fakeid,同时保存cookie和token,

  2.在https请求中 设置header的cookie为第1步保存的cookie,参数是token,发送https请求,你会惊奇的发现已经拿下某公众号的历史记录 (默认40条);

  3.然后根据列表里面的内容链接地址,再获取具体的网页内容;

  4.把获取的内容存到本地的数据库中

总结:以上思路仅供参考,具体实现需要靠自己;

提示:源码收费,还请谅解;

------------------------------------------------------------------------------

鉴于有人咨询了一下抓取程序价格,我在这里声明一下:

抓取的功能没有你想的那么智能

1.需要指定公众号(可以指定多个,没有上限)

2.需要设置token以及对应的cookie参数;

3.抓取速度,大约一分钟可以抓取300左右(视网络,内容多少而定)

看到这里,你还没有放弃,那么看来你是真相要了。

可以一次性需求

可以购买源码,因为源码是我自己开发方便我自己阅读用的,一般要买源码的都需要做一些修改和开发,视情况而定

如需详细联系 请加 qq 958230839  另外我们支持全网抓取和大规模抓取 包括阅读数 好看数和评论数

你可能感兴趣的:(微信采集阅读和赞的那个key怎么获取,客户端参考)