奇伢爬虫项目

项目地址：https://github.com/qiyaTech/javaCrawling

项目介绍：奇伢爬虫基于spring boot 、 WebMagic 实现 微信公众号文章、新闻、csdn、info等网站文章爬取，可以动态设置文章爬取规则、清洗规则，基本实现了爬取大部分网站的文章。

项目截图：

欢迎关注我的公众号：【菜鸟要飞】 ，面试宝典、学习路线、源码分享等等你来学