基于 Scrapy 的租房信息爬虫

租的房子到期了,我用程序员的方式找到了新的住处。

想换租房子的来这找房子,不想换租房子的来学技术啦!

一个租房信息爬虫,基于 Scrapy,使用 Elasticsearch 提供存储和搜索功能,使用 Kibana 提供搜索和分析界面,使用 Redis 去重,使用 Docker 一键部署。

目前聚合了链家,58同城,豆瓣,可以先看图片再找相应的房子描述,也可以根据关键字搜索房源,一个关键字搜出三个网站(会越来越多)的结果,具体还能玩出什么花样就看你们的了![奸笑]

租房信息爬虫

https://github.com/kezhenxu94/house-renting

如果你觉得有用,请给个 star Õ_Õ

你可能感兴趣的:(基于 Scrapy 的租房信息爬虫)