实战:基于Scrapy+Elasticsearch+Django搭建的分布式电影搜索

Just Downlink

实战:基于 scrapy + elasticsearch + django 搭建的分布式电影搜索
源码:https://github.com/GFigure/JustDownlink
网页链接:Just Downlink

  • 利用 scrapy 爬取知名电影网站的下载链接
  • 利用 elasticsearch 存储数据
  • 利用 django 搭建电影搜索界面

数据采集

  • 支持同步、异步数据存储至 Mysql 数据库
  • 支持 elasticsearch 数据存储
  • 支持 json 数据导出
  • 保存日志至 logs 目录

搜索界面

  • 搜索建议
  • 简化电影下载页面

电影网站

  • BT之家
  • 阳光电影
  • 电影天堂
  • 迅雷仓
  • 韩粉基地
  • 久久美剧
  • 6V电影网
  • LOL电影天堂
  • 龙部落
  • 美剧天堂
  • 电影首发站

你可能感兴趣的:(实战:基于Scrapy+Elasticsearch+Django搭建的分布式电影搜索)