基于Python 大数据分析的网络舆情系统设计与实现

基于Python的网络舆情系统设计与实现

源码获取：https://www.bilibili.com/video/BV1Ne4y1g7dC/

系统主要就是针对手机行业文章进行抓取并分析统计，根据用户定义关键词在数据库中全文搜索匹配相应文章，然后给用户进行展示，为用户提供便利。

系统利用Python urllib对权威手机资讯网站进行网页抓取，然后用Python re包和正则表达式在网页中匹配到相关数据，再用Python w3lib.html去掉页面中臃肿的html标签。进行网页提纯，并利用MySQL进行存储。系统后台运用Python flask进行开发实现，前端则运用html、css、javascript、jquery进行开发并实现简单的页面交互。利用Python和Sublim工具对系统的页面和服务器进程编程和部署，系统主要是服务器端入手建立基本的前后调一体化流程。系统主要有自定义频道、自定义栏目（同时设置栏目关键词）、查看更多等功能，用户在栏目中查看根据关键词匹配到的文章列表。