python爬取微博用户信息(一)—— 效果展示

有时,我们想要了解一个人,一般会通过ta的微博、朋友圈以及朋友的看法去了解。

特别是面对自己喜欢的明星,我们常常会浏览ta的微博,了解ta的动态。

那么,在大数据时代数据已经成为了不可缺少的一部分,获取数据的方法莫过于python

感兴趣的小伙伴可以收藏哦!


另外,关于本代码的效果展示以及教程,点击以下链接即可。

python爬取微博用户信息(二)—— cookie的获取方式以及configs中参数的设置

python爬取微博用户信息(三)—— 创建MicroBlog类实例

python爬取微博用户信息(四)—— 爬取用户信息的功能函数

python爬取微博用户信息(五)—— os.sep函数、os.path.split() 、os.path.realpath()、os.path.isdir()、os.makedirs()用法

python爬取微博用户信息(六)—— 完整代码


下面,我就介绍一下我的项目效果以及文件结构。

目录

一、目标

二、效果展示

三、文件结构


一、目标

利用python爬取微博用户的个人信息,以及用户发布微博的数据。(切记,这里爬取的是公开的微博数据!!!)

并将其保存到本地。

我将会在后面的几篇文章展示我的教程,感兴趣的小伙伴可以关注哦!!!

二、效果展示

迪丽热巴为例:

1、控制台输出我们爬取到的用户数据:

python爬取微博用户信息(一)—— 效果展示_第1张图片

2、爬取到的数据我们将其存储到本地,文本内容以txt、csv形式存储,图片以图片的形式存储,存储到文件夹img中

csv文件:

python爬取微博用户信息(一)—— 效果展示_第2张图片

txt文件:

python爬取微博用户信息(一)—— 效果展示_第3张图片

img文件:

 python爬取微博用户信息(一)—— 效果展示_第4张图片

 

python爬取微博用户信息(一)—— 效果展示_第5张图片

三、文件结构

1、文件结构

python爬取微博用户信息(一)—— 效果展示_第6张图片

2、config.py

该文件为配置文件,一些参数可以在这里修改。

python爬取微博用户信息(一)—— 效果展示_第7张图片

3、MicroBlog.py

该文件中包含一些爬取微博数据的函数

python爬取微博用户信息(一)—— 效果展示_第8张图片

参考:

  • 爬取某个博主的微博信息: https://blog.csdn.net/weixin_40576260/article/details/79802297

你可能感兴趣的:(python,python,大数据,数据挖掘)