Python爬虫实战，requests模块，Python爬取网易云歌曲并保存本地

前言

今天给大家简单演示的爬取了一下某易云歌曲的排行榜信息,最后将音乐保存到本地

排行榜信息

开发工具

Python版本： 3.6.4

相关模块：

requests模块

re模块

os模块

环境搭建

安装Python并添加到环境变量，pip安装需要的相关模块即可。

文末福利（python学习干货总结）的详情在往期文章末尾：源码及学生党福利！评论区留言获取

思路分析

本文以爬虫某易云音乐，讲解如何采集某易云音乐抓取歌曲

要爬取的部分歌曲如下图所示:

部分歌曲

提取我们歌曲页面数据

浏览器中打开我们要爬取的页面
按F12进入开发者工具，查看我们想要的数据在哪里
这里我们需要歌曲页面数据就可以了

页面数据

代码实现：爬虫蕞基本流程

1.发送请求
2.获取数据
3.解析数据
4.保存数据

伪装

headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
url = 'https://music.163.com/discover/toplist?id=3778678'

1.发送请求

response = requests.get(url=url, headers=headers)

2.获取数据

print(response.text)

3.解析数据

info_list = re.findall( 'lio(.*?)'，html_data)
for music, title in result:
    music_url = f'http://music.163.com/song/media/outer/url?id={music}.mp3'
    music_content = requests.get(url=music_url, headers=headers).content

4.保存数据

    with open(filename + title + '.mp3', mode='wb') as f:
        f.write(music_content)
        print(title)

结果展示

image.png