兄弟们,愚人节快乐啊!
今天你被调戏了吗?
下班无聊到处浏览视频,终究还是来到了这个地方,不愧是它,质量杠杠的!于是我直接准备用Python把JK妹纸都给下载下来!
不是我不愿意讲啊,讲了过不了,但是各位要相信我,确实杠杠的!
心动不如行动 ,咱们直接开整,完事了喊上表弟一起看~
开发环境
这里咱们安装Python3 ,推荐3.6-3.8,编辑器还是pycharm,但是可以下载pycharm 2021 ,新版本自带汉化插件,直接安装就可以汉化了。
对于不会英语的兄弟们来说简直是福音呐!
模块
这里本次用到的两个第三方模块需要pip安装一下
requests # 数据请求模块
tqdm #进度条配置
没有软件,不会安装软件,不会安装模块、报错了等等,可以看我主页置顶往期文章。
或者主页左侧扫二维码
浅浅的给大家展示一下下载完的一个视频
表弟:呸,就一个?就这就这?能不能多放点!
pa虫的步骤讲了这么多遍,不知道各位记住了没有~
首先咱咱们先打开目标网页然后去搜索自己喜欢的视频
声明一下,我只说怎么去下载,至于怎么进这个网站,这个不是我能教的,大家自行百度,我有点慌~
我们还是不说这个了,说回搜索咱们喜欢的视频,比如
咳咳,不要在意我搜的啥,这不是重点!
然后我们以这个视频为例,咱们还是素一点。
咱们点开视频,然后按 F12 打开开发者工具,然后刷新网页,去找到我们的数据包内容。
刷新之后它会慢慢的加载数据包,咱们可以在里面找到很多内容,我就不详细写了,大家可以看我这个视频,详细的步骤都录下来了。
听说这个地球上最大视频网站上的JK小姐姐视频质量很高,让我们用python下载下来看看!
为啥不写了呢,主要是写太多了,大家也不喜欢看,只喜欢看代码,害~
导入模块
这是所有需要用到的模块,前面没讲需要安装的都是内置模块,不需要安装。
import requests # 数据请求模块
import re # 正则表达式模块
import json # 数据类型处理模块
from tqdm import tqdm #进度条配置
import os # 处理文件和目录
发送请求获取数据
headers = {
'cookie': 'VISITOR_INFO1_LIVE=9qZVrzB27uI; PREF=f4=4000000&tz=Asia.Shanghai; _ga=GA1.2.621834420.1648121145; _gcl_au=1.1.1853038046.1648121145; NID=511=Zc1APdmEbCD-iqVNVgI_vD_0S3LVI3XSfl-wUZEvvMU2MLePFKsQCaKUlUtchHSg-kWEVMGOhWUbxpQMwHeIuLjhxaslwniMh1OsjVfmOeTfhpwcRYpMgqpZtNQ7qQApY21xEObCvIez6DCMbjRhRQ5P7siOD3X87QX0CFyUxmY; OTZ=6430350_24_24__24_; GPS=1; YSC=0E115KqM_-I; GOOGLE_ABUSE_EXEMPTION=ID=d02004902c3d0f4d:TM=1648620854:C=r:IP=47.57.243.77-:S=YmZXPW7dxbu83bDuauEpXpE; CONSISTENCY=AGDxDeNysJ2boEmzRP4v6cwgg4NsdN4-FYQKHCGhA0AeW1QjFIU1Ejq1j8l6lwAc6c-pYTJiSaQItZ1M6QeI1pQ3wictnWXTOZ6_y8EKlt0Y_JdakwW6srR39-NLuPgSgXrXwtS0XTUGXpdnt4k3JjQ',
'referer': 'https://www.youtube.com/results?search_query=jk%E7%BE%8E%E5%A5%B3',
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/99.0.4844.84 Safari/537.36'
}
url = 'https:///watch?v=ImoXcSpR_io'
# 网站自己补全一下(提示:地球上最大的视频网站,不知道的百度)
response = requests.get(url=url, headers=headers)
print(response.text)
匹配json数据
json_str = re.findall('var ytInitialPlayerResponse = (.*?);var', response.text)[0]
json字符串转变为字典
json_data = json.loads(json_str)
提取视频链接
video_url = json_data['streamingData']['adaptiveFormats'][0]['url']
提取音频链接
audio_url = json_data['streamingData']['adaptiveFormats'][-2]['url']
提取标题
title = json_data['videoDetails']['title']
替换掉标题当中的空格
title = title.replace(' ', '')
替换掉标题当中的不合法字符
title = re.sub(r'[\/:|?*"<>]', '', title)
print(video_url)
print(audio_url)
print(title)
向视频链接发送请求
video = requests.get(video_url, stream=True)
获取视频大小
file_size = int(video.headers.get('Content-Length'))
初始化进度条大小
video_pbar = tqdm(total=file_size)
开始保存视频
with open(f'{title}.mp4', mode='wb') as f:
# 把视频分成 1024 * 1024 * 2 为等分的大小 进行遍历
for video_chunk in video.iter_content(1024*1024*2):
# 写入数据
f.write(video_chunk)
# 更新进度条
video_pbar.set_description(f'正在下载{title}视频中......')
# 更新进度条长度
video_pbar.update(1024*1024*2)
# 下载完毕
video_pbar.set_description('下载完成!')
# 关闭进度条
video_pbar.close()
音频同理
audio = requests.get(audio_url, stream=True)
file_size = int(audio.headers.get('Content-Length'))
audio_pbar = tqdm(total=file_size)
with open(f'{title}.mp3', mode='wb') as f:
for audio_chunk in audio.iter_content(1024*1024*2):
f.write(audio_chunk)
audio_pbar.set_description(f'正在下载{title}音频中......')
audio_pbar.update(1024*1024*2)
audio_pbar.set_description('下载完成!')
audio_pbar.close()
使用FFmpeg进行合并
def merge(title):
ffmpeg = r'D:\Download\ffmpeg\bin\ffmpeg.exe -i ' + title + '.mp4 -i ' + title + '.mp3 -acodec copy -vcodec copy ' + title + '-out.mp4'
os.popen(ffmpeg)
merge(title)