python实现视频音频同步
原理
视频信息： 帧率(秒/帧) 视频时长= 总帧数/帧率
音频播放流程:
1.使用opencv来播放视频画面(毫秒/张)
2.使用moviepy来进行视频音频提取
3.使用playsound2来进行播放音频
音频同步过程：
1.利用threading开启视频播放的子线程和音频播放的子线程，利用多任务并发操作实现音画一起播放
2.音画时间同步优化
由于当前程序执行的时间和声音是同步的，但是视频却是不同步的，只需要对视频进行控制即可。
sleepTime = zhen/rate - time.time() + startTime
当前总帧数/帧率 = 视频播放时间
视频播放时间-当前程序执行时间 + 程序开始读取的时间 = 视频延迟
一. 使用OpenCV + 视频库 + 音频库 + 多线程
获取帧率
import cv2
cap = cv2.VideoCapture("视频.mp4")
# 获取视频基本信息
fps = int(cap.get(cv2.CAP_PROP_FPS)) # 帧率(秒/帧)
cfps = cap.get(cv2.CAP_PROP_FRAME_COUNT) # 总帧数
# fps = cap.get(5)
print(f"视频帧率 = {fps},视频总帧数 = {cfps}")
音频提取
from moviepy.editor import VideoFileClip
voide = VideoFileClip("视频.mp4")
voide.audio.write_audiofile("视频.mp3")
多线程实现音频,视频同步播放
import cv2
import threading
import time
from playsound2 import playsound
# 先播放一秒，如果当前时间对不上，视频就等一下，等音频跟上再继续播放
def video():
cap = cv2.VideoCapture("视频.mp4")
rate = cap.get(5) # 读取视频帧率
startTime = time.time()
while cap.isOpened():
ret, frame = cap.read()
if ret:
zhen = cap.get(1) # 获取当前帧数
frame = cv2.resize(frame, (1080, 640))
cv2.imshow('frame', frame)
cv2.waitKey(1) # 等待1毫秒 （1秒=1000毫秒）
sleepTime = zhen/rate - time.time() + startTime
if sleepTime > 0: # 播放时间快了就等一下
time.sleep(sleepTime)
def music():
playsound("视频.mp3")
vd = threading.Thread(target=video)
mc = threading.Thread(target=music)
vd.start()
mc.start()
二. 使用flask实现视频播放
1.使用pycharm创建flask项目
2在static文件夹下存放 视频.mp4 文件
3.templates文件夹下,创建 movie.html 文件
DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<title>电影title>
<style>
body{
background-color: black;
}
.box{
margin: auto;
width: auto;
height: auto;
align-content: center;
position: absolute;
top: 50%;
left: 50%;
transform: translate(-50%,-50%);
}
style>
head>
<body>
<div class="box">
<video src="./static/{{ movie }}" controls="controls" autoplay="autoplay" width="1200px" height="900px" >视频无法播放时显示的内容video>
div>
body>
html>
4.app.py文件
from flask import Flask, render_template
app = Flask(__name__)
@app.route('/')
def hello_world():
return render_template("movie.html", movie="视频.mp4")
if __name__ == '__main__':
app.run()
# 启动该文件即可
将在控制台看见该网址: http://127.0.0.1:5000 浏览器访问即可
三. 使用Pyside6
1. 使用pyside6创建窗体
2. 使用多媒体组件
3. 利用多媒体组件播放视频和音频即可
核心代码如下
# 注意请先去学习pyqt5
player = QMediaPlayer(self) # 创建多媒体播放对象(窗口为自己)
audioOutput = QAudioOutput() # 创建音频播放对象
# 视频播放部分 --将开启一个进程进行视频播放
player.setSource(r"{}".format(filename))
player.setVideoOutput(self.ui.videowidget) # 链接窗体对象
# 音频部分播放 --将开启一个进程进行音频播放
setAudioOutput(self.audioOutput) # 链接窗体对象
setSource(r"{}".format(filename))
audioOutput.setVolume(10) # 音量
player.start()