MFC使用OpenCV两种版本实现mp4文件的播放
这周由于工作涉及到图像处理，便学习了怎么使用MFC+OpenCV播放MP4文件。目前论坛上有两种方法播放mp4文件,一种是OpenCV2.多版本使用CvvImage类来显示图像，但是在OpenCV3.几版本后使用CvvImage就会出现很多的适配问题，得不偿失，这时我们将使用Mat的方法来显示图像的播放。话不多说，直接上干货！
OpenCV下载地址：https://opencv.org/releases/
1.使用CvvImage类来播放MP4文件，适用于OpenCV版本2.3——2.5，具体版本适配没挨个试。
开发环境：VS2019+OpenCV2.4.9
- 1.1 先到OPenCV官网下载对应版本,解压缩到自定义的文件夹。如图所示：
- 1.2 打开vs2019创建MFC项目，选择基于对话框。创建完成后进入界面，开发环境选择debug x64
- 1.3配置相应的环境，右击项目，属性，我们环境配置主要有三点，1是附加包含目录路径的设置，2是lib库的配置，3是dll库的配置，一步一步来。
首先是附加包含目录的设置，如图所示：
其中的文件路径就是你下载的OPenCV解压的路径。
然后是lib库的配置，先在链接器常规里添加lib库的附加库目录，然后在输入里填入我们需要的lib库。注意lib库文件都以xxxd.lib结尾，代表debug模式下静态库。
最后就是dll库的添加，在添加dll之前先运行程序，生成对应的x64文件夹。在x64文件夹中的debug文件夹下找到生成的exe文件，把我们所需要的dll文件拷贝到这个目录下。开发前的OPenCV环境配置完成。dll文件在下载解压的OpenCV文件夹中。
-
1.4 绘制MFC界面
界面如图，主要是一个picture control控件和button按钮
-
1.5添加CvvImage类
CvvImage.h
#pragma once
#ifndef CVVIMAGE_CLASS_DEF
#define CVVIMAGE_CLASS_DEF
#include "opencv.hpp"
#include CvvImage.cpp
#include "pch.h"
#include "CvvImage.h"
//
// Construction/Destruction
//
CV_INLINE RECT NormalizeRect(RECT r);
CV_INLINE RECT NormalizeRect(RECT r)
{
int t;
if (r.left > r.right)
{
t = r.left;
r.left = r.right;
r.right = t;
}
if (r.top > r.bottom)
{
t = r.top;
r.top = r.bottom;
r.bottom = t;
}
return r;
}
CV_INLINE CvRect RectToCvRect(RECT sr);
CV_INLINE CvRect RectToCvRect(RECT sr)
{
sr = NormalizeRect(sr);
return cvRect(sr.left, sr.top, sr.right - sr.left, sr.bottom - sr.top);
}
CV_INLINE RECT CvRectToRect(CvRect sr);
CV_INLINE RECT CvRectToRect(CvRect sr)
{
RECT dr;
dr.left = sr.x;
dr.top = sr.y;
dr.right = sr.x + sr.width;
dr.bottom = sr.y + sr.height;
return dr;
}
CV_INLINE IplROI RectToROI(RECT r);
CV_INLINE IplROI RectToROI(RECT r)
{
IplROI roi;
r = NormalizeRect(r);
roi.xOffset = r.left;
roi.yOffset = r.top;
roi.width = r.right - r.left;
roi.height = r.bottom - r.top;
roi.coi = 0;
return roi;
}
void FillBitmapInfo(BITMAPINFO* bmi, int width, int height, int bpp, int origin)
{
assert(bmi && width >= 0 && height >= 0 && (bpp == 8 || bpp == 24 || bpp == 32));
BITMAPINFOHEADER* bmih = &(bmi->bmiHeader);
memset(bmih, 0, sizeof(*bmih));
bmih->biSize = sizeof(BITMAPINFOHEADER);
bmih->biWidth = width;
bmih->biHeight = origin ? abs(height) : -abs(height);
bmih->biPlanes = 1;
bmih->biBitCount = (unsigned short)bpp;
bmih->biCompression = BI_RGB;
if (bpp == 8)
{
RGBQUAD* palette = bmi->bmiColors;
int i;
for (i = 0; i < 256; i++)
{
palette[i].rgbBlue = palette[i].rgbGreen = palette[i].rgbRed = (BYTE)i;
palette[i].rgbReserved = 0;
}
}
}
CvvImage::CvvImage()
{
m_img = 0;
}
void CvvImage::Destroy()
{
cvReleaseImage(&m_img);
}
CvvImage::~CvvImage()
{
Destroy();
}
bool CvvImage::Create(int w, int h, int bpp, int origin)
{
const unsigned max_img_size = 10000;
if ((bpp != 8 && bpp != 24 && bpp != 32) ||
(unsigned)w >= max_img_size || (unsigned)h >= max_img_size ||
(origin != IPL_ORIGIN_TL && origin != IPL_ORIGIN_BL))
{
assert(0); // most probably, it is a programming error
return false;
}
if (!m_img || Bpp() != bpp || m_img->width != w || m_img->height != h)
{
if (m_img && m_img->nSize == sizeof(IplImage))
Destroy();
/* prepare IPL header */
m_img = cvCreateImage(cvSize(w, h), IPL_DEPTH_8U, bpp / 8);
}
if (m_img)
m_img->origin = origin == 0 ? IPL_ORIGIN_TL : IPL_ORIGIN_BL;
return m_img != 0;
}
void CvvImage::CopyOf(CvvImage& image, int desired_color)
{
IplImage* img = image.GetImage();
if (img)
{
CopyOf(img, desired_color);
}
}
#define HG_IS_IMAGE(img) \
((img) != 0 && ((const IplImage*)(img))->nSize == sizeof(IplImage) && \
((IplImage*)img)->imageData != 0)
void CvvImage::CopyOf(IplImage* img, int desired_color)
{
if (HG_IS_IMAGE(img))
{
int color = desired_color;
CvSize size = cvGetSize(img);
if (color < 0)
color = img->nChannels > 1;
if (Create(size.width, size.height,
(!color ? 1 : img->nChannels > 1 ? img->nChannels : 3) * 8,
img->origin))
{
cvConvertImage(img, m_img, 0);
}
}
}
bool CvvImage::Load(const char* filename, int desired_color)
{
IplImage* img = cvLoadImage(filename, desired_color);
if (!img)
return false;
CopyOf(img, desired_color);
cvReleaseImage(&img);
return true;
}
bool CvvImage::LoadRect(const char* filename,
int desired_color, CvRect r)
{
if (r.width < 0 || r.height < 0) return false;
IplImage* img = cvLoadImage(filename, desired_color);
if (!img)
return false;
if (r.width == 0 || r.height == 0)
{
r.width = img->width;
r.height = img->height;
r.x = r.y = 0;
}
if (r.x > img->width || r.y > img->height ||
r.x + r.width < 0 || r.y + r.height < 0)
{
cvReleaseImage(&img);
return false;
}
/* truncate r to source image */
if (r.x < 0)
{
r.width += r.x;
r.x = 0;
}
if (r.y < 0)
{
r.height += r.y;
r.y = 0;
}
if (r.x + r.width > img->width)
r.width = img->width - r.x;
if (r.y + r.height > img->height)
r.height = img->height - r.y;
cvSetImageROI(img, r);
CopyOf(img, desired_color);
cvReleaseImage(&img);
return true;
}
bool CvvImage::Save(const char* filename)
{
if (!m_img)
return false;
cvSaveImage(filename, m_img);
return true;
}
void CvvImage::Show(const char* window)
{
if (m_img)
cvShowImage(window, m_img);
}
void CvvImage::Show(HDC dc, int x, int y, int w, int h, int from_x, int from_y)
{
if (m_img && m_img->depth == IPL_DEPTH_8U)
{
uchar buffer[sizeof(BITMAPINFOHEADER) + 1024];
BITMAPINFO* bmi = (BITMAPINFO*)buffer;
int bmp_w = m_img->width, bmp_h = m_img->height;
FillBitmapInfo(bmi, bmp_w, bmp_h, Bpp(), m_img->origin);
from_x = MIN(MAX(from_x, 0), bmp_w - 1);
from_y = MIN(MAX(from_y, 0), bmp_h - 1);
int sw = MAX(MIN(bmp_w - from_x, w), 0);
int sh = MAX(MIN(bmp_h - from_y, h), 0);
SetDIBitsToDevice(
dc, x, y, sw, sh, from_x, from_y, from_y, sh,
m_img->imageData + from_y * m_img->widthStep,
bmi, DIB_RGB_COLORS);
}
}
void CvvImage::DrawToHDC(HDC hDCDst, RECT* pDstRect)
{
if (pDstRect && m_img && m_img->depth == IPL_DEPTH_8U && m_img->imageData)
{
uchar buffer[sizeof(BITMAPINFOHEADER) + 1024];
BITMAPINFO* bmi = (BITMAPINFO*)buffer;
int bmp_w = m_img->width, bmp_h = m_img->height;
CvRect roi = cvGetImageROI(m_img);
CvRect dst = RectToCvRect(*pDstRect);
if (roi.width == dst.width && roi.height == dst.height)
{
Show(hDCDst, dst.x, dst.y, dst.width, dst.height, roi.x, roi.y);
return;
}
if (roi.width > dst.width)
{
SetStretchBltMode(
hDCDst, // handle to device context
HALFTONE);
}
else
{
SetStretchBltMode(
hDCDst, // handle to device context
COLORONCOLOR);
}
FillBitmapInfo(bmi, bmp_w, bmp_h, Bpp(), m_img->origin);
::StretchDIBits(
hDCDst,
dst.x, dst.y, dst.width, dst.height,
roi.x, roi.y, roi.width, roi.height,
m_img->imageData, bmi, DIB_RGB_COLORS, SRCCOPY);
}
}
void CvvImage::Fill(int color)
{
cvSet(m_img, cvScalar(color & 255, (color >> 8) & 255, (color >> 16) & 255, (color >> 24) & 255));
}
添加后如图：
- 1.6 添加消息函数Timer,在资源视图中右击对话框，添加类向导，添加对象的消息函数。
- 1.7 在XXXDlg.h中添加以下代码
private:
CRect rect;
CStatic* pStc; //标识图像显示的Picture控件
CDC* pDC; //视频显示控件设备上下文
HDC hDC; //视频显示控件设备句柄
CvCapture* capture; //视频获取结构
在XXXDlg.cpp中的OnInitDialog（）函数中添加以下代码：
pStc = (CStatic*)GetDlgItem(IDC_VIDEO);//IDC_VIDEO为Picture控件ID
pStc->GetClientRect(&rect);//将CWind类客户区的坐标点传给矩形
pDC = pStc->GetDC(); //得到Picture控件设备上下文
hDC = pDC->GetSafeHdc(); //得到控件设备上下文的句柄
在双击生成的button点击按钮中添加以下代码：
capture = cvCaptureFromFile("D:\\1.mp4"); //播放本地文件
if (!capture)
{
MessageBox(L"无法获得摄像头");
fprintf(stderr, "Can not open camera.\n");
return;
}
//Func(hDC, rect, capture, isplay);
SetTimer(1,30,NULL);//设置定时器，视频刷新定时器，决定了帧率
在OnTimer()函数中添加以下代码：
IplImage* m_Frame;
m_Frame = cvQueryFrame(capture); //从视频中取出一幅图像
CvvImage m_CvvImage;
m_CvvImage.CopyOf(m_Frame, 1);
m_CvvImage.DrawToHDC(hDC, &rect); //通过句柄hDC，显示
CDialogEx::OnTimer(nIDEvent);
运行结果如图：
成功显示图像!
使用更高版本OpenCV显示视频文件见下篇博客！