程序流程:
1.图像采集
先从opencv(2.4.10版本)采集回来摄像头的图像,是一帧一帧的
每一帧图像是一个矩阵,opencv中的mat 数据结构。
2.人脸的美化
人脸美化,我们用的皮肤检测,皮肤在颜色空间是特定的一个区域
检测到这个区域(感兴趣区域),完后对这个区域进行美化,就是滤波,主要是双边滤波和高斯滤波。
3.视频格式转换以及编码
处理好的矩阵颜色空间是rgb的,需要转换成yuv,yuv的颜色空间就是可以播放的,类似我们电视上面看的画面,编码就是传输时候需要发送流,只个流相当于针对数据的压缩,将yuv格式的视频帧编码成h264的格式
Rgb转换成yuv,opencv实现(美颜在这一步实现)
Yuv转换成h264,x264实现
H264转换成rtmp流,libxrtmp实现
4.发送给服务器进行直播
H264的流一般就可以播放了,但是针对目前的网络直播主要是将h264转换成rtmp流,用rtmp的服务器进行播放,这块我们主要用的是adobe media server 5这个服务器进行接受工作
5.技术难点
1.将人脸美化转换为皮肤检测
2.各种编码的转换
3.缓冲区的控制,这块是一个读者写着模型
实现效果:
参考文献:
Adobe Flash Media Server 5.0.3 官方中文版:(下载地址和说明)
http://www.launchdigital.net/supportview.asp?bid=98&Sid=124&id=594
http://www.xdowns.com/soft/1/71/2014/Soft_116532.html
关于美颜 摄像头功能的部分说明:
http://blog.csdn.net/wangyaninglm/article/details/50806051
yuv格式编码为h264:
http://blog.csdn.net/leixiaohua1020/article/details/42078645
h264发送rtmp流:
http://www.cnblogs.com/haibindev/archive/2012/04/16/2450989.html
http://blog.csdn.net/leixiaohua1020/article/details/42105049
Adobe Flash Media Server 5.0.3 官方中文版:(下载地址和说明)
http://www.launchdigital.net/supportview.asp?bid=98&Sid=124&id=594
http://www.xdowns.com/soft/1/71/2014/Soft_116532.html
关于美颜 摄像头功能的部分说明:
http://blog.csdn.net/wangyaninglm/article/details/50806051
yuv格式编码为h264:
http://blog.csdn.net/leixiaohua1020/article/details/42078645
h264发送rtmp流:
http://www.cnblogs.com/haibindev/archive/2012/04/16/2450989.html
http://blog.csdn.net/leixiaohua1020/article/details/42105049
环形缓冲区实现:
http://blog.csdn.net/lezhiyong/article/details/7879558
完整代码下载:http://download.csdn.net/detail/wangyaninglm/9480783