webrtc音频引擎之audio_processing介绍

 audio_processing模块为语音处理的精华,包含音频的回音处理、降噪处理、自动增益处理等音频的核心处理业务算法,(静音检测在另外一个模块,不知道新版与这基本算法放到了同一个模块木有) ,     模块结构为:

 webrtc音频引擎之audio_processing介绍_第1张图片

 1,aec和aecm,也就是回音消除,其中aecm主要针对移动设备。 这两个模块的结构不具体介绍,里面的算法我自己也没有弄明白。   网上有很多吹嘘什么aec怎么怎么牛逼,不过我据我的知识范围和测试的情况,市面上还没有那个算法能真正把回音算法做的非常好滴,speex也是。

2,agc,也就是音频自动增益,具体详细也请大家百度,介绍一堆。

3,ns,也就是降噪,这个大家也可以在网上搜索。 据我的测试,webrtc的降噪效果要比speex好。我使用speex进行降噪还是有明显的噪音,不过比没降噪确实要好很多。

4,剩下的文件也不能一一介绍,太多了,有兴趣的朋友可以根据文件名知道每个文件是干什么滴:

 impl 定义的接口;
util 通常都是工具类,如字符串处理、日期处理等 ;

filter 过滤器;

Wrapper 封装类;


   该模块的核心是录音数据的处理,这里面的所有业务也仅仅只是为了调用刚1,2,3三个模块优化音频数据。



你可能感兴趣的:(多媒体,webrtc)