webrtc学习(三)数据流转

 上面是webrtc整体架构的数据流转图,对于整个数据流转整体上包括两部分,包括发送侧和接收侧。

对于发送侧需要将采集到的数据分别交给音频编码器和视频编码器进行编码,处理之后组成RTP包,最终通过网络分发出去。

接收侧收到网络数据之后,将数据分为RTCP包和RTP包,RTCP包是控制RTP包的,他会被送给流控模块,流控模块中有对带宽的处理(带宽计算基于丢包或者基于延迟,基于延迟有TCC和REMB),通过计算出来的带宽之后,流控模块就可以控制当前的速率,这个时候一个是解码速度调整,一个是平滑处理模块增加或者减少包的发送量;RTP包输音视频数据。RTP包继续拆分,拆成音频包和视频包并进行同步,分别放在NetEQ和JitterBuffer里面进行平滑处理,之后再经过3A模块或者增强之后分别进行渲染。

你可能感兴趣的:(webrtc,学习)