音视频文章汇总

《iOS-FFmpeg实现简单播放器(编译fak-aac+x264+sdl)》
《FFmpeg添加MediaCodec硬编码》
《SDL播放音频逻辑》
《FFmpeg视频解码尾部掉帧》
近段较忙,还有好多iOS硬解码要补充。。。
《00-WebRTC入门》
《01-WebRTC一对一通话》
《WebRTC部署coturn失败解决方案》
《RTMP》

前些天部门开分享会,在北京的同事Zoom接入收听,但大家都得打开静音开关,否则都听不清...
有幸在LiveVideoStack一篇采访WebRTC创始人Justin Uberti的文章中看到了他的疑虑,原文如下:


图片.png

后面面试即构科技一位总监前辈给出了他的见解,可以通过机器学习,深度学习模型,基于一个原则:人耳朵听不清的,就过滤掉,因为本来也听不清,人耳朵能听清的,就播放出来,但也涉及到会议室里面的人是真的在吵架,吵的大家都听不到...

接触音视频的知识是在2008年,计算机C语言龚老师(算是计算机启蒙老师,头一次把计算机课讲的生动形象,课间休息会看十分钟周星驰电影)讲课时举了个例子,星爷演的电影《苏乞儿》,武状元星爷打不过王爷被虐,眼看就要团灭皇帝所有的卫士和星爷,此时王爷发功起了风,降龙十八掌的武功秘籍在风的吹动下招式活影活现,惟妙惟肖(视频由一帧一帧的图片组成,每秒钟播放十八张图片构成一小段视频(也是视频的帧率),星爷看到的就是连着的18张降龙十八掌的招式图片...),星爷秒懂降龙十八掌最后一招降龙有悔,王爷中招后大笑身体爆炸了...

1.jpg

读研的时候接触到视频压缩标准蓝光DVD,MPEG2000,MPEG4,H264,视频会议...有时候做梦都会想起来,回到了校园坐在大学教室里面听着老师讲着这些标准的历史演变

当然随着5G时代的来临,8K电视普及,需要更高的压缩标准,vp8,vp9,H266...它们遵循了什么样的协议,这时候可能就不是stardCode,NaluHeaderType(vps、sps、pps)这些了,解码器打开流文件后,将&Packet传入,这个时候解码器内核做了什么,需要怎么处理,怎么才能得到正确格式的一帧图片,还有很多未知领域...

你可能感兴趣的:(音视频文章汇总)