每周一期,纵览音视频技术领域的干货和新闻投稿:[email protected]。
【线上分享】低延时直播系统架构设计与弱网优化实践
今晚19:00,我们邀请到腾讯云资深架构师何书照,详细讲解大规模、低延时电商直播系统的架构设计思路与实践,分析电商直播过程中经常遇到的难点与挑战,系统剖析低延时直播系统的弱网优化及低延时互动连麦实践。
大规模、低延时电商直播系统架构设计
电商直播的难点、挑战与技术突破
低延时直播系统弱网优化与互动连麦实践
架构
如何搭建低延时、交互式的在线教育平台?
本文由腾讯互动课堂技术负责人缪少豪在LiveVideoStack线上分享中的内容整理而成,详细介绍了腾讯云在线教育互动课堂方案的设计与技术挑战,重点解析了互动白板的实现技术难点与突破。
https://mp.weixin.qq.com/s/MLFQWLRYnIkAC3vYVkqzwA
Netflix云原生微服务设计分析
多年来Netflix一直是全球最好的在线订阅式视频服务供应商,其带宽占全球互联网带宽容量的15%以上。2019年,Netflix已经拥有了1.67亿用户,每季度新增用户超过500万,在200多个国家和地区运营。Netflix的用户每天观看视频超过1.65亿小时,每天点播了4000多部电影以及4.7万集剧集。从工程的角度来看,Netflix的技术团队为了服务于全球用户,设计了如此惊人的视频流媒体系统,该具备非常高的可用性和可扩展性。
https://mp.weixin.qq.com/s/Ivzs0SheRjcjCWBzdYcu5g
完整SIP/SDP媒体协商概论-ICE攻击类型和安全架构讨论
为了完成整个SIP/SDP媒体协商概论,笔者花费了很多时间介绍关于WebRTC中的ICE处理流程。通过完整的详解,笔者相信关于ICE处理流程的大部分内容已经解释的比较清楚。
https://mp.weixin.qq.com/s/KULQN3tqycyIdAxEGduxyA
开源 WebRTC 媒体服务器的开发活跃度如何?
WebRTC媒体服务器是一种服务器,用于构建提供群组呼叫功能的应用程序。
https://bloggeek.me/open-source-webrtc-media-server-update/?utm_source=feedly&utm_medium=rss&utm_campaign=open-source-webrtc-media-server-update
传输网络
WebRTC CDN实现
本文从核心设计、RTMP协议改造、边缘节点、源站、客户端SDK、WebRTC回源设计以及媒体服务集群架构等方面简要介绍了WebRTC-CDN的实现。
https://zhuanlan.zhihu.com/p/143974932?utm_source=wechat_session&utm_medium=social&s_r=0
流媒体传输协议:RTMP、HLS和RTSP介绍
流媒体传输协议经过几十年的发展,越来越丰富。近期的SRT、DASH、QUIC等都已经在实际中有所应用,但是这些协议里面应用最成熟,最广的协议还是RTSP/RTP/RTCP、HLS和RTMP协议。同时这些协议背后解决的问题和设计思想大同小异,所以作为流媒体入门可以从这些协议入手,进行学习和实践。同时这些协议的资料丰富,实验环境也容易搭建。
https://mp.weixin.qq.com/s/a86_POyZ7mjZuMHWNKRCKw
会话描述协议SDP和会话初始协议SIP
本视频来自NME-ICT的计算机网络课程,视频的主题是会话描述协议SDP和会话初始协议SIP。
https://mp.weixin.qq.com/s/RzYb3juLH9Sb0ZMYUbEjBw
WebRTC 到底安全性如何?
H.323,SIP,XMPP是用于VoIP和视频会议的最流行和最广为人知的信令协议。它们都可以按照其规范进行加密和私有化,但是它们都不要求加密。他们不要求对信号本身进行加密,当然也不要求对媒体进行加密。
https://www.ringcentral.com/blog/security-by-webrtc-or-security-by-obscurity/
为什么 IPv6 难以取代 IPv4
为什么这么设计(Why’s THE Design)是一系列关于计算机领域中程序设计决策的文章,我们在这个系列的每一篇文章中都会提出一个具体的问题并从不同的角度讨论这种设计的优缺点、对具体实现造成的影响。
https://draveness.me/whys-the-design-ipv6-replacing-ipv4/
编解码
HVS和感知编码
本次Video Insider采访的对象是来自动漫产业公司Crunchyroll/Ellation的视频工程师Chris Kennedy,主要谈的是关于HVS(Human Visual System,人类视觉系统)相关的视觉质量、视频压缩等话题。
https://mp.weixin.qq.com/s/7YnfnUm_TPjGa9NSatPnBQ
让我们一起聊聊 AV1 / H.265 和 Janus
Janus 增加了对最新视频编解码器的支持。
https://www.meetecho.com/blog/av1-h265-janus/
视频技术
向消费者提供8K视频
本篇是来自NAB的圆桌讨论,主题是:”向消费者提供8K视频“,主持人是来自8K联盟的Chris Chinnock,成员包括来自Harmonic的Thierry Fautier,来自Samsung Research America的Bill Mandel和来自Xperi的Scott Smyers。
https://mp.weixin.qq.com/s/_DxnuCMqD6uGXlLhOOmuKA
IMF简介
本文来自2020 NAB Show Conference,视频原题目为Interoperable Master Format (IMF) 101 Tutorial,主要介绍了IMF的相关内容。
https://mp.weixin.qq.com/s/TLuDkgVerzhKMurTJKX5Kw
全民K歌客观清晰度评估算法技术分享
本文主要分享多媒体实验室和全民K歌团队合作开发的针对细分主播场景定制的无参考清晰度评估算法,主要介绍我们如何在细分场景获取有效标注数据、模型训练和模型部署之后的数据上报汇总分析的细节内容。
https://mp.weixin.qq.com/s/VhS-jnJTVo5-4cqoMcMXiw
互动视频的魔力
Eko公司从各种类型和垂直领域的音乐视频入手,提高互动性。他们决定把重心放在娱乐方面。对于交互视频,实现目标的方法是创建优质内容,而不是用户生成内容。本段采访来自The Video Insiders, 受访者是Eko的联合创始人和首席执行官Tal Zubalsky。他们讨论了互动性和互动视频。
https://mp.weixin.qq.com/s/CgSpcsLl9f78AjVZ3Wec8w
人物专访
五个人+三个月=美摄云非编1.0
美摄研发总监黄裔专访。
https://mp.weixin.qq.com/s/Nw9Ng3Plr5-Kc29biaYJ2g
AI智能
技术详解:基于人脸识别的AI弹幕
有时候,弹幕比剧情还精彩,那些脑洞大开、观点鲜明的弹幕,可以让千万用户参与到“剧情创作”中,因此很多人都喜欢边看剧边发弹幕。在 AI 算法的加持下,弹幕的呈现形式也花样翻新。优酷的很多剧都上线了基于 AI 人脸识别的跟随弹幕,与剧情更贴合,可玩性也更高。这类弹幕是如何实现的?有哪些核心技术?
https://mp.weixin.qq.com/s/MPUnCOXoVK8dAFpNCgRl9w
3D目标检测深度学习方法数据预处理综述
这一篇的内容主要要讲一点在深度学习的3D目标检测网络中,我们都采用了哪些数据预处理的方法,主要讲两个方面的知识,第一个是representation,第二个数据预处理内容是数据增广。
https://mp.weixin.qq.com/s/LN2l67jhivb0hyy6JSLMVA
85.1%mIoU!语义分割新SOTA来了!分层多尺度注意力
本文提出一种有效的分层多尺度注意机制,通过允许网络学习如何最佳地组合来自多个推理尺度的预测,从而有助于避免不同类之间的混淆,处理更加精细的细节。
https://mp.weixin.qq.com/s/oN4QxZPqUrI9OC_HRnNCpw
无线仍然是AI和边缘计算发展的瓶颈
数据中心正在向网络边缘扩展,以满足人工智能和其他应用程序的快速响应需求,而这是传统数据中心架构所无法提供的。
https://www.eetimes.com/ai-drives-data-centers-to-the-edge/
资源推荐
Nuke 9
Nuke 9 是一个 Swift 版的图片加载库,Github 拥有近 5k Star,它有详细的文档,简洁的 API,支持更多的图片格式,使用全新的图片处理图形解码协议,支持图片预加载,更重要的是有高效的性能,比较遗憾的是目前仅支持 iOS 11+。
https://kean.github.io/post/nuke-9
点击“阅读原文”可查看更多详细信息。