聊聊nvidia deepstream和gstreamer

今年四月来到这家公司的时候，一开始用opencv写了一些demo程序，发现opencv用了ffmpeg和gstreamer来进行流媒体处理。于是，就入了音视频这个大坑。音视频处理包括的东西实在是太多了，封装格式，音视频的编码格式，rtsp和rtp协议，基于硬件的编解码等等，随便一个题目都可以有厚厚的一本书。和深度学习相比，其复杂程度，可以说有过之而无不及。当然，深度学习的数学理论方面的东西，也不是吃素的。
那时开始知道gstreamer这个框架，没想到后来还得在产品中用上，代码级别的。反而是ffmpeg，在产品开发中，直接使用了命令，没有进行代码级别的开发。gstreamer的实现机制，刚开始接触的时候，真的觉得像是天书。就像这位老哥说的：链接。
至于deepstream，目前我将产品中使用到的两个模型集成了进去，一个是检测器，一个是分类器。目前还看不出deepstream有太多的优势。个人觉得直接用tensrort+opencv的方式，更加灵活，如果用c/c++的话。
本意是来这里升级一下技术，现在看来目标基本达到了。今年接触的东西，已经够我研究几年了。