GStreamer Basic tutorial 学习笔记(七)

多线程处理

目标:GStreamer可以自动处理多线程,但在某些情况下,可能需要手动分离线程。
介绍:GStreamer 是一个多线程框架。这意味着在内部,它根据需要创建和销毁线程,例如将流媒体与应用程序线程分离。此外,插件还可以自由地为它们自己的处理创建线程,例如,视频解码器可以创建 4 个线程以充分利用具有 4 个核心的 CPU。

此外,在构建管道时,应用程序可以显式指定分支(管道的一部分)在不同的线程上运行(例如,使音频和视频解码器同时执行)。

这可以通过使用队列元素来实现。队列元素的工作原理如下:接收端简单地将数据入队并返回控制权。在不同的线程上,数据被出队并向下游推送。此元素还用于缓冲,后续在流媒体教程中会看到。可以通过属性控制队列的大小。

Request pads

在基础教程 3:动态管道中,我们看到了一个元素(uridecodebin),它一开始没有 pad,而是在数据开始流动,并且元素获得媒体信息时出现的。这些被称为“Sometimes Pads”,与随时可用的常规 pad 相对应,后者称为“Always pads”。

第三种类型的 padRequest pads,它是根据需要创建的。经典的例子是 tee 元素,它有一个sink pad 和没有初始化的source pads:它们需要被请求,然后 tee 添加它们。通过这种方式,输入流可以被复制任意多次。缺点是与“Sometimes Pads”连接元素不像与“Always pads”连接那样自动。

注意:在 PLAYINGPAUSED 状态下请求(或释放)pad 时,需要采取额外的注意事项(pad 阻塞),本教程中未描述这些。不过,在 NULLREADY 状态下请求(或释放)pad 是线程安全的。

函数与知识点

  1. AudioTestSrc 属性:可以用来生成基本的音频信号。它支持几种不同的波形,并允许设置基本频率和音量。一些波形可能使用额外的属性。

  2. Wavescope 属性:是一个简单的音频可视化元素。它以示波器的方式渲染波形。

  3. 转换元素(audioconvertaudioresamplevideoconvert)是为了确保管道可以链接起来。事实上,音频和视频输出的Capabilities取决于硬件,在设计时您不知道它们是否与audiotestsrcwavescope产生的Caps匹配。然而,如果Caps匹配,这些元素将处于"直通模式",不会修改信号,对性能几乎没有影响。

  4. freq 介绍:audiotestsrc的属性之一。

    功能:“freq”属性控制波的频率(215Hz可以使波在窗口中几乎静止)。
    注意:此样式和visualshader属性用于使wavescope波连续显示。

  5. gst_element_link_many() 警告:实际上可以链接具有请求pad的元素。它在内部请求了pad,因此不必担心链接的元素是具有Always pads还是Request pads这是不方便的,可能听起来很奇怪,因为您仍然需要在之后释放申请的pads,并且如果pad是通过gst_element_link_many()自动请求的,很容易忘记。

  6. GstPad *gst_element_request_pad_simple (GstElement * element, const gchar * name) 功能:按名称(例如“src_%d”)从元素中检索一个pad。此版本仅检索Request padspad应该使用gst_element_release_request_pad()释放。

    说明:如果pad需要具有特定的名称(例如,名称是“src_1”而不是“src_%u”),则该方法比手动获取pad模板并调用gst_element_request_pad()慢。

  7. GstPad *gst_element_get_static_pad (GstElement * element, const gchar * name) 功能:按名称从元素中检索pad。此版本仅检索已经存在的(即“静态”)pads

  8. GstPadLinkReturn gst_pad_link (GstPad * srcpad, GstPad * sinkpad) 功能:链接source padsink pad

    说明:gst_element_get_static_pad()内部使用了gst_element_link()gst_element_link_many()

cleanup

  1. gst_element_release_request_pad() 解除函数与知识点6的引用。
  2. gst_object_unref() 解除tee的引用。

你可能感兴趣的:(c++,GStreamer,webrtc,服务器)