在本章中,你将学习如何为一个新插件构建最少的代码。从起点开始,您将看到如何获取GStreamer模板源代码。然后,您将学习如何使用一些基本工具来复制和修改模板插件,以创建一个新的插件。如果您遵循这里的示例,那么在本章结束时,您将拥有一个可以编译并在GStreamer应用程序中使用的功能强大的音频过滤器插件。
目前有两种方法可以开发GStreamer的新插件:可以手工编写整个插件,也可以复制现有的插件模板并编写所需的插件代码。到目前为止,第二种方法是两种方法中比较简单的一种,因此在这里就不介绍第一种方法了。(嗯,也就是说,“留给读者做练习。”)
第一步是检出gst-template
git模块的一个副本,以获取一个重要的工具和一个基本GStreamer插件的源代码模板。要查看gst-template
模块,请确保已连接到互联网,然后在命令控制台中输入以下命令:
shell $ git clone https://gitlab.freedesktop.org/gstreamer/gst-template.git
Initialized empty Git repository in /some/path/gst-template/.git/
remote: Counting objects: 373, done.
remote: Compressing objects: 100% (114/114), done.
remote: Total 373 (delta 240), reused 373 (delta 240)
Receiving objects: 100% (373/373), 75.16 KiB | 78 KiB/s, done.
Resolving deltas: 100% (240/240), done.
这个命令会检出一系列文件和目录到gst-template中。我们要使用的模板在gst-template/gst-plugin/目录下。你应该查看该目录下的文件,以对插件源代码树的结构有一个大致的了解。
如果由于某种原因您无法访问git仓库,您也可以通过gitlab web界面下载最新版本的快照。
创建新元素时要做的第一件事是指定一些基本细节:它的名称、编写它的人、它的版本号等。我们还需要定义一个对象来表示元素并存储元素所需的数据。这些细节统称为样板(boilerplate)。
定义样板代码的标准方法很简单,就是编写一些代码,然后填充一些结构。如上一节所述,最简单的方法是复制模板并根据需要添加功能。在./gst-plugin/tools/目录下有一个工具可以帮助你做到这一点。这个工具make_element是一个命令行实用工具,它为您创建样板代码。
要使用make_element
,首先要打开一个终端窗口。切换到目录gst-template/gst-plugin/src
,然后执行make_element
命令。make_element
的参数如下:
例如,下面的命令根据插件模板创建MyFilter插件,并将输出文件放在目录gst-template/gst-plugin/src中:
注意:
首先,我们将检查可能放在头文件中的代码(尽管由于代码的接口完全由插件系统定义,不依赖于读取头文件,因此这不是至关重要的)。
#include
/* Definition of structure storing data for this element. */
typedef struct _GstMyFilter {
GstElement element;
GstPad *sinkpad, *srcpad;
gboolean silent;
} GstMyFilter;
/* Standard definition defining a class for this element. */
typedef struct _GstMyFilterClass {
GstElementClass parent_class;
} GstMyFilterClass;
/* Standard macros for defining types for this element. */
#define GST_TYPE_MY_FILTER (gst_my_filter_get_type())
#define GST_MY_FILTER(obj) \
(G_TYPE_CHECK_INSTANCE_CAST((obj),GST_TYPE_MY_FILTER,GstMyFilter))
#define GST_MY_FILTER_CLASS(klass) \
(G_TYPE_CHECK_CLASS_CAST((klass),GST_TYPE_MY_FILTER,GstMyFilterClass))
#define GST_IS_MY_FILTER(obj) \
(G_TYPE_CHECK_INSTANCE_TYPE((obj),GST_TYPE_MY_FILTER))
#define GST_IS_MY_FILTER_CLASS(klass) \
(G_TYPE_CHECK_CLASS_TYPE((klass),GST_TYPE_MY_FILTER))
/* Standard function returning type information. */
GType gst_my_filter_get_type (void);
GST_ELEMENT_REGISTER_DECLARE(my_filter)
使用这个头文件,你可以使用以下宏在源文件中设置元素基础,以便正确调用所有函数:
#include "filter.h"
G_DEFINE_TYPE (GstMyFilter, gst_my_filter, GST_TYPE_ELEMENT);
GST_ELEMENT_REGISTER_DEFINE(my_filter, "my-filter", GST_RANK_NONE, GST_TYPE_MY_FILTER);
宏GST_ELEMENT_REGISTER_DEFINE与GST_ELEMENT_REGISTER_DECLARE结合使用,允许在插件内部或通过调用GST_ELEMENT_REGISTER (my_filter)从任何其他插件/应用程序注册元素。
元素元数据提供额外的元素信息。它配置了gst_element_class_set_metadata或gst_element_class_set_static_metadata,参数如下:
例如:
gst_element_class_set_static_metadata (klass,
"An example plugin",
"Example/FirstExample",
"Shows the basic structure of a plugin",
"your name " );
元素的细节是在_class_init()函数期间注册到插件的,这个函数是GObject系统的一部分。在向GLib注册类型的函数中,应该为这个GObject设置_class_init()函数。
static void
gst_my_filter_class_init (GstMyFilterClass * klass)
{
GstElementClass *element_class = GST_ELEMENT_CLASS (klass);
[..]
gst_element_class_set_static_metadata (element_class,
"An example plugin",
"Example/FirstExample",
"Shows the basic structure of a plugin",
"your name " );
}
GstStaticPadTemplate是元素将(或可能)创建和使用的pad
的描述。它包含:
此元素支持的类型(功能)。
例如:
static GstStaticPadTemplate sink_factory =
GST_STATIC_PAD_TEMPLATE (
"sink",
GST_PAD_SINK,
GST_PAD_ALWAYS,
GST_STATIC_CAPS ("ANY")
);
这些pad模板是在_class_init()函数中使用gst_element_class_add_pad_template()注册的。对于这个函数,您需要一个处理GstPadTemplate,您可以从静态pad模板创建与gst_static_pad_template_get()。有关此的更多细节请参见下文。
元素的_init()函数使用gst_pad_new_from_static_template()从这些静态模板创建pad。为了使用gst_pad_new_from_static_template()从这个模板创建一个新的pad,需要将pad模板声明为全局变量。有关此主题的更多信息请参见指定pad。
static GstStaticPadTemplate sink_factory = [..],
src_factory = [..];
static void
gst_my_filter_class_init (GstMyFilterClass * klass)
{
GstElementClass *element_class = GST_ELEMENT_CLASS (klass);
[..]
gst_element_class_add_pad_template (element_class,
gst_static_pad_template_get (&src_factory));
gst_element_class_add_pad_template (element_class,
gst_static_pad_template_get (&sink_factory));
}
模板中的最后一个参数是其类型或支持的类型列表。在这个例子中,我们使用了ANY
,这意味着这个元素将接受所有输入。在实际情况中,您可以设置一个媒体类型和可选的一组属性,以确保只接收受支持的输入。这种表示应该是一个字符串,以媒体类型开始,然后是一组以逗号分隔的属性及其支持的值。如果音频滤波器支持任意采样的原始整数16位音频、单声道或立体声,正确的模板应该是这样的:
static GstStaticPadTemplate sink_factory =
GST_STATIC_PAD_TEMPLATE (
"sink",
GST_PAD_SINK,
GST_PAD_ALWAYS,
GST_STATIC_CAPS (
"audio/x-raw, "
"format = (string) " GST_AUDIO_NE (S16) ", "
"channels = (int) { 1, 2 }, "
"rate = (int) [ 8000, 96000 ]"
)
);
被大括号(“{“和”}”)括起来的值是列表,被方括号(“[“和”]”)括起来的值是范围。它还支持多组类型,并且应该用分号(“;”)分隔。在关于pad的这一章中,我们将看到如何使用类型来知道流的确切格式:指定pad。
每个元素都有两个函数,用于构造元素。_class_init()函数,只用于初始化类一次(指定类有哪些信号、参数和虚函数,并设置全局状态);以及_init()函数,该函数用于初始化该类型的特定实例。
编写了定义插件所有部分的代码后,还需要编写plugin_init()函数。这是一个特殊的函数,插件加载后就会调用它,返回TRUE或FALSE,取决于插件是否正确地加载并初始化了任何依赖项。此外,在这个函数中,应该注册插件中任何受支持的元素类型。
static gboolean
plugin_init (GstPlugin *plugin)
{
return GST_ELEMENT_REGISTER (my_filter, plugin);
}
GST_PLUGIN_DEFINE (
GST_VERSION_MAJOR,
GST_VERSION_MINOR,
my_filter,
"My filter plugin",
plugin_init,
VERSION,
"LGPL",
"GStreamer",
"http://gstreamer.net/"
)
请注意,plugin_init()函数返回的信息将缓存在一个中央注册表中。因此,函数总是返回相同的信息是很重要的:例如,它不能根据运行时条件使元素factory可用。如果一个元素只能在某些条件下工作(例如,如果声卡没有被其他进程使用),这必须反映为该元素在不可用时无法进入就绪状态,而不是插件试图否认该插件的存在。
如前所述,填充区是数据进出元素的端口,这使得它们在元素创建过程中非常重要。在样板代码中,我们看到了静态pad模板如何使用element类注册pad模板。在这里,我们将看到如何创建实际的元素,使用_event()函数为特定的格式进行配置,以及如何注册函数以让数据流经元素。
在element _init()函数中,根据_class_init()函数中的element类注册的pad模板创建pad。在创建pad之后,必须设置_chain()函数指针,它将在sinkpad上接收和处理输入数据。你也可以选择设置一个_event()函数指针和一个_query()函数指针。此外,pad也可以在循环模式下工作,这意味着它们可以自己拉取数据。稍后会详细讨论这个话题。之后,您必须将pad注册到元素。事情是这样的:
static void
gst_my_filter_init (GstMyFilter *filter)
{
/* pad through which data comes in to the element */
filter->sinkpad = gst_pad_new_from_static_template (
&sink_template, "sink");
/* pads are configured here with gst_pad_set_*_function () */
gst_element_add_pad (GST_ELEMENT (filter), filter->sinkpad);
/* pad through which data goes out of the element */
filter->srcpad = gst_pad_new_from_static_template (
&src_template, "src");
/* pads are configured here with gst_pad_set_*_function () */
gst_element_add_pad (GST_ELEMENT (filter), filter->srcpad);
/* properties initial value */
filter->silent = FALSE;
}
参考1:官方GStreamer Constructing the Boilerplate
参考2:官方GStreamer Specifying the pads