GStreamer - Entendiendo el concepto

Todo elemento de audio o video es un flujo de datos, bien llamado “stream”. Este stream viaja dentro de un canal, llamado “tubería” (pipeline). Este tipo de diseño permite que se pueda hacer, de forma transparente, que el stream (de entrada o salida) tenga cualquier origen, como un recurso de tipo file:///, o bien un URI, de tipo http://,∞ y de forma de reducir los tiempos de proceso (latencia).

Un objeto basico de GStreamer es llamado un “Elemento”. Existen elementos de origen de datos, elementos de filtro de datos y elementos de recepción de datos (llamados “sink”). Estos elementos estan interconectados a traves de tuberías de datos (pipelines) a los elementos de origen (”src”). La explicación es más simple aun : los sinks reciben datos desde los sources.

Para la comunicación con el mundo, existen objetos llamados pads. Los pads son de origen o de recepción. Además, los pads pueden ser creados de forma dinamica, o bien por petición. Estos pads poseen dos propiedades, dirección y disponibilidad. Gstreamer define dos direcciones de pads (origen y recepción).

Los pads poseen distintas capacidades, que describen el flujo de datos que pueden recibir o entregar. Tambien se entiende como “cadena de capacidades”. La entidad basica esta definida con un nombre, un tipo MIME que puede manejar, y un conjunto de propiedades adicionales. Por ejemplo

Pads:  SINK template: 'sink'    Availability: Always    Capabilities:      'mad_sink':        MIME type: 'audio/mp3':

describe un pad que es capaz de manejar archivos MP3.

Algunas de las caracteristicas más importantes de las capacidades de los pads es el autoplugging (poder conectarse al plugin necesario sin necesidad de indicarlo a priori) y la detección de compatibilidad entre elementos, en el caso que dos pads manejen el mismo tipo de medio.

Un filtro es un elemento intermedio, que posee un origen y una salida, al mismo tiempo. Es la union de un pad de entrada y un pad de salida. Ellos operan directamente en los datos de entrada y producen datos que se lanzan al pad de salida. Por ejemplo, un filtro de MP3 requiere en el pad de entrada un stream de mp3, mientras que por el pad se salida se envia el archivo decodificado, que se puede enviar a un pad de audio (la tarjeta de sonido, por ejemplo).

Hay algunos filtros que tienen más de un pad de salida. Estos son llamados “demuxers” (demultiplexores). Por ejemplo, un filtro de archivos MPEG tiene dos pads de salida, uno para el audio y el otro para video.

Los distintos elementos, como ya vimos, se enlazan en una tubería, como se puede ver en la figura.

+

---

+    +

---

+    +

---

+| filesrc    |    |     mad    |    | osssink ||        +
+    +

---

+   +
+    +

---

+    ||        |src|

---

|sink|   |src|

---

|sink|    |+

---

+
+    +

---

+
+
+    +

---

+

---

+
Existe un “superelemento” que sirve para encapsular elementos enlazados, llamado “bin”. En teoria, es un elemento compuesto por elementos

+

---

+|                                        bin      || +

---

+    +

---

+    +

---

+ || | filesrc    |    |     mad    |    | osssink | || |        +
+    +

---

+   +
+    +

---

+    | || |        |src|

---

|sink|   |src|

---

|sink|    | || +

---

+
+    +

---

+
+
+    +

---

+

---

+ |+

---

+
Explicaremos con un simple ejemplo estos conceptos a traves de un MP3 player.