Medios de comunicación

Icono HAL multimedia de Android

Android incluye Stagefright, un motor de reproducción multimedia a nivel nativo que tiene códecs basados ​​en software integrados para formatos multimedia populares.

Las funciones de reproducción de audio y vídeo de Stagefright incluyen integración con códecs OpenMAX, gestión de sesiones, renderizado sincronizado en el tiempo, control de transporte y DRM.

Stagefright también admite la integración con códecs de hardware personalizados proporcionados por usted. Para establecer una ruta de hardware para codificar y decodificar medios, debe implementar un códec basado en hardware como un componente OpenMax IL (capa de integración).

Nota: Las actualizaciones de Stagefright pueden realizarse a través del proceso de actualización de seguridad mensual de Android y como parte de una versión del sistema operativo Android.

Arquitectura

Las aplicaciones multimedia interactúan con el marco multimedia nativo de Android según la siguiente arquitectura.

Arquitectura de medios de Android

Figura 1. Arquitectura de medios

Marco de aplicación
En el nivel del marco de la aplicación, se encuentra el código de la aplicación que utiliza las API de android.media para interactuar con el hardware multimedia.
Carpeta IPC
Los proxies de Binder IPC facilitan la comunicación a través de los límites del proceso. Están ubicados en el directorio frameworks/av/media/libmedia y comienzan con la letra "I".
Marco multimedia nativo
A nivel nativo, Android proporciona un marco multimedia que utiliza el motor Stagefright para la grabación y reproducción de audio y vídeo. Stagefright viene con una lista predeterminada de códecs de software compatibles y puede implementar su propio códec de hardware utilizando el estándar de capa de integración OpenMax. Para obtener más detalles de implementación, consulte los componentes MediaPlayer y Stagefright ubicados en frameworks/av/media .
Capa de integración OpenMAX (IL)
OpenMAX IL proporciona una forma estandarizada para que Stagefright reconozca y utilice códecs multimedia personalizados basados ​​en hardware llamados componentes. Debe proporcionar un complemento OpenMAX en forma de biblioteca compartida denominada libstagefrighthw.so . Este complemento vincula Stagefright con sus componentes de códec personalizados, que deben implementarse de acuerdo con el estándar de componentes OpenMAX IL.

Implementar códecs personalizados

Stagefright viene con códecs de software integrados para formatos multimedia comunes, pero también puede agregar sus propios códecs de hardware personalizados como componentes OpenMAX. Para hacer esto, debe crear los componentes OMX y un complemento OMX que conecte sus códecs personalizados con el marco Stagefright. Para ver componentes de ejemplo, consulte hardware/ti/omap4xxx/domx/ ; para ver un complemento de ejemplo para Galaxy Nexus, consulte hardware/ti/omap4xx/libstagefrighthw .

Para agregar sus propios códecs:

  1. Cree sus componentes de acuerdo con el estándar de componentes OpenMAX IL. La interfaz del componente se encuentra en el archivo frameworks/native/include/media/OpenMAX/OMX_Component.h . Para obtener más información sobre la especificación OpenMAX IL, consulte el sitio web de OpenMAX .
  2. Cree un complemento OpenMAX que vincule sus componentes con el servicio Stagefright. Para conocer las interfaces para crear el complemento, consulte los archivos de encabezado frameworks/native/include/media/hardware/OMXPluginBase.h y HardwareAPI.h .
  3. Cree su complemento como una biblioteca compartida con el nombre libstagefrighthw.so en su producto Makefile. Por ejemplo:
    LOCAL_MODULE := libstagefrighthw
    

    En el Makefile de su dispositivo, asegúrese de declarar el módulo como un paquete de producto:

    PRODUCT_PACKAGES += \
      libstagefrighthw \
      ...
    

Exponer códecs al marco.

El servicio Stagefright analiza system/etc/media_codecs.xml y system/etc/media_profiles.xml para exponer los códecs y perfiles compatibles en el dispositivo a los desarrolladores de aplicaciones a través de las clases android.media.MediaCodecList y android.media.CamcorderProfile . Debe crear ambos archivos en el directorio device/<company>/<device>/ y copiarlos al directorio system/etc de la imagen del sistema en el Makefile de su dispositivo. Por ejemplo:

PRODUCT_COPY_FILES += \
  device/samsung/tuna/media_profiles.xml:system/etc/media_profiles.xml \
  device/samsung/tuna/media_codecs.xml:system/etc/media_codecs.xml \

Para ver ejemplos completos, consulte device/samsung/tuna/media_codecs.xml y device/samsung/tuna/media_profiles.xml .

Nota: A partir de Android 4.1, el elemento <Quirk> para códecs multimedia ya no es compatible.