• Android Opencore OpenMAX学习(3)OpenMax 调用顺序


    OpenMax 调用顺序(OpenMax Call Sequences)
    1 OMX 核心初始化 _OMX_MasterInit

    1)调用OMX_Init函数
    ->OsclInit::Init(error, &select); //init all Oscl layers except Oscl scheduler.
    ->_Try_OMX_Create(error, data); //create the OMX singleton
    ->OsclSingletonRegistry::registerInstanceAndUnlock(data, OSCL_SINGLETON_ID_OMX, error); //Release the singleton.
    ->_Try_OMX_Init(error, status); //If create succeeded, then init the OMX globals.

    2)PV框架列举所有OMX

    OMX_ComponentNameEnum //列举所有组件的名称
    ->OsclSingletonRegistry::getInstance(OSCL_SINGLETON_ID_OMX, error);
    ->oscl_strncpy(cComponentName, (data->ipRegTemplateList[Index])->ComponentName, nNameLength);

    OMX_GetRolesOfComponent // 通过组件名称找到组件,返回其角色(role)
    ->OsclSingletonRegistry::getInstance(OSCL_SINGLETON_ID_OMX, error);
    ->data->ipRegTemplateList[ii])->GetRolesOfComponent(RoleString)
    ->oscl_strncpy((OMX_STRING) roles[ii], (OMX_STRING)RoleString[ii], oscl_strlen((OMX_STRING)RoleString[ii]) + 1);

     

    2 OMX组件实例、功能及端口
    OMX核心初始化后,下一步为列举每个组件的功能和端口。
    1)调用OMX_GetHandle获取所需的OMX组件信息。

    2)调用OMX_GetParameter及“PV_OMX_CAPABILITY_TYPE_INDEX”这个index去获取组件的功能。
    万一组件不是OpenMax全兼容或者OpenMax的特性不明确,以上获取的功能决定了OMX是否支持输入/输出端口“UseBufeer”和“AllocateBuffer”调用,以及OMX是否支持部分帧等等。

    注意:如果OMX组件返回“OMX_ErrorUnsupportedIndex”给index(或其他比如“OMX_ErrorNone”),PV框架将为组件功能赋默认值。

    3)调用OMX_GetParameter,针对视频组件再调用“OMX_IndexVideoInit”,针对音频组件则调用“OMX_IndexAudioIni”以获取可用的端口号。

    4)循环查找可用的端口号以找到输入端口。

    5)循环查找可用的端口号以找到输出端口。

    注意:
    Index “PV_OMX_CAPABILITY_TYPE_INDEX” is defined as:
    #define PV_OMX_COMPONENT_CAPABILITY_TYPE_INDEX 0xFF7A347
    The OMX_GetParameter call expects the following structure to be filled for this index:
    typedef struct PV_OMXComponentCapabilityFlagsType
    {
    ////////////////// OMX COMPONENT CAPABILITY RELATED MEMBERS
    OMX_BOOL iIsOMXComponentMultiThreaded;
    OMX_BOOL iOMXComponentSupportsExternalOutputBufferAlloc;
    OMX_BOOL iOMXComponentSupportsExternalInputBufferAlloc;
    OMX_BOOL iOMXComponentSupportsMovableInputBuffers;
    OMX_BOOL iOMXComponentSupportsPartialFrames;
    OMX_BOOL iOMXComponentUsesNALStartCode;
    OMX_BOOL iOMXComponentCanHandleIncompleteFrames;
    OMX_BOOL iOMXComponentUsesFullAVCFrames;
    } PV_OMXComponentCapabilityFlagsType;

    功能参数的默认值:
    1)iIsOMXComponentMultiThreaded ——默认值OMX_TRUE。
    OMX组件一般运行与独立的线程(与PV框架线程不同),有可能将OMX组件集成进PV框架线程(e.g.,通过同步调用)。

    2)iOMXComponentSupportsExternalOutputBufferAlloc ——默认值OMX_TRUE。
    OMX规范要求OMX组件支持外部分配输出缓冲(就是输出缓冲的OMX_UseBuffer调用)。
    如果组件不支持,必须通知PV框架,以便其调用“OMX_AllocateBuffer”代替。

    3)iOMXComponentSupportsExternalInputBufferAlloc ——默认值OMX_TRUE。
    OMX规范要求OMX组件支持外部分配输入缓冲(就是输入缓冲的OMX_UseBuffer调用)。
    如果组件不支持,必须通知PV框架,以便其调用“OMX_AllocateBuffer”代替。

    4)iOMXComponentSupportsMovableInputBuffers ——默认值OMX_TRUE。
    如果OMX缓冲是外部分配的,为了提高稳定性和优化性能,可以分离OMX缓冲头部信息(OMX_BUFFERHEADERTYPE)与数据区(“pBuffer”)。换句话说,使OMX缓冲更有“移动性”,当传递一个输入缓冲到OMX组件时,“pBuffer”区域和头部信息不一定指向相同的缓冲区。因此,可以分配更多的数据缓冲在框架中循环工作,只有在需要把缓冲传递到OMX组件时才附加到头部信息去。如果OMX组件要求头部和数据一直指向相同的缓冲,则iOMXComponentSupportsMovableInputBuffers应该被置为OMX_FALSE。

    5)iOMXComponentSupportsPartialFrames ——默认值OMX_TRUE。
    OMX规范要求OMX组件支持将任意数据打包进OMX缓冲,包括独立单帧、NAL和被拆分到多个缓冲区的解码单元。PV框架支持“OMX_BUFFERFLAG_ENDOFFRAME”标记去组装部分帧。然而,如果OMX组件不支持组装部分帧,也就是OMX组件要求PV框架来组装部分帧并提供给OMX组件完整单帧或NAL,此时iOMXComponentSupportsPartialFrames需要被设置为OMX_FALSE。
    注意:设置为OMX_FALSE将影响性能。

    6)iOMXComponentUsesNALStartCode ——默认值OMX_FALSE。
    这个标志位将影响H264解码。PV框架提供所有信息以重建立H264NALs(通过OMX缓冲的大小和OMX_BUFFERFLAG_ENDOFFRAME的大小)。因此没有必要由OMX组件解码输出流来获取0x0001的NAL初始代码。如果OMX的H264组件及解码单元需要NAL起始代码,可将iOMXComponentUsesNALStartCode置为OMX_TRUE。

    7)iOMXComponentCanHandleIncompleteFrames ——默认值OMX_TRUE。
    如果丢失部分数据流(比如数据包丢失),假定OMX组件及解码单元可以解决这个问题。如果不可以,则将iOMXComponentCanHandleIncompleteFrames设置为OMX_FALSE。当“iOMXComponentSupportsPartialFrames”也被设置为OMX_FALSE时,这点相当重要,因为OMX组件不提供组装部分帧,也就是说PV框架必须提供组装好的frame/NALs,因此需要通知OMX组件不完整的帧数据是否可以传递进来。

    8)iOMXComponentUsesFullAVCFrames ——默认值OMX_FALSE。
    这个标志位决定AVC解码中使用NAL模式还是frame模式。AVC数据可由以上两种模式提供给OMX组件。默认为NAL模式(设置为OMX_FALSE),此模式下OpenCore框架可以为OMX输入缓冲同时提供完整或者部分AVCNAL。Frame模式下(OMX_TRUE),OpenCore框架积累NAL,并提供给OMX输入缓冲一帧完整的数据。
    NAL边界的问起前面讨论过了,此处省略。

     

    3 OMX组件输入输出缓冲协商
    在任何数据交换前,输入输出缓冲需要进行协商。PV框架需要做以下工作:、
    1)调用OMX_GetParameter获取输入端口缓冲参数(最小/实际缓冲数,缓冲区大小等等)
    2)检查有效的输入缓冲参数(修改一些参数,比如帧的长度和宽度,以及缓冲区的数目等等)
    3)调用OMX_SetParameter函数设置输入缓冲参数
    4)调用OMX_GetParameter获取输出端口缓冲参数(最小/实际缓冲数,缓冲区大小等等)
    5)检查有效的输出缓冲参数(修改一些参数,比如帧的长度和宽度,以及缓冲区的数目等等)
    6)调用OMX_SetParameter函数设置输出缓冲参数

    过程如图三(省略)

    一些设想:
    1)缓冲区尺寸的设想:
    对于编码器组件,最终分配的输出缓冲区尺寸可能小于profile/level/target比特率所要求的最大帧尺寸。出于内存消耗考虑,OMX编码器组件应当能够输出frame或NAL的比特流划分到多个输出缓冲区去。老调重弹,最后一个部分缓冲区使用“OMX_BUFFERFLAG_ENDOFFRAME”标记结尾。

    对于解码器组件,最终分配的输入缓冲区尺寸可能小于profile/level/target比特率所要求的最大帧尺寸。出于内存消耗考虑,PV框架在适当的时候提供采用“OMX_BUFFERFLAG_ENDOFFRAME”标记结尾的输入缓冲区。如果输入缓冲包含完整帧(H264也可能是NAL单元)或多帧,“OMX_BUFFERFLAG_ENDOFFRAME”将会用来标记一帧的结尾。如果完整的frame/NAL不能放入一个输入缓冲区,则会被拆分放入多个缓冲区。包含部分信息的缓冲区,“OMX_BUFFERFLAG_ENDOFFRAME”标记位将会被置为0。一帧数据的最后一个缓冲区中“OMX_BUFFERFLAG_ENDOFFRAME”才会被置为1。通过这种做法,组件可以方便的重构一帧数据。

    如果OMX解码器组件不兼容组长部分帧,PV框架将负责做这件事情。

    2)输入/输出缓冲区数量。
    框架或许希望分配比OMX要求更多的的输入/输出缓冲区以提供更优的性能(比如解码器输出缓冲或编码器输入缓冲——缓冲更多的数据可以提高性能)。尽管性能提升了,但无法送到OMX组件去(不太理解,应该还是协商不好的意思)。

     

    4 OMX状态变换 加载->空闲 
    如果部分已分配的缓冲区进入空闲状态,缓冲区分配将挂起。在变化过程中,PV框架将“
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StateLoaded改变为OMX_StateIdle
    2)调用一系列“OMX_UseBuffer” 或者“OMX_AllocateBuffer”通知OMX组件。这些调用使用NumInputBuffer记录输入输入端口的数目,使用NumOutputBuffer记录输入输入端口的数目。
    3)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)

    一些设想与推荐参数:
    根据OMX规范,兼容的OMX组件必须同时支持OMX_UseBuffer 和 OMX_AllocateBuffer调用。然而,出于一些内在原因,完全实现是不可能的,组件应当通知PV框架其所具有的功能。

    推荐将INPUT缓冲分配在OMX组件外部,这样可以减少额外的内存拷贝(也就是说输入缓冲使用OMX_UseBuffer)。

     

    5 变换到“执行”状态与数据交换
    状态变化到执行时才开始真正处理数据。本步骤中,PV框架将:
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StateIdle改变为OMX_StateExecuting。
    2)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。
    3)通过OMX_EmptyThisBuffer调用将输入缓冲发送给OMX组件,通过OMX_FillThisBuffer调用将输出缓冲发送给OMX组件,组件使用合适的回调函数返回缓冲区。

    过程如图5


    注意:
    1)在任意时刻OMX组件如果拥有所有输入缓冲区(也就是所有的输入缓冲都通过EmptyThisBuffer调用传给了OMX组件),此时将不能再传递任何输入缓冲区给OMX组件,知道OMX通过EmptyBufferDone释放一个缓冲。对于输出缓冲区同样。

    2)如果PV框架没有及时将缓冲区发给OMX框架,OMX组件不会多次返回同一个缓冲区(也就是一旦OMX框架返回一个缓冲区,只有PV框架再次调用这个缓冲,OMX组件才可使用)。这是OMX缓冲交换APSs所规定的基本规则。

     

    6 暂停
    PV框架常见的功能包括暂停和恢复,PV框架将:
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StateExecuting改变为OMX_StatePause。
    2)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。

    PV框架向OMX组件发送暂停命令后,立刻停止发送输入输出缓冲。

    有暂停就有恢复,PV框架将:
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StatePause改变为OMX_StateExecuting。
    2)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。

    PV框架的状态恢复到执行后,将恢复发送OMX输入输出缓冲。

    过程如图6

     

    7 端口刷新(如果可用)
    端口刷新调用一般用于重新配置解码器组件,这样会清空所有数据。在此情况下,PV框架将:
    1)通过“OMX_SendCommand”调用发送刷新全部端口指令。
    2)等待输入缓冲的输出缓冲的两个EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。

    刷新命令来了之后,PV框架立刻停止向OMX组件发送输入/输出缓冲。当组件接收到2个回调函数后,PV框架开始恢复发送输入/输出缓冲。

    端口刷新的顺序和通告并不相关。

    过程如图7。

    为了防止动态端口被重复配置,也可以先于OMX IL用户关闭OMX组件端口调用端口刷新指令。

     

    8 停止/变化到“IDLE”状态
    为了停止处理过程,PV框架将:
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StatePause改变为OMX_StateIdle。
    2)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。

    过程见图8。

    一些设想:
    当命令完成“IDEL”态的回调后,PV框架假设所有输入输出缓冲按照OMX规范要求那样返回。

     

    9 OMX组件状态转换 IDLE->Loaded State和 De-initialization
    当PV框架结束与一个OMX组件的所有交互后,将:
    1)通过“OMX_SendCommand”调用发送命令给OMX组件,将状态由OMX_StateIdle改变为OMX_StateLoaded。
    2)向OMX组件发送一系列“OMX_FreeBuffer”调用。
    3)等待OMX组件的EventHandler事件回调,通知框架状态变换完成(OMX_EventCmdComplete)。使用NumInputBuffer记录输入输入端口的数目,使用NumOutputBuffer记录输入输入端口的数目。
    4)对OMX核心执行OMX_FreeHandle调用,释放组件句柄。

    流程图见图9

    注意:在向OMX组件发送卸载命令之前,PV框架一直在等待OMX组件返回的输入输出缓冲。由于回调的过程的不同步性,一些EmptyBufferDone/FillBufferDone的回调有可能在OMX组件状态由“executing” 到 “idle”之后才到达。

     

    10 OMX Core 卸载
    PV框架调用函数OMX_Deinit()。

  • 相关阅读:
    jquery ready()的几种实现方法小结
    jQuery之$(document).ready()使用介绍
    jquery的$(document).ready()和onload的加载顺序
    php var_export与var_dump 输出的不同
    PHP获取和操作配置文件php.ini的几个函数
    PHP 网站保存快捷方式的实现代码
    php 图形验证码的3种方法
    面向对象基础01
    提高记忆力
    Python数据分析环境和工具
  • 原文地址:https://www.cnblogs.com/weinyzhou/p/4983392.html
Copyright © 2020-2023  润新知