Android 13 - Media框架(14)- OpenMax(四)

2023-11-29 07:45
文章标签 android 框架 14 media 13 openmax

本文主要是介绍Android 13 - Media框架(14)- OpenMax(四),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

这一节继续了解 openmax 目录下的内容。

1、OMX_Core.h

1.1、OMX_BUFFERHEADERTYPE

这是一个比较关键的结构体,上层ACodec/MediaCodec用到的 buffer id、OMXNode 与 OMX component 进行 buffer 传递都是通过该结构体完成,这里将会初步了解结构体中的部分成员意义:

  • OMX_U32 nSize:结构体的大小,用的不多;
  • OMX_U8* pBuffer:指向真正存储数据的 buffer;
  • OMX_U32 nAllocLen:分配的 buffer 的字节数;
  • OMX_U32 nFilledLen:buffer中填充的数据的字节数;
  • OMX_U32 nOffset:buffer 有效数据的偏移量;
  • OMX_PTR pAppPrivate:指向应用层与之关联的 buffer;
  • OMX_PTR pPlatformPrivate:指向平台与之关联的 buffer;
  • OMX_PTR pInputPortPrivate:指向 input 端口与之关联的 buffer;
  • OMX_PTR pOutputPortPrivate:指向 output 端口与之关联的 buffer;
  • OMX_TICKS nTimeStamp:buffer 对应的 pts;
  • OMX_U32 nFlags:buffer 所携带的标志位;
  • OMX_U32 nOutputPortIndex:输出端口上的索引;
  • OMX_U32 nInputPortIndex:输入端口上的索引;

结构体中 pBuffer、pAppPrivate、pPlatformPrivate 指向的内容这里暂时不做了解,后面了解 OMXNode 时再做研究。

1.2、OMX_EVENTTYPE

这个枚举类型定义了 OMX 组件的 callback 事件:

  • OMX_EventCmdComplete:组件执行完成一个命令;
  • OMX_EventError:组件发生错误;
  • OMX_EventMark:组件检测到 buffer 标识,用的较少;
  • OMX_EventPortSettingsChanged:组件的端口设置发生变化;
  • OMX_EventBufferFlag:组件收到 EOS;
  • OMX_EventComponentResumed:组件恢复工作;
  • OMX_EventOutputRendered :用作 tunnel mode 下 pts 上传给上层
  • OMX_EventDataSpaceChanged:数据空间发生变化;
  • OMX_EventOnFirstTunnelFrameReady:tunnel mode下第一帧被解出并且准备好渲染;

1.3、OMX_CALLBACKTYPE

这个结构体定义了 OMX 组件的 callback 类型,总共包含三个函数指针:

  • EventHandler:这个方法用于通知应用层OMX组件有事件发生;
  • EmptyBufferDone:这个方法用于将 input 端口的使用完的(空的) buffer 返回给应用层;这个方法是阻塞调用的,所以应用层不应该再其他线程中填充这块buffer;
  • FillBufferDone:这个方法用于将 output 端口的填充完的(满的)buffer 返回给应用层,同样的这个方法也是阻塞调用的;

1.4 OMX_BUFFERSUPPLIERTYPE

tunnel mode 相关,暂不了解。


2、OMX_Component.h

OMX_Component 头文件下定义了一个OMX组件所必要的公有接口,这个头文件将会被组件层和应用层共同使用。

2.1、struct OMX_PARAM_PORTDEFINITIONTYPE

每个组件都会有input 和 output 两个端口,每个端口都会有一个详细的信息描述,比如端口有几个buffer、端口当前的状态等等,这些信息就用 OMX_PARAM_PORTDEFINITIONTYPE来描述,结构体中有如下内容:

  • nPortIndex:端口的索引,使用较少;
  • eDir:表示当前 port 是 input 还是 output;
  • nBufferCountActual:当前端口上实际分配的buffer的数量;
  • nBufferCountMin:当前端口最少应该分配的buffer的数量;
  • nBufferSize:端口上每个buffer的大小;
  • bEnabled:当前端口是否被使能,默认是 enabled;
  • bPopulated:当前端口的数量是否已经被充满(数量等于nBufferCountActual),disable状态下端口将不会被认为是充满的;
  • eDomain:当前端口中buffer存储的数据的类型,video数据还是audio数据,用于决定端口的format类型;
  • format:表示端口中buffer的格式,不同数据类型对应于不同的格式,这将在后续了解;
  • bBuffersContiguous:buffer是否连续;
  • nBufferAlignment:buffer的对齐方式;

ACodec 中分配buffer时会先获取 port 定义,读取端口对应的 buffer 数量,后续也可能修改端口的buffer数量,另外读取输入输出格式时就是从端口定义的format中读取的。

2.2 struct OMX_COMPONENTTYPE

我们在OMX中见到的OMX_HANDLETYPE指代的就是这里的OMX_COMPONENTTYPE,它表示一个组件的句柄,通过这个句柄我们可以调用到组件的公有方法,也可以获取到组件的私有数据块(每个组件实现的方式与细节)。组件句柄由OMX Core创建,组件加载完成后,应用层可以安全的调用组件的方法。

接下来了解这个结构体中的部分内容:

  • pComponentPrivate:指向组件的私有数据块(内部实现);
  • pApplicationPrivate:指向OMX组件的调用者(client),也就是OMXNode;
  • 公有函数指针:由OMX组件实现,给client调用。

调用一个 OMX 方法后,组件的处理流程应该是这样:

  • 调用 OMX_COMPONENTTYPE 的标准方法,传入参数为 OMX_COMPONENTTYPE 自身;
  • 标准方法实现中对内部实现 pComponentPrivate 进行处理和调用,比如说 SetCallbacks 应该会把回调函数注册给 pComponentPrivate 的一个成员。

OMX Core 创建的是一个基类对象,实际调用的是我们的子类实现,大致就是这个意思。

这篇关于Android 13 - Media框架(14)- OpenMax(四)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/432019

相关文章

Android中Dialog的使用详解

《Android中Dialog的使用详解》Dialog(对话框)是Android中常用的UI组件,用于临时显示重要信息或获取用户输入,本文给大家介绍Android中Dialog的使用,感兴趣的朋友一起... 目录android中Dialog的使用详解1. 基本Dialog类型1.1 AlertDialog(

Python Dash框架在数据可视化仪表板中的应用与实践记录

《PythonDash框架在数据可视化仪表板中的应用与实践记录》Python的PlotlyDash库提供了一种简便且强大的方式来构建和展示互动式数据仪表板,本篇文章将深入探讨如何使用Dash设计一... 目录python Dash框架在数据可视化仪表板中的应用与实践1. 什么是Plotly Dash?1.1

基于Flask框架添加多个AI模型的API并进行交互

《基于Flask框架添加多个AI模型的API并进行交互》:本文主要介绍如何基于Flask框架开发AI模型API管理系统,允许用户添加、删除不同AI模型的API密钥,感兴趣的可以了解下... 目录1. 概述2. 后端代码说明2.1 依赖库导入2.2 应用初始化2.3 API 存储字典2.4 路由函数2.5 应

Python GUI框架中的PyQt详解

《PythonGUI框架中的PyQt详解》PyQt是Python语言中最强大且广泛应用的GUI框架之一,基于Qt库的Python绑定实现,本文将深入解析PyQt的核心模块,并通过代码示例展示其应用场... 目录一、PyQt核心模块概览二、核心模块详解与示例1. QtCore - 核心基础模块2. QtWid

Android Kotlin 高阶函数详解及其在协程中的应用小结

《AndroidKotlin高阶函数详解及其在协程中的应用小结》高阶函数是Kotlin中的一个重要特性,它能够将函数作为一等公民(First-ClassCitizen),使得代码更加简洁、灵活和可... 目录1. 引言2. 什么是高阶函数?3. 高阶函数的基础用法3.1 传递函数作为参数3.2 Lambda

Android自定义Scrollbar的两种实现方式

《Android自定义Scrollbar的两种实现方式》本文介绍两种实现自定义滚动条的方法,分别通过ItemDecoration方案和独立View方案实现滚动条定制化,文章通过代码示例讲解的非常详细,... 目录方案一:ItemDecoration实现(推荐用于RecyclerView)实现原理完整代码实现

Android App安装列表获取方法(实践方案)

《AndroidApp安装列表获取方法(实践方案)》文章介绍了Android11及以上版本获取应用列表的方案调整,包括权限配置、白名单配置和action配置三种方式,并提供了相应的Java和Kotl... 目录前言实现方案         方案概述一、 androidManifest 三种配置方式

最新Spring Security实战教程之Spring Security安全框架指南

《最新SpringSecurity实战教程之SpringSecurity安全框架指南》SpringSecurity是Spring生态系统中的核心组件,提供认证、授权和防护机制,以保护应用免受各种安... 目录前言什么是Spring Security?同类框架对比Spring Security典型应用场景传统

CSS @media print 使用详解

《CSS@mediaprint使用详解》:本文主要介绍了CSS中的打印媒体查询@mediaprint包括基本语法、常见使用场景和代码示例,如隐藏非必要元素、调整字体和颜色、处理链接的URL显示、分页控制、调整边距和背景等,还提供了测试方法和关键注意事项,并分享了进阶技巧,详细内容请阅读本文,希望能对你有所帮助...

Android WebView无法加载H5页面的常见问题和解决方法

《AndroidWebView无法加载H5页面的常见问题和解决方法》AndroidWebView是一种视图组件,使得Android应用能够显示网页内容,它基于Chromium,具备现代浏览器的许多功... 目录1. WebView 简介2. 常见问题3. 网络权限设置4. 启用 JavaScript5. D