android媒体--stagefright概述

2024-05-08 00:58

本文主要是介绍android媒体--stagefright概述,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

最近杂七杂八的忙碌着,前几天看了下这部分主要是stagefright模块的,所以更改下名字

做了挺长时间的Android平台的媒体开发,对之前的分析进行一个阶段性的总结。

 

一、android结构图(上下文关系)

 

 

 

二、android目录结构

自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称"AV工作者",呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)

[plain]  view plain copy
print ?
  1. |----- media  
  2. |       |  
  3. |       |-- libmedia_native   //JNI交互部分,从名字可以看出来  
  4. |       |  
  5. |       |-- libmedia          //一个服务端的代理,对应用层提供相关的接口,和服务端交互  
  6. |       |  
  7. |       |-- libmediaplayerservice //服务段 (分发器,交换机的作用,个人理解)  
  8. |       |  
  9. |       |-- libstagefright  //一个服务端的分支,支持工作  
  10. |       |  
  11. |       |-- mediaserver     //媒体进程,管理媒体一些相关信息,关注较少  
  12. |       |  
  13. |       |-- mtp           //文件夹操作媒体的相关东西  
  14. |       |  

再进一步,我们看一下stagefright的里面包括什么东东

[plain]  view plain copy
print ?
  1. |-- stagefright  
  2. |   |  
  3. |   |-- codecs   //提供解码器实现  
  4. |   |  
  5. |   |-- colorconversion   //颜色空间转换  
  6. |   |  
  7. |   |-- foundation   //基本数据结构的实现  
  8. |   |  
  9. |   |-- httplive   //m3u8解析  
  10. |   |  
  11. |   |-- id3        // ID3 TAG解析(一般用于MP3格式的metadata容器)  
  12. |   |  
  13. |   |-- include    //基本头文件  
  14. |   |   
  15. |   |-- matroska   //matroska文件解析  
  16. |   |  
  17. |   |-- mpeg2ts    //mpeg2ts文件解析和数据获取一些处理  
  18. |   |  
  19. |   |-- mp4        //MP4的格式解析  
  20. |   |  
  21. |   |-- omx        //IOMX接口实现  
  22. |   |  
  23. |   |-- rtsp       //rtsp文件解析  
  24. |   |  
  25. |   |-- wifi-display //关于wifi的处理  
  26. |   |  
  27. |   |-- yuv         //YUV数据的处理  
  28. |   |  

 三、“演讲恐惧着”的接口事件

本地媒体的事件处理接口

 

 

 stage fright 英文的意思就: 演讲恐惧者,AwesomePlayer 功能强大的播放器

在android中也是这个这样,“演讲恐惧者”有强大的接口和事件处理接口,但是,它不去实现,而是全部通过AwesomePlayer来完成的,在其初始化时,就直接实例化功能强大播放器并且对其设置监听。代码如下:

 

StageFrightPlayer.cpp

[cpp]  view plain copy
print ?
  1. StagefrightPlayer::StagefrightPlayer()  
  2.     : mPlayer(new AwesomePlayer) {  
  3.     ALOGV("StagefrightPlayer");  
  4.   
  5.     mPlayer->setListener(this);  
  6. }  

接口基本调用流程:

1.Java层通过JNI调用C++侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端,分别实例化相关播放器,这里会把接口事件调用到具体的播放器如:本地媒体调用stagefright,流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的,最后会调用Nuplayer

 

媒体事件类型

[cpp]  view plain copy
print ?
  1. enum media_event_type {  
  2.     MEDIA_NOP               = 0, // interface test message  
  3.     MEDIA_PREPARED          = 1, //媒体准备完毕  
  4.     MEDIA_PLAYBACK_COMPLETE = 2, //播放事件  
  5.     MEDIA_BUFFERING_UPDATE  = 3, //Buffer更新事件,更新的值是百分比  
  6.     MEDIA_SEEK_COMPLETE     = 4, //seek事件  
  7.     MEDIA_SET_VIDEO_SIZE    = 5, //视频尺寸  
  8.     MEDIA_TIMED_TEXT        = 99, //字幕相关的,基本不用  
  9.     MEDIA_ERROR             = 100, //错误  
  10.     MEDIA_INFO              = 200, //媒体详细信息  
  11. }; 

stagefright模块结构

 

                                                                                             stagefright模块结构图

 

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据,并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口,其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster,而OMXMaster调用OMXPluginBase的接口,这里也可以获取外部的Codec的插件,最终调用对应的解码组建来完成解码,不同解码组件不太相同,后面会做介绍

7.解码完成后,通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块,实现渲染,从而给用户提供了画面

这篇关于android媒体--stagefright概述的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/968872

相关文章

Android数据库Room的实际使用过程总结

《Android数据库Room的实际使用过程总结》这篇文章主要给大家介绍了关于Android数据库Room的实际使用过程,详细介绍了如何创建实体类、数据访问对象(DAO)和数据库抽象类,需要的朋友可以... 目录前言一、Room的基本使用1.项目配置2.创建实体类(Entity)3.创建数据访问对象(DAO

Android WebView的加载超时处理方案

《AndroidWebView的加载超时处理方案》在Android开发中,WebView是一个常用的组件,用于在应用中嵌入网页,然而,当网络状况不佳或页面加载过慢时,用户可能会遇到加载超时的问题,本... 目录引言一、WebView加载超时的原因二、加载超时处理方案1. 使用Handler和Timer进行超

水位雨量在线监测系统概述及应用介绍

在当今社会,随着科技的飞速发展,各种智能监测系统已成为保障公共安全、促进资源管理和环境保护的重要工具。其中,水位雨量在线监测系统作为自然灾害预警、水资源管理及水利工程运行的关键技术,其重要性不言而喻。 一、水位雨量在线监测系统的基本原理 水位雨量在线监测系统主要由数据采集单元、数据传输网络、数据处理中心及用户终端四大部分构成,形成了一个完整的闭环系统。 数据采集单元:这是系统的“眼睛”,

Android实现任意版本设置默认的锁屏壁纸和桌面壁纸(两张壁纸可不一致)

客户有些需求需要设置默认壁纸和锁屏壁纸  在默认情况下 这两个壁纸是相同的  如果需要默认的锁屏壁纸和桌面壁纸不一样 需要额外修改 Android13实现 替换默认桌面壁纸: 将图片文件替换frameworks/base/core/res/res/drawable-nodpi/default_wallpaper.*  (注意不能是bmp格式) 替换默认锁屏壁纸: 将图片资源放入vendo

Android平台播放RTSP流的几种方案探究(VLC VS ExoPlayer VS SmartPlayer)

技术背景 好多开发者需要遴选Android平台RTSP直播播放器的时候,不知道如何选的好,本文针对常用的方案,做个大概的说明: 1. 使用VLC for Android VLC Media Player(VLC多媒体播放器),最初命名为VideoLAN客户端,是VideoLAN品牌产品,是VideoLAN计划的多媒体播放器。它支持众多音频与视频解码器及文件格式,并支持DVD影音光盘,VCD影

Java 创建图形用户界面(GUI)入门指南(Swing库 JFrame 类)概述

概述 基本概念 Java Swing 的架构 Java Swing 是一个为 Java 设计的 GUI 工具包,是 JAVA 基础类的一部分,基于 Java AWT 构建,提供了一系列轻量级、可定制的图形用户界面(GUI)组件。 与 AWT 相比,Swing 提供了许多比 AWT 更好的屏幕显示元素,更加灵活和可定制,具有更好的跨平台性能。 组件和容器 Java Swing 提供了许多

android-opencv-jni

//------------------start opencv--------------------@Override public void onResume(){ super.onResume(); //通过OpenCV引擎服务加载并初始化OpenCV类库,所谓OpenCV引擎服务即是 //OpenCV_2.4.3.2_Manager_2.4_*.apk程序包,存

【编程底层思考】垃圾收集机制,GC算法,垃圾收集器类型概述

Java的垃圾收集(Garbage Collection,GC)机制是Java语言的一大特色,它负责自动管理内存的回收,释放不再使用的对象所占用的内存。以下是对Java垃圾收集机制的详细介绍: 一、垃圾收集机制概述: 对象存活判断:垃圾收集器定期检查堆内存中的对象,判断哪些对象是“垃圾”,即不再被任何引用链直接或间接引用的对象。内存回收:将判断为垃圾的对象占用的内存进行回收,以便重新使用。

从状态管理到性能优化:全面解析 Android Compose

文章目录 引言一、Android Compose基本概念1.1 什么是Android Compose?1.2 Compose的优势1.3 如何在项目中使用Compose 二、Compose中的状态管理2.1 状态管理的重要性2.2 Compose中的状态和数据流2.3 使用State和MutableState处理状态2.4 通过ViewModel进行状态管理 三、Compose中的列表和滚动

Android 10.0 mtk平板camera2横屏预览旋转90度横屏拍照图片旋转90度功能实现

1.前言 在10.0的系统rom定制化开发中,在进行一些平板等默认横屏的设备开发的过程中,需要在进入camera2的 时候,默认预览图像也是需要横屏显示的,在上一篇已经实现了横屏预览功能,然后发现横屏预览后,拍照保存的图片 依然是竖屏的,所以说同样需要将图片也保存为横屏图标了,所以就需要看下mtk的camera2的相关横屏保存图片功能, 如何实现实现横屏保存图片功能 如图所示: 2.mtk