stagefright概述「建议收藏」

stagefright概述「建议收藏」一、android结构图(上下文关系)   二、android目录结构 自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称”AV工作者”,呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)  [plain]viewplaincopyprint?|—– m

大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全家桶1年46,售后保障稳定

一、android结构图(上下文关系)

 

 stagefright概述「建议收藏」

 

二、android目录结构

 

自从android4.2版本之后,媒体的相关代码都放到framework/av/的目录中,俗称”AV工作者”,呵呵(本地代码不是太健全,目录我手动敲,公司代码健全,直接导出目录树)

 

 

  1. |—– media  
  2. |       |  
  3. |       |– libmedia_native   //JNI交互部分,从名字可以看出来  
  4. |       |  
  5. |       |– libmedia          //一个服务端的代理,对应用层提供相关的接口,和服务端交互  
  6. |       |  
  7. |       |– libmediaplayerservice //服务段 (分发器,交换机的作用,个人理解)  
  8. |       |  
  9. |       |– libstagefright  //一个服务端的分支,支持工作  
  10. |       |  
  11. |       |– mediaserver     //媒体进程,管理媒体一些相关信息,关注较少  
  12. |       |  
  13. |       |– mtp           //文件夹操作媒体的相关东西  
  14. |       |  

 

再进一步,我们看一下stagefright的里面包括什么东东

 

  1. |– stagefright  
  2. |   |  
  3. |   |– codecs   //提供解码器实现  
  4. |   |  
  5. |   |– colorconversion   //颜色空间转换  
  6. |   |  
  7. |   |– foundation   //基本数据结构的实现  
  8. |   |  
  9. |   |– httplive   //m3u8解析  
  10. |   |  
  11. |   |– id3        // ID3 TAG解析(一般用于MP3格式的metadata容器)  
  12. |   |  
  13. |   |– include    //基本头文件  
  14. |   |   
  15. |   |– matroska   //matroska文件解析  
  16. |   |  
  17. |   |– mpeg2ts    //mpeg2ts文件解析和数据获取一些处理  
  18. |   |  
  19. |   |– mp4        //MP4的格式解析  
  20. |   |  
  21. |   |– omx        //IOMX接口实现  
  22. |   |  
  23. |   |– rtsp       //rtsp文件解析  
  24. |   |  
  25. |   |– wifi-display //关于wifi的处理  
  26. |   |  
  27. |   |– yuv         //YUV数据的处理  
  28. |   |  

 

 三、“演讲恐惧着”的接口事件

 

 

本地媒体的事件处理接口

 

stagefright概述「建议收藏」

 

 stage fright 英文的意思就: 演讲恐惧者,AwesomePlayer 功能强大的播放器

在android中也是这个这样,“演讲恐惧者”有强大的接口和事件处理接口,但是,它不去实现,而是全部通过AwesomePlayer来完成的,在其初始化时,就直接实例化功能强大播放器并且对其设置监听。代码如下:

 

StageFrightPlayer.cpp

  1. StagefrightPlayer::StagefrightPlayer()  
  2.     : mPlayer(new AwesomePlayer) {  
  3.     ALOGV(“StagefrightPlayer”);  
  4.   
  5.     mPlayer->setListener(this);  
  6. }  

 

接口基本调用流程:

 

1.Java层通过JNI调用C++侧的mediaplayer相关接口

2.mediaPlayerService中创建服务器端客户端,分别实例化相关播放器,这里会把接口事件调用到具体的播放器如:本地媒体调用stagefright,流媒体调用NuPlayerDriver

3.stagefright会调用AwesomePlayer相应接口,其实流媒体侧和本地媒体类似的,最后会调用Nuplayer

 

媒体事件类型

  

  1. enum media_event_type {  
  2.     MEDIA_NOP               = 0, // interface test message  
  3.     MEDIA_PREPARED          = 1, //媒体准备完毕  
  4.     MEDIA_PLAYBACK_COMPLETE = 2, //播放事件  
  5.     MEDIA_BUFFERING_UPDATE  = 3, //Buffer更新事件,更新的值是百分比  
  6.     MEDIA_SEEK_COMPLETE     = 4, //seek事件  
  7.     MEDIA_SET_VIDEO_SIZE    = 5, //视频尺寸  
  8.     MEDIA_TIMED_TEXT        = 99, //字幕相关的,基本不用  
  9.     MEDIA_ERROR             = 100, //错误  
  10.     MEDIA_INFO              = 200, //媒体详细信息  
  11. };  

stagefright模块结构

 

stagefright概述「建议收藏」

                                                                                             stagefright模块结构图

 

1.mediaPlayerservice调用Stagefright相应的接口

2.Stagefright调用AwesomePlayer相应的接口

3.AwesomePlayer调用OMXCode读取ES数据,并且进行解码的处理

4.OMXCodec调用MediaSource的read函数来获取音视频的数据

5.OMXCodec调用Android的IOMX接口,其实就是Stagefrightde中的 OMX实现

6. OMX调用OMXMaster,而OMXMaster调用OMXPluginBase的接口,这里也可以获取外部的Codec的插件,最终调用对应的解码组建来完成解码,不同解码组件不太相同,后面会做介绍

7.解码完成后,通过OMXcodec返回的裸码流数据会在Awesomeplayer中调用Render模块,实现渲染,从而给用户提供了画面

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/203974.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • QT5 使用QCustomplot绘制频谱瀑布图并封快速傅里叶变换fft类

    QT5 使用QCustomplot绘制频谱瀑布图并封快速傅里叶变换fft类近期想要做个上位机显示SDR设备的信号频谱,频谱瀑布图展示最为直观,经过多方评估比较最后选择了QCustomsplot图形库,相比于其他选择比如修改RGB像素刷新图片来说这种方式要简单的多,先做了个demo出来试试效果,话不多说先上动图。下面介绍方方法:第一步,QT没有自带QCustomplot库需要自行下载,实际上就是一个qcustomplot.h和qcustomplot.cpp文件,添加进工程就可以了,不想下载的后面我会上传de…

    2022年10月16日
    0
  • 内存屏障 – MemoryBarrier[通俗易懂]

    内存屏障 – MemoryBarrier[通俗易懂]处理器的乱序和并发执行目前的高级处理器,为了提高内部逻辑元件的利用率以提高运行速度,通常会采用多指令发射、乱序执行等各种措施。现在普遍使用的一些超标量处理器通常能够在一个指令周期内并发执行多条指令。处理器从L1I-Cache预取了一批指令后,就会分析找出那些互相没有关联可以并发执行的指令,然后送到几个独立的执行单元进行并发执行。比如下面这样的代码(假定编译器不做优化):  z

    2022年7月12日
    15
  • 常用的搜索引擎有哪些(公认最好的3种搜索引擎)「建议收藏」

    常用的搜索引擎有哪些(公认最好的3种搜索引擎)「建议收藏」搜索引擎无论工作还是生活都无法避免,哪个引擎更适合使用?接下来用最为常用的baidu,bing,google做个简单对比。首先用baidu以现在最火的‘深度学习’为关键字进行搜索。我的2K分辨率的显示器最后一行才能看到一些有用的信息,最常用的1080P分辨率第一页是不可能有正确结果了。深度学习百度搜索结果(广告有点儿多)微软的bing搜索引擎支持国内版和国际版,首先用国内版对‘深度学习’关键字进行搜索。bing搜索结果(质量还不错,无广告!)使用国际版对相同的‘深度学习’关键字

    2022年5月18日
    81
  • ,试着写一些东西为自己的程序猿!

    ,试着写一些东西为自己的程序猿!

    2022年1月13日
    36
  • 隐藏窗口任务栏图标的三种方法

    隐藏窗口任务栏图标的三种方法本文介绍三种方法,可以实现隐藏窗口在任务栏中的图标。其中前两种比较坑爹,不建议使用。转载:原文:https://www.xuebuyuan.com/1338887.html方法1:ModifyStyleEx(WS_EX_APPWINDOW,WS_EX_TOOLWINDOW);为窗口设置WS_EX_TOOLWINDOW属性。会有以下效果:1.窗口图标不在任务栏显…

    2022年7月19日
    11
  • es6数组和对象常用方法

    es6数组和对象常用方法数组forEach()方法对数组的每个元素执行一次给定的函数。vararr=[1,2,3]arr.forEach((value,index)=>{console.log(‘数组值:’+value);console.log(‘数组索引:’+index);})map()方法创建一个新数组,其结果是该数组中的每个元素都调用一次提供的函数后的返回值。vararr=[1,2,3]vararr1=arr.map((value,in

    2022年5月26日
    46

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号