Android多媒体开发【9】-- OpenMax IL简介

【多媒体编解码】Openmax IL (二)Android多媒体编解码Component架构 带着三个问题学习这个部分: 问题1:Android中间各种编解码库的加载与管理? 问题1:Android如何确定使用那个编解码器并且初始化? 问题2:Android如何集成一个新的编解码器,硬件平台相关/非硬件平台相关两种情况? 按照OpenMax IL的简述,编解码架构中间至关重要的是如下两点: 1,各个不同功能的conponent 2,平台商实现的“media.resouce_mana 阅读详情

1.openmax 简介

OpenMax是一个多媒体应用程序的框架标准,由NVIDIA公司和Khronos在2006年推出。
OpenMAX分为3层:
第一层:OpenMax DL(Development Layer,开发层)
第二层:OpenMax IL(Integration Layer,集成层)
第三层:OpenMax AL(Appliction Layer,应用层)


2.OpenMax IL简介

OpenMax IL 处在中间层的位置,OpenMAX IL 作为音频,视频和图像编解码器 能与多媒体编解码器交互,并以统一的行为支持组件(例如资源和皮肤)。这些编解码器或许是软硬件的混合体,对用户是 的底层接口应用于嵌入式或 / 和移动设备。它提供了应用程序和媒体框架, 透明的。本质上不存在这种标准化的接口,编解码器供 应商必须写私有的或者封闭的接口,集成进移动设备。 IL 的主要目的 是使用特征集合为编解码器提供一个系统抽象,为解决多个不同媒体系统之间轻便性的问题。

OpenMax IL 的目的就是为硬件平台的图形及音视频提供一个抽象层,可以为上层的应用提供一个可跨平台的支撑。这一点对于跨平台的媒体应用来说十分重要。本人也接触过几家高清解码芯片,这些芯片底层的音视频接口虽然功能上大致相同,但是接口设计及用法上各有不同,而且相差很多。你要想让自己开发的媒体应用完美的运行在不同的硬件厂商平台上,就得适应不同芯片的底层解码接口。这个对于应用开发来说十分繁琐。所以就需要类似于OpenMax IL 这种接口规范。应用假如涉及到音视频相关功能时,只需调用这些标准的接口,而不需要关心接口下方硬件相关的实现。假如换了硬件平台时,只需要把接口层与硬件适配好了就行了。上层应用不需要频繁改动。
你可以把OpenMax IL 看作是中间件中的porting层接口,但是现在中间件大部分都是自家定义自己的。
OpenMax 想做的就是定义一个这样的行业标准,这样媒体应用、硬件厂商都遵循这种标准。硬件厂商将OpenMax 与处理器一并提供,上层的多媒体框架想要用到硬件音视频加速功能时,只需遵循openmax的接口就可以扩平台运行。
可喜的,现在越来越多的多媒体框架及多媒体应用正在遵循openmax标准,包括各种知名的媒体开源软件。越来越多的芯片厂商也在遵循openmax的标准。对于现在的音视频编解码来说,分辨率越来越高,需要芯片提供硬件加速功能是个大的趋势。我相信 接口的标准化是一定要走的。

3.OpenMax IL结构

OpenMax IL主要内容如下所示。

 客户端(Client):OpenMax IL的调用者

 组件(Component):OpenMax IL的单元,每一个组件实现一种功能

 端口(Port):组件的输入输出接口

 隧道化(Tunneled):让两个组件直接连接的方式

组件、端口、隧道化思想和GStreamer 中的 pipeline 十分类似。
Component 实现单一功能、或是 Source、Host、Accelerator和Sink。
Port 是  Component对外的输入输出口。
通过 Tunneled 将单一Component串联起来形成一个完整功能。
OpenMax Core是辅助各个组件运行的部分
        

4.Component内部结构


Component 的基本模型如上图,可以把它想象成一个加工车间:

输入端口输入材料

输出端口输出加工完成品

通过handle 来给车间发送指令或者或者状态

将事件及时发送给车间外部管理者




openmax用法 OpenMax是一个多媒体应用程序的框架标准。它自上而下分为三层,Application Layer, Integration Layer和Development Layer。应用层规定了应用程序和多媒体中间层的标准接口,使应用程序的移植性更好。集成层定义了多媒体组件的接口,使得多媒体框架能以一种统一的方式访问多媒体Codec和组件,以便在嵌入式流媒体框架中快速集成加速编解码器。开发层为Codec厂商和硬件厂商提供了一套API,使开发更加便捷。 ... 阅读详情

相关推荐

Android Q多媒体框架升级:手把手带你理解Codec2.0如何替换OpenMAX

本文深入解析Android Q多媒体框架升级中Codec2.0如何替代OpenMAX的技术细节与实践指南。通过对比两种架构的核心差异,详细介绍了Codec2.0的组件化设计、缓冲区管理革新及异步处理模型,为开发者提供从OpenMAX迁移到Codec2.0的完整路径和优化建议。

weixin_27051161的博客 379

OpenMAX/IL: OMX IL 学习笔记【1】- 结构框架

一、OpenMax简介 OpenMAX(Open Media Acceleration的缩写,开放多媒体加速层)是一个多媒体应用程序的标准。由NVIDIA公司和Khronos™在2006年推出。 它是无授权费的、跨平台的C语言程序接口序列,这些接口对音频、视频、静态图片的常用操作进行封装。 它包括三层,自上而下分别是应用层(AL)、集成层(IL)和开发层(DL)。 OpenMAX AL:Application Layer,应用和多媒体中间层的标准接口,使得应用在多媒体接口上具有了可移植性。 OpenMAX

houxiaoni01的博客 4811

i.MX处理器Android移植与优化:从内核适配到硬件加速实战

嵌入式系统开发中,将Android操作系统移植到特定硬件平台是一项核心任务,其关键在于实现软件架构与硬件特性的高效协同。Android基于Linux内核,通过硬件抽象层(HAL)为上层应用提供统一的硬件访问接口。移植工作的核心原理在于打通从应用框架、系统运行库到底层驱动的完整调用链,其技术价值在于充分释放专用硬件(如VPU、GPU)的加速潜力,从而在多媒体处理、图形渲染等场景实现高性能与低功耗。本文以NXP i.MX系列应用处理器为例,深入剖析Android移植与优化的完整路径,涵盖内核定制、HAL实现及针

chouchijiao8952的博客 406

OpenMax IL层设计分析总结

文章目录一、OpenMax的设计理念与特性点设计理念---媒体框架的抽象/可移植性/异步处理/组件组合设计特性---组件化API/方便新增解码器/方便扩展/支持动态链接/可配置二、OpenMax的设计点分析2.1 【兼容性】版本兼容性设计---组件版本号\指针函数\入参void指针2.2 【扩展性】新增组件设计---动态库新增组件2.3 【扩展性】新增组件新增私有功能 设计---扩展参数设置类型枚举2.4 【性能】异步处理性能设计---配置异步通知 / buffer轮转回调通知2.5 【编解码领域】组件间t

runafterhit的博客 1114

Android MediaRecorder框架深度解析:从API调用到底层硬件编码

在Android音视频开发中,录制功能是核心需求之一,其背后依赖的多媒体框架涉及复杂的层级结构与数据流。理解其工作原理需要从基础概念切入:Android系统通过分层架构(应用层、Native框架层、服务与硬件抽象层)来管理多媒体任务,其中OMX(OpenMAX Integration Layer)组件是实现硬件加速编解码的关键接口。这一设计使得应用能够高效利用芯片厂商提供的硬件编码器,显著提升性能并降低功耗。在工程实践中,开发者通过MediaRecorder API进行录制,数据会经历采集、编码、复用等流程

weixin_34357436的博客 281

硬件加速与 OMX/Codec2:解密编解码器的底层世界

深入解析 Android 两代编解码框架 OMX(ACodec)与 Codec2(CCodec)的架构差异,涵盖 C2Component 接口、C2Buffer 内存模型、硬件编解码能力查询、Tunneled 模式、Vendor 扩展参数,以及 AV1 硬件解码等 Android 15 新特性

Cheson的专栏 630

OpenMax总结(二)OpenMax IL层结构

更详细内容见官方spechttps://www.khronos.org/openmax/【OpenMax IL层结构】图中的虚线中的内容是OpenMax IL层的内容,其主要实现了OpenMax IL中的各个组件(Component)。对下层,OpenMax IL可以调用OpenMax DL层的接口,也可以直接调用各种Codec实现。对上层,OpenMax IL可以给OpenMax AL 层等框架...

先行 “1” 步 2371

openmax实现

openmax实现 包装了,ffmpeg,libogg,libmad,写了读取,解复用,解码,slink等组件。

Android多媒体开发【9】-- OpenMax IL简介

原文链接地址:http://blog.youkuaiyun.com/tx3344/article/details/8106545 1.openmax 简介 http://www.khronos.org/openmax/ OpenMax是一个多媒体应用程序的框架标准,由NVIDIA公司和Khronos在2006年推出。 OpenMAX分为3层: 第一层:OpenMax DL(Devel

houyizi337825770的专栏 1384

51单片机超声波测距数码管显示并报警(Proteus 仿真)

HC-SR04超声波 实物图 使用方法 1、给TRIG端口至少10us 的高电平信号 2、模块自动发送 8 个 40khz 的方波,自动检测是否有信号返回 3、有信号返回,ECHO端口会输出一个高电平,高电平持续的时间就是超声波从发射到返回的时间 计算的话这里就不考虑温度的影响直接用声速340m/s Proteus仿真 HC-SR04可以用Proteus中的SRF04代替 下面附上代码 ...

m0_46254883的博客 1万+

Linux系统下SAPGUI安装包选择与避坑指南

本文详细介绍了在Linux系统下选择和安装SAPGUI安装包的策略与避坑指南。重点解析了不同版本安装包的关键区别,特别是Linux版必须包含linux-lib.jar和linux64-lib.jar文件,避免误用Mac或Windows版导致的兼容性问题。文章还提供了针对Ubuntu、RHEL等不同Linux发行版的安装实战指南,以及常见报错的解决方案,帮助用户顺利完成SAPGUI的安装与配置。

weixin_28366353的博客 675

Android-video openMAX详解

本文参考: http://zhoujinjian.cc/2018/09/06/Android%20Video%20System%EF%BC%884%EF%BC%89%EF%BC%9AAndroid%20Multimedia%20-%20OpenMax%E5%AE%9E%E7%8E%B0%E5%88%86%E6%9E%90/index.html 1. 相关代码 /hardware/qcom/me...

cheriyou_的博客 3614

Python多进程实战:用BaoStock高效下载股票历史数据的5个优化技巧

本文详细介绍了使用Python多进程技术通过BaoStock高效下载股票历史数据的5个优化技巧。从理解BaoStock的数据获取机制到进程池配置、智能任务分片、异常处理及性能监控,帮助开发者显著提升数据下载效率,特别适合量化交易领域的数据采集需求。

weixin_30369041的博客 458

OpenMax框架

OpenMAX open media acceleration:开放多媒体加速器。跨平台的软件抽象层,用来处理多媒体。 注意:这是一个标准,而不是具体的实现。 openmax建立了三个层次上的标准。 AL层:应用层。完全免费,跨平台的开放标准。提供创建,控制player和recorder对象;连接player,recoreder与配置输入和输出对象(content reader/writer,audio inputs/outputs,display windows) IL层:集成层。IL层的API定

ambitions666的博客 1141

使用Xpath语法爬取豆瓣读书Top250

使用Xpath语法爬取豆瓣读书Top250 使用的软件是Spyder 网页地址:https://book.douban.com/top250?start=0 直接上代码: # -*- coding: utf-8 -*- """ Created on Thu Apr 30 18:35:17 2020 @author: ASUS """ import requests import csv fr...

weixin_43987253的博客 2082

2026最新华为OD机试新系统机考真题- 真题题库目录|全覆盖题库 + 逐点算法考点详解

2026年4月1日起,华为OD机试正式切换至新系统模式!采用力扣模式,无需自己写输入! 难度大幅度降低。正在备考华为OD机试的同学,优先刷新系统机试真题,可大幅提升通过率。 新系统考题考点与旧版一致,无需重新适应。本专栏所有算法题均配有详细思路解析,并提供C语言、JS、C++、Python、Go、Java多语言源码实现。订阅后私信即可开通专属OJ刷题权限,高效备考一次上岸!

算法大师! 2633

OpenMax在Android上的实现

http://blog.youkuaiyun.com/xietao_live_cn/article/details/6423277 摘要:本文简要介绍了OpenMax 的集成层,并阐述了其在Android上的实现和运行过程。 关键字:OMX, 多媒体框架, IL, Android, Stagefright 1、OpenMax 集成层介绍 OpenMax是一个多媒体应用程序的框架标准。它自上而下分为

Gabby 1549

从原理到落地:Java+TensorRT打造YOLO模型GPU极致推理方案

Java+TensorRT的YOLO模型GPU加速方案,核心是通过JNI桥接实现Java与TensorRT的高效交互,结合TensorRT的底层优化能力,最大化GPU算力。该方案既保留了Java后端的工程化优势(如易维护、生态完善),又解决了AI模型推理的性能瓶颈,可落地于实时视频分析、智能监控、工业质检等场景。基于TensorRT Dynamic Shape实现多尺寸输入的自适应优化;结合Java的协程(Virtual Thread)提升异步推理的并发效率;

2601_94871597的博客 766

Android OMAP4 Ducati 和 OpenMax IL介绍

Android OMAP4 Ducati 和 OpenMax IL介绍 Update TI 发布的这个文章,个人感觉特别好,想研究的朋友可以看一下: http://processors.wiki.ti.com/index.php/OMX_EZSDK_Examples 转载一篇很好的文章,地址:http://book.51cto.com/art/201101/243147.htm,感谢分

tigerly的专栏 650

Qt Creator牵手DeepSeek,开启AI开发新征程

Qt Creator 是一款功能强大的跨平台集成开发环境(IDE),专为 Qt 应用程序开发量身定制。它支持在编程过程中使用 GitHub Copilot 等编码助手,能帮助开发者为桌面、移动端和嵌入式平台创建软件。在代码编辑方面,Qt Creator 具备代码补全、语法突出显示、重构等功能,内置文档也随手可得,极大提高了代码编写的效率和准确性。

远程部署调试 运行安装 项目调试 二次开发 项目技术新 持续迭代 部分源码免费分享 7189

SLAM Cartographer(18)后端优化问题求解器

了解经过闭环检测构建了子图与节点之间的约束之后,通过后端优化求解器进行优化求解。核心是基于Ceres库进行SPA(Sparse Pose Adjustment)的优化方法,把后端优化问题描述成为一个最小二乘的问题求解

氢键H-H 5680

openmax调用时序(翻译)

版权声明:原创作品,允许转载,转载时请务必以超链接形式标明文章原始出处 、作者信息和本声明。否则将追究法律责任。http://jianhuazhang2008.blog.163.com/ 目录 1引言... 3 2 总的调用时序图... 3 3 OpenCore和OMX core/组件交互... 3 3.1 OMX核心初始化... 3 3.2 OMX组件实例、功能及端

zhangwenyang2005的专栏 1575

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

Openmax IL (二)Android多媒体编解码Component

带着三个问题学习这个部分:问题1:Android中间各种编解码库的加载与管理?问题1:Android如何确定使用那个编解码器并且初始化?问题2:Android如何集成一个新的编解码器,硬件平台相关/非硬件平台相关两种情况? 按照OpenMax IL的简述,编解码架构中间至关重要的是如下两点:1,各个不同功能的conponent2,平台商实现的“media.resouce_manager...

weixin_34291004的博客 378

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

android 多媒体框架服务之StagefrightPlayer和OMXCodec实现原理学习

https://www.2cto.com/kf/201608/542839.html 1. 框架结构 1.1StageFright和openCore和NuPlayer的关系 上图可知,stagefright是在MediaPlayerService这一层加入的,和opencZ喎�"/kf/ware/vc/" target="_blank" class="keylink">vcmXK...

haigand的专栏 1333

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

开始TI OMAP4 项目

TI还没有量产的OMAP4,有机会接触到最前沿的多媒体处理器平台 OMAP4- 准确地讲,是OMAP4430,是个很复杂的系统 HOST-SLAVE架构 从下图可以看出,左边HOST是Dual Core Coretex-A9处理器,主要运行HLOS(High Level OS,比如Linux,Android系统) 右边虚线框是SLAVE,就是传说中的Ducati子系统

我们这里还有鱼······ 1210

StageFright + OMX小结

转自:http://blog.chinaunix.net/u1/57901/ ------------------------------------------- 看了将近1个多月的stagefright和OMX IL,感觉对框架有了一点感觉,趁感觉还在

Simba's 719
上一篇: Android多媒体开发【8】-- AwesomePlayer基本框架及播放流程
下一篇: Android多媒体开发【10】-- android中OpenMax的实现【1】整体框架
tx3344
博客等级 码龄18年 362粉丝 30原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值