android ---Using java surface on the native side

最新推荐文章于 2025-03-18 13:31:57 发布
最新推荐文章于 2025-03-18 13:31:57 发布 · 156 阅读 · 0
文章标签：

#java #移动开发

本文介绍如何通过JNI在Android的Native层直接进行视频渲染，以此提高VoIP和视频播放器等应用的性能。主要步骤包括Java层创建Surface并传递给Native层，在Native层注册、提交和注销缓冲区。

对于 android上的 voip及视频播放器类应用，为提高效率，把视频数据的渲染工作放在native层对提供性能有很大帮助，只需在java层创建一块surface，剩下的工作由native层处理，

无需转换为rgb格式到java层，画面控制仍然交给应用层。

大致过程：

java层创建surface,jni方式传给native层，native层在此surface上渲染

native层大致过程：

1. registerBuffers

2. postBuffer

3. unregisterBuffer


问题：native层获取Isurface没有权限，因为其是surface类的私有函数，需要修改framework 代码。

some good links :


http://matthiyosi.blogspot.com/2009/10/using-surface-in-android-native-code.html


http://matthiyosi.blogspot.com/2009/10/using-android-mediaplayer-framework-to.html

https://groups.google.com/forum/?fromgroups#!topic/android-developers/W3nVRXG4JD0

piperzero
关注
AI4S - 结构生物学中的机器学习 (NIPS MLSB Workshop) 教程
AGI
07-04 641
结构生物学是对于蛋白质和其他生物分子 3D 结构或形状的研究，机器学习算法的突破已经改变了结构生物学。
Android4.4 Surface从java到native的创建过程
ywlyg的专栏
04-19 1142
研究Surface的创建流程需要一个精简的流程，不然跳转太多，脑子都乱了。先讲一个大致的过程：ViewRootImpl在构造时会new一个Surface，在relayoutWindow方法中传入mSurface，这个跨进程的调用会在binderserver端新构造一个Surface，在WMS中构造SurfaceControl，然后将生成的SurfaceControl传入binderserver端的...
Android Surface 介绍
mlianghua的专栏
10-06 3522
<br />转自[url=http://blog.sina.com.cn/s/blog_5e71b14f0100c75g.html~type=v5_one& amp;label=rela_nextarticle]http://blog.sina.com.cn/s/blog_5e71b14f0100c75g.html~type=v5_one&label=rela_nextarticle[/url]<br /><br /> Android 技术专题系列之九 －－ 图形系统<br /> 本文试图讲述Andr
2021-09-10：Native MOS管到底是什么？
热门推荐
weixin_48307970的博客
09-10 1万+
在标准逻辑工艺中，有时候我们会见到Native MOS管，什么叫做Native MOS管呢？ Native MOS实际就是阈值电压接近为零的管子，实际上就是耗尽管。但是为什么叫做Native MOS呢？ 原来是最早的MOS制程中由于氧化层带有电荷，很难做很干净的氧化层，所以做出来的NMOS，氧化层本身带有正电荷，导致未加正电压就导通了。当今这种阈 值电压接近0的NMOS可不是通过氧化层中带电来完成的，而是通过调整沟道参杂来完成的。但是结果一样，于是还是叫Native MOS管。 这种Native MOS管一
Android 原生绘制
AndroidStudyDay的博客
03-18 677
SurfaceView ​ Activity的View hierachy的树形结构，最顶层的DecorView，也就是根结点视图，在SurfaceFlinger中有对应的Layer。 ​ 对于具有SurfaceView的窗口来说，每一个SurfaceView在SurfaceFlinger服务中还对应有一个独立的Layer，用来单独描述它的绘图表面，以区别于它的宿主窗口的绘图表面。 ​ 在WMS和S...
【Android FFMPEG 开发】FFMPEG ANativeWindow 原生绘制 ( 设置 ANativeWindow 缓冲区属性 | 获取绘制缓冲区 | 填充数据到缓冲区 | 启动绘制 )
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
03-11 3073
I . FFMPEG ANativeWindow 原生绘制 前置操作 II . FFMPEG 原生绘制流程 III . 设置 ANativeWindow 绘制窗口属性 ANativeWindow_setBuffersGeometry ( ) IV . 获取 ANativeWindow 原生绘制的 ANativeWindow_Buffer 绘制缓冲区 V . 填充图像图像数据到 ANativeWindow_Buffer 绘制缓冲区 VI . 启动绘制
android 使用NativeWindow渲染RGB视频
Canok
06-25 3792
《Android native 层使用opengl渲染YUV420p和NV12》 《opengl 叠加显示文字》 《android studio 编译freeType》 android native渲染图像的三种方式： 1.0 java层canvas, 然后在native层修改canvas的bitmap缓存区 2.0 使用opengl 3.0 使用nativeWindow 直接渲染 这里写个demo，使用nativeWindow直接渲染RGBA8888 视频序列。 效果： 需要一个RGBA8888格式.
Android -- MediaPlayer内部实现简析 mark~ 巨详细！！！
weixin_42082222的博客
03-07 1112
Android -- MediaPlayer内部实现简析 转载：https://www.cnblogs.com/zhchoutai/p/8715660.html 在之前的博客中，已经介绍了使用MediaPlayer时要注意的内容。如今，这里就通过一个MediaPlayer代码实例，来进一步分析MediaPlayer内部是怎样运作、实现的；当然这里的分析仅仅截止究竟层调用播放器之前，由于播放器这...
ReactNative源码分析之ReactRootView
ki4yous的博客
04-30 817
当前分析的ReactNative版本为0.61.5: 首先来看ReactRootView的定义： /** * Default root view for catalyst apps. Provides the ability to listen for size changes so that a UI * manager can re-layout its elements. It dele...
【期刊】【IEEE 智能交通系统汇刊（T-ITS）】【IEEE Transactions on Intelligent Transportation Systems (T-ITS)】
wq6qeg88的博客
03-18 2459
作者还应意识到，审查可能会有额外的和不同的批评/结果，并可能导致再次拒绝。重叠在 30%至 40%之间的论文将手动检查以找出重叠的原因，无论是来自不同论文的小重叠的累积，还是由于同一作者的同会议论文或公开可访问的报告等，并据此决定。每篇发表的论文都由至少两名独立审稿人使用单盲同行评审流程进行评审，审稿人的身份对作者保密，但审稿人知道作者的身份。原始图表和表格（高分辨率）的版本仅作为单独的文件提供，前提是它们未嵌入在源论文文件中（接受格式：PS、EPS、PDF、PNG、TIFF、DOC、PPT、XLS）。
怎么解决错误PROCESS ENDED (18378) for package com.example.app2526 ---------------------------- 2025-05-27 18:30:22.636 348-1216 BufferQueueProducer surfaceflinger E [SurfaceView - com.example.app2526/com.example.app2526.MainActivity#0](id:15c00000522,api:3,p:432,c:348) cancelBuffer: BufferQueue has been abandoned 2025-05-27 18:30:22.670 348-1216 BufferQueueProducer surfaceflinger E [SurfaceView - com.example.app2526/com.example.app2526.MainActivity#0](id:15c00000522,api:3,p:432,c:348) connect: BufferQueue has been abandoned ---------------------------- PROCESS STARTED (18536) for package com.example.app2526 ---------------------------- 2025-05-27 18:30:25.230 18536-18536 NetworkSecurityConfig com.example.app2526 D No Network Security Config specified, using platform default 2025-05-27 18:30:25.230 18536-18536 NetworkSecurityConfig com.example.app2526 D No Network Security Config specified, using platform default 2025-05-27 18:30:25.310 18536-18561 libEGL com.example.app2526 D loaded /vendor/lib/egl/libEGL_emulation.so 2025-05-27 18:30:25.312 18536-18561 libEGL com.example.app2526 D loaded /vendor/lib/egl/libGLESv1_CM_emulation.so 2025-05-27 18:30:25.316 18536-18561 libEGL com.example.app2526 D loaded /vendor/lib/egl/libGLESv2_emulation.so 2025-05-27 18:30:25.334 18536-18536 AppCompatDelegate com.example.app2526 D Checking for metadata for AppLocalesMetadataHolderService : Service not found 2025-05-27 18:30:25.395 18536-18536 example.app252 com.example.app2526 W Accessing hidden method Landroid/view/View;->computeFitSystemWindows(Landroid/graphics/Rect;Landroid/graphics/Rect;)Z (greylist, reflection, allowed) 2025-05-27 18:30:25.395 18536-18536 example.app252 com.example.app2526 W Accessing hidden method Landroid/view/ViewGroup;->makeOptionalFitsSystemWindows()V (greylist, reflection, allowed) 2025-05-27 18:30:25.643 18536-18559 HostConnection com.example.app2526 D HostConnection::get() New Host Connection established 0xd4552b50, tid 18559 2025-05-27 18:30:25.647 18536-18559 HostConnection com.example.app2526 D HostComposition ext ANDROID_EMU_CHECKSUM_HELPER_v1 ANDROID_EMU_native_sync_v2 ANDROID_EMU_native_sync_v3 ANDROID_EMU_native_sync_v4 ANDROID_EMU_dma_v1 ANDROID_EMU_direct_mem ANDROID_EMU_host_composition_v1 ANDROID_EMU_host_composition_v2 ANDROID_EMU_vulkan ANDROID_EMU_deferred_vulkan_commands ANDROID_EMU_vulkan_null_optional_strings ANDROID_EMU_vulkan_create_resources_with_requirements ANDROID_EMU_YUV_Cache ANDROID_EMU_vulkan_ignored_handles ANDROID_EMU_has_shared_slots_host_memory_allocator ANDROID_EMU_vulkan_free_memory_sync ANDROID_EMU_vulkan_shader_float16_int8 ANDROID_EMU_vulkan_async_queue_submit ANDROID_EMU_sync_buffer_data ANDROID_EMU_vulkan_async_qsri ANDROID_EMU_read_color_buffer_dma GL_OES_vertex_array_object GL_KHR_texture_compression_astc_ldr ANDROID_EMU_host_side_tracing ANDROID_EMU_gles_max_version_2 2025-05-27 18:30:25.648 18536-18559 OpenGLRenderer com.example.app2526 W Failed to choose config with EGL_SWAP_BEHAVIOR_PRESERVED, retrying without... 2025-05-27 18:30:25.663 18536-18559 EGL_emulation com.example.app2526 D eglCreateContext: 0xd455b6e0: maj 2 min 0 rcv 2 2025-05-27 18:30:25.696 18536-18559 EGL_emulation com.example.app2526 D eglMakeCurrent: 0xd455b6e0: ver 2 0 (tinfo 0xd4646730) (first time) 2025-05-27 18:30:25.738 18536-18559 Gralloc4 com.example.app2526 I mapper 4.x is not supported 2025-05-27 18:30:25.739 18536-18559 HostConnection com.example.app2526 D createUnique: call 2025-05-27 18:30:25.739 18536-18559 HostConnection com.example.app2526 D HostConnection::get() New Host Connection established 0xd455ae90, tid 18559 2025-05-27 18:30:25.794 18536-18559 HostConnection com.example.app2526 D HostComposition ext ANDROID_EMU_CHECKSUM_HELPER_v1 ANDROID_EMU_native_sync_v2 ANDROID_EMU_native_sync_v3 ANDROID_EMU_native_sync_v4 ANDROID_EMU_dma_v1 ANDROID_EMU_direct_mem ANDROID_EMU_host_composition_v1 ANDROID_EMU_host_composition_v2 ANDROID_EMU_vulkan ANDROID_EMU_deferred_vulkan_commands ANDROID_EMU_vulkan_null_optional_strings ANDROID_EMU_vulkan_create_resources_with_requirements ANDROID_EMU_YUV_Cache ANDROID_EMU_vulkan_ignored_handles ANDROID_EMU_has_shared_slots_host_memory_allocator ANDROID_EMU_vulkan_free_memory_sync ANDROID_EMU_vulkan_shader_float16_int8 ANDROID_EMU_vulkan_async_queue_submit ANDROID_EMU_sync_buffer_data ANDROID_EMU_vulkan_async_qsri ANDROID_EMU_read_color_buffer_dma GL_OES_vertex_array_object GL_KHR_texture_compression_astc_ldr ANDROID_EMU_host_side_tracing ANDROID_EMU_gles_max_version_2 2025-05-27 18:30:27.372 18536-18536 VideoPlayer com.example.app2526 E 初始化错误 java.lang.NullPointerException: Attempt to invoke virtual method 'void android.widget.VideoView.setMediaController(android.widget.MediaController)' on a null object reference at com.example.app2526.Fragment_3.initVideoPlayer(Fragment_3.java:125) at com.example.app2526.Fragment_3.onViewCreated(Fragment_3.java:103) at androidx.fragment.app.Fragment.performViewCreated(Fragment.java:2987) at androidx.fragment.app.FragmentStateManager.createView(FragmentStateManager.java:546) at androidx.fragment.app.FragmentStateManager.moveToExpectedState(FragmentStateManager.java:282) at androidx.fragment.app.FragmentManager.executeOpsTogether(FragmentManager.java:2189) at androidx.fragment.app.FragmentManager.removeRedundantOperationsAndExecute(FragmentManager.java:2100) at androidx.fragment.app.FragmentManager.execSingleAction(FragmentManager.java:1971) at androidx.fragment.app.BackStackRecord.commitNowAllowingStateLoss(BackStackRecord.java:311) at androidx.fragment.app.FragmentStatePagerAdapter.finishUpdate(FragmentStatePagerAdapter.java:274) at androidx.viewpager.widget.ViewPager.populate(ViewPager.java:1244) at androidx.viewpager.widget.ViewPager.setCurrentItemInternal(ViewPager.java:669) at androidx.viewpager.widget.ViewPager.setCurrentItemInternal(ViewPager.java:631) at androidx.viewpager.widget.ViewPager.setCurrentItem(ViewPager.java:612) at com.example.app2526.MainActivity$2.onNavigationItemSelected(MainActivity.java:87) at com.google.android.material.navigation.NavigationBarView$1.onMenuItemSelected(NavigationBarView.java:301) at androidx.appcompat.view.menu.MenuBuilder.dispatchMenuItemSelected(MenuBuilder.java:836) at androidx.appcompat.view.menu.MenuItemImpl.invoke(MenuItemImpl.java:159) at androidx.appcompat.view.menu.MenuBuilder.performItemAction(MenuBuilder.java:987) at com.google.android.material.navigation.NavigationBarMenuView$1.onClick(NavigationBarMenuView.java:141) at android.view.View.performClick(View.java:7448) at android.view.View.performClickInternal(View.java:7425) at android.view.View.access$3600(View.java:810) at android.view.View$PerformClick.run(View.java:28305) at android.os.Handler.handleCallback(Handler.java:938) at android.os.Handler.dispatchMessage(Handler.java:99) at android.os.Looper.loop(Looper.java:223) at android.app.ActivityThread.main(ActivityThread.java:7656) at java.lang.reflect.Method.invoke(Native Method) at com.android.internal.os.RuntimeInit$MethodAndArgsCaller.run(RuntimeInit.java:592) at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:947) 2025-05-27 18:30:27.373 18536-18536 Compatibil...geReporter com.example.app2526 D Compat change id reported: 147798919; UID 10189; state: ENABLED 2025-05-27 18:30:30.266 18536-18536 VideoPlayer com.example.app2526 E 初始化错误 java.lang.NullPointerException: Attempt to invoke virtual method 'void android.widget.VideoView.setMediaController(android.widget.MediaController)' on a null object reference at com.example.app2526.Fragment_3.initVideoPlayer(Fragment_3.java:125) at com.example.app2526.Fragment_3.onViewCreated(Fragment_3.java:103) at androidx.fragment.app.Fragment.performViewCreated(Fragment.java:2987) at androidx.fragment.app.FragmentStateManager.createView(FragmentStateManager.java:546) at androidx.fragment.app.FragmentStateManager.moveToExpectedState(FragmentStateManager.java:282) at androidx.fragment.app.FragmentManager.executeOpsTogether(FragmentManager.java:2189) at androidx.fragment.app.FragmentManager.removeRedundantOperationsAndExecute(FragmentManager.java:2100) at androidx.fragment.app.FragmentManager.execSingleAction(FragmentManager.java:1971) at androidx.fragment.app.BackStackRecord.commitNowAllowingStateLoss(BackStackRecord.java:311) at androidx.fragment.app.FragmentStatePagerAdapter.finishUpdate(FragmentStatePagerAdapter.java:274) at androidx.viewpager.widget.ViewPager.populate(ViewPager.java:1244) at androidx.viewpager.widget.ViewPager.setCurrentItemInternal(ViewPager.java:669) at androidx.viewpager.widget.ViewPager.setCurrentItemInternal(ViewPager.java:631) at androidx.viewpager.widget.ViewPager.setCurrentItem(ViewPager.java:612) at com.example.app2526.MainActivity$2.onNavigationItemSelected(MainActivity.java:87) at com.google.android.material.navigation.NavigationBarView$1.onMenuItemSelected(NavigationBarView.java:301) at androidx.appcompat.view.menu.MenuBuilder.dispatchMenuItemSelected(MenuBuilder.java:836) at androidx.appcompat.view.menu.MenuItemImpl.invoke(MenuItemImpl.java:159) at androidx.appcompat.view.menu.MenuBuilder.performItemAction(MenuBuilder.java:987) at com.google.android.material.navigation.NavigationBarMenuView$1.onClick(NavigationBarMenuView.java:141) at android.view.View.performClick(View.java:7448) at android.view.View.performClickInternal(View.java:7425) at android.view.View.access$3600(View.java:810) at android.view.View$PerformClick.run(View.java:28305) at android.os.Handler.handleCallback(Handler.java:938) at android.os.Handler.dispatchMessage(Handler.java:99) at android.os.Looper.loop(Looper.java:223) at android.app.ActivityThread.main(ActivityThread.java:7656) at java.lang.reflect.Method.invoke(Native Method) at com.android.internal.os.RuntimeInit$MethodAndArgsCaller.run(RuntimeInit.java:592) at com.android.internal.os.ZygoteInit.main(ZygoteInit.java:947) 2025-05-27 18:30:30.678 18536-18567 ProfileInstaller com.example.app2526 D Installing profile for com.example.app2526
最新发布
05-29
debugImplementation 'com.squareup.leakcanary:leakcanary-android:2.12' } ``` #### 四、NullPointerException (setMediaController) **典型错误**： ```java mVideoView.setMediaController(new ...
android平台下基于ANativeWindow实现渲染bitmap图像
handy周
11-13 7365
OpenGL ES 3.0学习实践 android平台下OpenGL ES 3.0从零开始 android平台下OpenGL ES 3.0绘制纯色背景 android平台下OpenGL ES 3.0绘制圆点、直线和三角形 android平台下OpenGL ES 3.0绘制彩色三角形 android平台下OpenGL ES 3.0从矩形中看矩阵和正交投影 android平台下OpenGL ES 3...
ANativeWindow
u014409795的专栏
04-28 1万+
ANativeWindow : opengl工作的绘图画布本地窗口，按标准定义好函数（下面好多代码都简化） struct ANativeWindow {    .....        //上层定义好函数指针，传给opengl后，opengl在必要的时候会调用相应的函数    int     (*dequeueBuffer )(struct ANativeWindow
android SurfaceView 获取surface native object 传给C++ 调用 （java 反射）
weixin_42065195的博客
03-08 2734
SurfaceView 获取Surface mSurface = mSurfaceView.getHolder().getSurface(); try { Field field = Surface.class.getDeclaredField("mNativeObject"); field.setAccessible(true); long nativeSurfaceOb...
【Android FFMPEG 开发】FFMPEG ANativeWindow 原生绘制 ( Java 层获取 Surface | 传递画布到本地 | 创建 ANativeWindow )
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
03-11 1882
I . FFMPEG ANativeWindow 原生绘制 II . FFMPEG 解码 AVPacket 数据到 AVFrame 流程 III . Java 层获取 Surface 画布 IV . 传递 Surface 画布到 Native 层 V . Native 层创建 ANativeWindow 原生绘制窗口
Android系统Surface机制的SurfaceFlinger服务对帧缓冲区（Frame Buffer）的管理分析
移动开发记录
10-15 211
在前文中，我们分析了SurfaceFlinger服务的启动过程。SurfaceFlinger服务在启动的过程中，会对系统的硬件帧缓冲区进行初始化。由于系统的硬件帧缓冲区一般只有一个，并且不是谁都可以随便访问的，因此，它就需要由一个服务来统一管理。在Android系统中，这个服务便是SurfaceFlinger。在本文中，我们就详细分析SurfaceFlinger服务是如何管理系统的硬件帧缓冲...
Android NDK ~ Java 和 Native 交互
Chiclaim
09-21 3008
本文详细介绍了最常用的一些 JNI 函数使用方法以及注意事项
React Native 0.22.0-rc 版本特性及框架文件解析
React Native能够直接在iOS的Objective-C或Android的Java代码之上运行，而不需要使用桥接。React Native的组件可以混合使用，开发者可以在一个应用程序中使用原生组件和React Native组件，这为开发者提供了极高的...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值