RKMEDIA--RGA的使用

本节主要介绍一下rkmedia rga模块的使用。

RGA (Raster Graphic Acceleration Unit)是一个独立的2D硬件加速器,可用于加速点/线绘制,执行图像缩放、旋转、bitBlt、alpha混合等常见的2D图形操作。

rkmedia的rga部分主要是封装的rk平台的硬件rga接口提供的api来实现的。rkmedia中RGA通道仅支持格式转换、缩放、裁剪、旋转功能,图片叠加则需要单独调用librga.so库
 

在 rv1126/rv1109 中支持的格式转换:
input: ARGB888/888/565/4444/5551, YUV420/YUV422, YUYV
output: ARGB888/888/565/4444/5551, YUV420/YUV422(8/10bit) ,YUYV, Y4,YUV400

在rv1126/rv1109上只有一个硬件rga,所以多路的rga实际上都是分时复用的。如果同时进行太多路的rga操作会导致帧率不够。

rga代码初始化:

以下的代码进行了分辨率的缩放、旋转、格式转换

  RGA_ATTR_S stRgaAttr;
  memset(&stRgaAttr, 0, sizeof(stRgaAttr));
  stRgaAttr.bEnBufPool = RK_TRUE;
  stRgaAttr.u16BufPoolCnt = 3;
  stRgaAttr.u16Rotaion = 90;
  stRgaAttr.stImgIn.u32X = 0;
  stRgaAttr.stImgIn.u32Y = 0;
  stRgaAttr.stImgIn.imgType = IMAGE_TYPE_NV12;
  stRgaAttr.stImgIn.u32Width = video_width;
  stRgaAttr.stImgIn.u32Height = video_height;
  stRgaAttr.stImgIn.u32HorStride = video_width;
  stRgaAttr.stImgIn.u32VirStride = video_height;
  stRgaAttr.stImgOut.u32X = 0;
  stRgaAttr.stImgOut.u32Y = 0;
  stRgaAttr.stImgOut.imgType = IMAGE_TYPE_RGB888;
  stRgaAttr.stImgOut.u32Width = disp_width;
  stRgaAttr.stImgOut.u32Height = disp_height;
  stRgaAttr.stImgOut.u32HorStride = disp_width;
  stRgaAttr.stImgOut.u32VirStride = disp_height;
  ret = RK_MPI_RGA_CreateChn(0, &stRgaAttr);
  if (ret) {
    printf("Create rga[0] falied! ret=%d\n", ret);
    return -1;
  }

裁剪缩放如下:

  RGA_ATTR_S stRgaAttr;
  memset(&stRgaAttr, 0, sizeof(stRgaAttr));
  stRgaAttr.bEnBufPool = RK_TRUE;
  stRgaAttr.u16BufPoolCnt = 3;
  stRgaAttr.u16Rotaion = 0;
  stRgaAttr.stImgIn.u32X = 0;                        //裁剪原始区域的起始位置
  stRgaAttr.stImgIn.u32Y = 0;
  stRgaAttr.stImgIn.imgType = IMAGE_TYPE_NV12;
  stRgaAttr.stImgIn.u32Width = 1280;                //要裁剪的宽高1280*720
  stRgaAttr.stImgIn.u32Height = 720;
  stRgaAttr.stImgIn.u32HorStride = 1920;            //输入进来原始分辨率1920*1080
  stRgaAttr.stImgIn.u32VirStride = 1080;
  stRgaAttr.stImgOut.u32X = 0;
  stRgaAttr.stImgOut.u32Y = 0;
  stRgaAttr.stImgOut.imgType = IMAGE_TYPE_RGB888;
  stRgaAttr.stImgOut.u32Width = 640;                //裁剪完缩放的分辨率640*480
  stRgaAttr.stImgOut.u32Height = 480;
  stRgaAttr.stImgOut.u32HorStride = 640;
  stRgaAttr.stImgOut.u32VirStride = 480;
  ret = RK_MPI_RGA_CreateChn(0, &stRgaAttr);
  if (ret) {
    printf("Create rga[0] falied! ret=%d\n", ret);
    return -1;
  }

上图的功能:把1920*1080的图像以左上角为起点裁剪出1280*720的图像,然后缩放成640*480图像。

比较复杂的就是这个部分的配置,对照着上图即可快速配置裁剪参数。

rga的rgn初始化:

static void set_argb8888_buffer(RK_U32 *buf, RK_U32 size, RK_U32 color) {
  for (RK_U32 i = 0; buf && (i < size); i++)
    *(buf + i) = color;
}

int osd_w = 720;
int osd_h = 1280;
BITMAP_S BitMap;
BitMap.enPixelFormat = PIXEL_FORMAT_ARGB_8888;
BitMap.u32Width = osd_w;
BitMap.u32Height = osd_h;
BitMap.pData = malloc(BitMap.u32Width * 4 * BitMap.u32Height);
int ColorBlockSize = BitMap.u32Height * BitMap.u32Width;

set_argb8888_buffer((RK_U32 *)BitMap.pData, ColorBlockSize,
                      TEST_ARGB32_RED);

OSD_REGION_INFO_S RngInfo;
RngInfo.enRegionId = REGION_ID_0;
RngInfo.u32PosX = 0;
RngInfo.u32PosY = 0;
RngInfo.u32Width = osd_w;
RngInfo.u32Height = osd_h;
RngInfo.u8Enable = 1;
RngInfo.u8Inverse = 0;
RK_MPI_RGA_RGN_SetBitMap(0, &RngInfo, &BitMap);

rga的rgn和venc的使用方式基本一样,同时也是支持8个region。宽高、坐标需要16字节对齐。

在叠加argb图片的时候,直接read文件把数据读到pData中,调用RK_MPI_RGA_RGN_SetBitMap即可。

注意:bmp图片和argb是不一样的,所以在用bmp的时候记得去掉bmp的头数据。

在使用rga的osd的时候,动态切换osd要注意data的释放以及申请(提前释放会导致闪屏)

rga不止画斜线功能,如要画斜线需要软件层实现。

rga查看使用率:cat /sys/kernel/debug/rkrga/load或者/proc/rkrga/load

rkmedia中vmix模块视频合成,实际也是用rga对多路视频进行拼接的。所以在大量使用rga时 要注意。

常见问题:

1、[RKMEDIA] [SYS] [Error]:FilterFlow:rkrga:buffer pool get null buffer!

出现这个打印主要是因为后端获取rga的数据慢了,导致rga没有空的buffer使用,所以可以适当调整rga 初始化时的u16BufPoolCnt  参数。或者及时将rga的数据取走。

暂时写这么多,如有问题可以在评论发出来。

文章汇总:RKMEDIA使用简介_未_定的博客-优快云博客

03-17
### 关于 RGA 的定义与应用 在信息技术 (IT) 上下文中,RGA 并未直接提及于所提供的引用材料中。然而,在更广泛的领域中,RGA 可能指代 **Retrieval-Guided Augmentation** 或其他类似的术语。以下是基于现有知识和引用内容的分析: #### Retrieval-Guided Augmentation (检索引导增强) 如果假设 RGA 是指 **Retrieval-Guided Augmentation**,那么它通常用于自然语言处理 (NLP) 和信息检索系统中的一种技术方法。这种方法通过结合外部数据源(如文档库或数据库),动态生成上下文感知的内容,从而提升模型的表现力。 此概念可以被看作是 Retrieval-Augmented Generation (RAG)[^1] 的一种扩展形式。具体而言,RAG 方法已经在许多实际场景中得到了验证,例如问答系统、对话代理以及搜索引擎优化等。而 ITPC(迭代令牌级提示压缩)作为一种辅助手段,则进一步增强了提示的有效性和效率[^1]。 #### 实现细节中的关联 从第二个引用来看,构建 RAG 类型系统的实践案例已被讨论过。特别是利用开源工具链 Llama 3 结合 Elasticsearch 来完成端到端部署方案[^2]。这表明,在现代架构设计过程中,开发者倾向于采用模块化组件组合方式来满足复杂业务需求。 另外值得注意的是第三个引用虽然表面上看起来无关紧要,但它揭示了一个重要原则——即合理配置环境变量对于确保软件正常运行至关重要[^3]。这一理念同样适用于任何涉及大规模分布式计算的任务当中,包括但不限于那些依赖向量索引或者深度学习框架的应用程序。 综上所述,尽管没有明确提到 RGA 定义本身,但从上述资料推测其可能代表某种形式的数据驱动机制;并且这种机制能够充分利用已有资源以达到最佳效果。 ```python # 示例代码片段展示如何设置环境变量 import os os.environ['COGL_DRIVER'] = 'gles2' print(f"Current Cogl Driver is set to {os.getenv('COGL_DRIVER')}") ```
评论 20
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值