ISP--MIPI数据与RAW数据的转换

最新推荐文章于 2024-08-12 14:34:29 发布
最新推荐文章于 2024-08-12 14:34:29 发布
阅读量820 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 数字图像处理学习笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_40848065/article/details/118566789
博客主要围绕MIPI RAW图像数据和RAW图像数据展开，重点提及了ISP - MIPI数据与RAW数据之间的转换，属于信息技术中图像处理相关内容。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

c++ 取整_MPIP Raw转Raw图简述-C实现
weixin_39634438的博客
11-28 589
简介有时我们得到的Raw图是MIPI格式的，为了能正确读取该数据，我们需要进行MIPI Raw到Raw的转换。本文对将会先介绍MIPI的数据格式，然后用C进行实现。MIPI Raw到Raw数据格式CMOS sensor中返回的原始数据格式中每一个像素是10bit的，然而计算机读取单元为8bit或16bit。为了解决该问题，可以用新的数据格式或者对10bit进行补齐到16bit，这样每个像素就多增加...
C++ 10bit图像的mipi_raw转raw方法
PtaQ的博客
04-10 7504
背景： 原文链接：MIPI RAW图像数据与RAW图像数据 在ISP图像处理中经常需要面对MIPI RAW数据和RAW数据，这里简单说明一下二者的差别。 传感器采集的RAW数据通常为10bit，存储RAW数据需要两个Byte，而其中有6个bit位是空着的，这样就有存储空间浪费。MIPI RAW数据充分利用了这个特性，采用5个Byte，共40bit存储4个RAW数据。这里以大端存储方式，给出这样存储的示意图。如下图所示： 大小计算： 假设图像的的尺寸大小为：width*height mip.
mipi raw(10bit) 转raw(16bit)
YoungHong1992
03-10 6416
引用自GitHub：https://github.com/oswystan/raw_unpack /* ************************************************************************************** * Filename: unpack.c * Description: source file * * Version: ...
mipi raw 转raw10
BrooksHatlen的博客
07-17 496
i += 5)fclose(p);p = NULL;");fclose(pf);pf = NULL;pRaw10 = 0;return 0;#if 1int main()return 0;#endif。
mipi和isp处理_ISP-摄像头的最强大脑- 图像质量及色彩科技知识分享平台 图像质量与色彩管理 - Powered by HDWiki!...
weixin_39585463的博客
12-20 1305
做为拍照手机的核心模块之一，camera sensor效果的调整，涉及到众多的参数，如果对基本的光学原理及sensor软/硬件对图像处理的原理能有深入的理解和把握的话，对我们的工作将会起 到事半功倍的效果。否则，缺乏了理论的指导，只能是凭感觉和经验去碰，往往无法准确的把握问题的关键，不能掌握sensor调试的核心技术，无法根本的解 决问题。所以，这里笔者结合自己出于对摄影的爱好所学习的一些图像处理...
MIPI RAW图数据分析
super-H
09-25 1万+
平台背景：高通平台 10bit raw raw图格式大概分为mipi raw ,Packed raw,Unpacked raw.下面先介绍这几种raw。 在ISP图像处理中经常需要面对MIPI RAW数据和RAW数据，这里简单说明一下二者的差别。 传感器采集的RAW数据通常为10bit，存储RAW数据需要两个Byte，而其中有6个bit位是空着的，这样就有存储空间浪费。MIPI RAW数据充分利...
基于MIPI-CSI2转换FPDLINK的智能车载摄像头驱动设计与实现
runwen_157的专栏
07-26 1036
如下图4-2驱动文件与主要配置图所示，主要编译步骤与命令配置驱动文件包括，添加修改过的驱动文件(Sensor-IMX728源文件)至SDK对应的文件目录，执行编译，将生成的firmware (../Kernel_out/arch/arm64/boot/dts/tegra186-quill-p3310-1000-c03-00-base.dtb ../Image)文件烧录至JETSON-TX2-SOM主板(USB Port)。输出参数， none；IMX728-Sensor，MIPI-CSI2连接线；
mipi和isp处理_【Camera专题】你应该了解的Camera HW-硬件知识
weixin_39558754的博客
12-20 1219
一.吐槽最基本的硬件基础知识你必须得懂吧。举个栗子【敲黑板，重点来了啊】1.你要点亮Camera，你得知道你用的是什么接口的，是MIPI的还是Parallel的？2.数据传输有哪些方式？3.Camera 的成像原理是什么？等等说点题外话1.作为一个小白，我为啥要写一个专题吗？我想，一来是记录自己的成长过程吧，记录看过的资料，做了什么思考。二来是激励自己不断前行吧。Just keep moving！...
OV5647_MIPI_RAW for MTK
12-12
OV5647 MIPI raw driver for MT6575/6577
unpacked mipi raw 的意思是
qq_40323742的博客
08-12 639
unpacked MIPI raw” 是指通过 MIPI CSI-2 接口传输的未打包的原始图像数据。这种数据格式保留了传感器捕获的所有原始信息，适合高精度图像处理和分析。
一文看懂图像格式 RAW、RGB、YUV、Packed/Unpacked、Bayer、MIPI、Planar、Semi-Planar、Interleaved
weixin_36389889的博客
10-31 1万+
本文详细分析各种图像格式（RAW、RGB、YUV）的分类、内存分布。
查看从ISP pipeline导出的RAW数据
六个九十度
03-25 1089
关键是弄明白ISP pipeline的DMA的工作原理
MIPIRaw转UnpackRaw
qq_40403979的博客
01-02 2146
MipiRaw和Unpack的存储格式，以及大小端和MSB、LSB的讲解。从原理上理解后，从代码上实现。
raw图各个格式之间的转换
weishungyin的博客
08-17 3596
raw8，raw10，raw12之间的格式转换关系
raw图的存储格式和读取方式
qq_41320406的博客
08-19 9710
图像处理中遇到的raw图的简单介绍
高通CHI Node数据格式 RAWMIPI12(Bayer_BGGR)、YUV420NV12
weixin_43485707的博客
03-31 884
举例16*4 MIPI BGGR 12 buffer 字节分布位深度：12bitsB：Blue分量高8位b：Blue分量低4位G：Green分量高8位g：Green分量低4位R：Red分量高8位r：Red分量低4位Chromatix渲染时应该是按照4字节对齐来取数据，所以一行内的像素数，应该是6和8的公倍数。预览设置：width 2688BPP 12pack mipi。
MIPI简介(三)——CSI-2的概述与分层方式
热门推荐
baidu_38797690的博客
06-17 2万+
本文介绍了MIPI协议中的CSI协议，重点介绍CSI的分层方式、每个层级的功能和用途，此外介绍了CSI的数据帧的格式。
ISP【三】———— raw读取、不同格式图片差异
格物致知
10-24 1690
matlab读取raw图 （mark读取图片尺寸和位数均可设置，图片尺寸M,N，图片数据类型8bit,16bit改成uint16） clear; clc; close all; % % rotpath = imread('D:\matlab\ncc_ive_pc_diff\ncc_diff\nv21_test_dst_rotate90.raw'); %%1280*800 8bit % mesh(nv_rot); % path= imread('C:\Users\Administrator\Deskt..
RDI OUT 获取数据后通过ISP 等转换成RAW 16
最新发布
07-22
<think>嗯，用户的问题聚焦在如何将RDI OUT获取的数据通过ISP转换为RAW16格式，这涉及到相机图像处理流水线的硬件级操作。从引用内容看，用户应该是在嵌入式视觉系统（可能是高通平台）开发，需要处理原始图像数据转换。 用户引用的资料很专业，其中引用[1]提到RDI转换模式可以直接用硬件将YUV422转NV12，但用户需要的是RAW16输出。这里的关键点在于RAW16是未经ISP处理的原始Bayer数据，而RDI接口通常输出的是已经过初步处理的YUV格式。所以需要绕开某些处理环节。 仔细分析用户引用的内容： - 引用[1]的RDI转换模式说明硬件具备平面分离能力，这暗示可能通过配置让其中一个RDI通道输出原始数据 - 引用[2]的opMode参数显示QCARCAM_OPMODE_RGBIR模式会触发ISP处理链，这正是需要避开的 - 引用[4]的SMMU配置说明底层有内存映射控制，关系到原始数据的获取 用户可能没意识到的是：RAW16数据通常来自Sensor的Bayer输出，而RDI接口在ISP之后。因此需要： 1. 确认硬件是否支持旁路ISP的原始数据输出（有些芯片的RDI0支持raw dump） 2. 修改opMode为类似QCARCAM_OPMODE_RAW的模式 3. 配置ISP管道完全跳过处理模块 具体到技术实现： - 首先检查芯片手册确认RDI是否支持raw输出（如骁龙865的RDI0-3中特定接口） - 在QCarCamInit_t初始化时设置opMode=QCARCAM_OPMODE_RAW - 通过vfe_cmd配置ISP管道，禁用所有处理模块（BPC/ABF等） - 在SMMU映射中确保输出缓冲区按RAW16对齐（10bit数据需左对齐为16bit） 用户可能遇到的坑是：RAW16有不同打包格式（如mipi RAW10/12转16bit时的对齐方式），这需要参考Sensor的CSI配置。另外引用[3]提到的ADC精度会影响原始数据质量，但用户没问这部分就不展开。</think>要将 RDI OUT 获取的数据通过 ISP 转换为 RAW 16 格式，需结合硬件流水线配置和软件控制，具体步骤如下： --- ### **关键步骤** 1. **配置 RDI 输出原始数据** - 确保 RDI 接口输出 **未处理的 Sensor 原始数据**（通常是 Bayer RAW 格式）。 - 在初始化时设置操作模式为 **旁路 ISP 处理**（如 `QCARCAM_OPMODE_RAW`），避免数据被自动转换为 YUV/RGB。 - 参考引用[2]的 `opMode` 配置逻辑，需禁用 RGB/IR 处理链（如 `AIS_PPROC_ISP-RGB` 等模块）。 2. **ISP 流水线配置** - 通过 VFE（Video Front-End）或 CPP（Camera Post-Processor）控制 RAW 数据流向： ```c // 伪代码：配置ISP跳过处理，直通RAW数据 vfe_cmd_t config = { .bypass_demosaic = 1, // 跳过去马赛克 .bypass_color_correction = 1, // 跳过色彩校正 .output_format = RAW16; // 指定输出为RAW16 }; set_isp_config(&config); ``` - 确保 ISP 的 **Scratch Buffer** 映射正确（引用[4]），使原始数据直接输出到目标内存区域。 3. **数据格式转换（如需要）** - 若 RDI 输出为 **RAW10/RAW12**，需在 ISP 中启用 **位扩展（Bit Extension）** 转换为 RAW16： - RAW10 → RAW16：高位填充6个0（`0x3FF → 0x03FF`）。 - RAW12 → RAW16：高位填充4个0（`0xFFF → 0x0FFF`）。 - 通过 ADC 配置控制精度（引用[3]），确保 12 位 ADC 输出对齐到 16 位（左对齐/右对齐）。 4. **内存与 SMMU 配置** - 使用引用[4]的 SMMU API 确保 DMA 能直接访问输出缓冲区： ```c cam_smmu_map_buffer(cb_handle, output_buf_phy, output_buf_virt, buffer_size); ``` - 分配物理连续内存（避免 Cache 一致性问题），并设置 `DOMAIN_ATTR_COHERENT_HTW_DISABLE` 提升性能。 5. **触发帧捕获** - 通过 V4L2 或专用驱动命令（如 `VIDIOC_REQBUFS`）启动传输： ```c struct v4l2_buffer buf = { .type = V4L2_BUF_TYPE_VIDEO_CAPTURE, .memory = V4L2_MEMORY_MMAP }; ioctl(camera_fd, VIDIOC_QBUF, &buf); // 入队缓冲区 ioctl(camera_fd, VIDIOC_STREAMON); // 开始流传输 ``` --- ### **注意事项** - **时钟与带宽**： ADC 输入时钟 ≤14MHz（引用[3]），确保 RDI 传输速率匹配 Sensor 输出。 - **数据对齐**： RAW16 格式需 **16 位对齐**，检查内存地址是否符合 `buffer_addr % 2 == 0`。 - **调试工具**： 使用 Chipsee 或 DS-5 抓取 VFE 寄存器状态，验证流水线是否按预期旁路处理模块。 > ✅ **示例场景** > 若使用高通平台，通过 `msm_cam_sensor` 驱动配置 Sensor 输出 RAW12，并在 VFE 中启用位扩展： > ```c > sensor_cfg.raw_output = 1; // 启用RAW输出 > vfe_cfg.bit_extension = BIT_EXT_12TO16; // 12位转16位 > ``` --- ### **常见问题排查** | 现象 | 可能原因 | 解决方案 | |---------------------|--------------------------|----------------------------| | 输出全黑/全灰 | ISP 处理模块未完全旁路 | 检查 `bypass_demosaic` 等标志 | | 数据错位 | 内存未对齐或 SMMU 映射错误 | 验证缓冲区地址按 16 位对齐 | | 帧丢失 | DMA 带宽不足 | 降低分辨率或帧率 | --- 通过以上步骤，RDI 输出的原始数据可经 ISP 直接转换为 RAW16 格式，适用于工业检测、高动态范围成像等需原始数据的场景[^1][^4]。 --- ### **相关问题** 1. **如何验证从 RDI 到 RAW16 的转换过程中数据未丢失？** - 需抓取 VFE 寄存器状态，对比输入/输出帧的统计信息（如直方图）。 2. **RAW16 与 RAW10 格式在存储和带宽上有何差异？** - RAW16 每像素占 2 字节，带宽是 RAW10（1.25 字节）的 1.6 倍。 3. **在嵌入式 Linux 中如何配置 V4L2 接收 RAW16 数据？** - 需设置 `v4l2_format.fmt.pix.pixelformat = V4L2_PIX_FMT_SGRBG16`。 4. **SMMU 配置错误会导致哪些图像异常？** - 物理地址映射失败会引起花屏、撕裂或系统崩溃（需检查 `cam_smmu_map_buffer` 返回值）。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值