基于 JETSON+FPGA+GMSL+AI 车载视频采集与存储系统设计(二)系统测试

5.1 系统测试实验平台搭建 根据课题项目的要求,本系统要求能获取高分辨率的高清图像,并采用 GMSL 接 口输出。因此本系统选用索尼公司生产的 IMX490-GMSL 摄像头作为原始视频采集的 图像传感器,图像传感器模型如图 5.1 所示。IMX490 是 CMOS 图像传感器,支持输 出最大分辨率可以达到 2896×1876,约 540 万有效像素。使用千兆多媒体串行链路串 行器和解串器技术,支持使用 GMSL 接口时序输出图像数据。而且该 GMSL 相机还 能够对采集的视频图像进行补偿,支持伽玛曲线、白平衡、饱和度、色度等基础处理。 可以根据不同的分辨率配置寄存器参数,GMSL 相机输出的视频图像的帧率可以在 30-60 帧范围内可调。相机工作在正常状态时的实际功率在 150mW-200mW 范围内波 动是正常的。

IMX490 图像传感器通过改变图像采集窗口的比例输出不同的分辨率图像。在视 频采集时通过 IIC 总线向 IMX490 发送内部寄存器配置信息完成相机初始化,图像输 出从而实现对分视频辨率、视频输出格式、视频图像色度和图像画面对比度等工作状 态的参数设置。IMX490 相机的具体参数如下表 5.1 所示。

选好相机的型号后,根据第三章设计的系统设计方案搭建实验平台,搭建好的实 验电路如图 5.2 所示,左边电路图(a)是 GMSL 视频采集与接口转换电路单元,该 单元负责对 GMSL 接口输出的视频图像进行时标叠加和接口时序变换;右边电路图(b) 是对视频进行采集与存储的 DM8168 嵌入式处理单元,该单元主要负责对 GMSL 视 频数据进行原视频存储与压缩编码,并将压缩编码的视频数据通过网络传输。然后通 过实验平台模拟对车载视频的采集与存储验证并记录实验的效果和实验的相关数据。

5.2 GMSL 视频采集与转换单元测试分析 连接好 GMSL 相机与视频采集板后对系统上电,在 FPGA 端通过 ISE14.7 自带的 仿真器对 IMX490 摄像头上电初始化的 IIC 总线数据传输进行波形仿真得出图 5.3 上 电时序仿真波形,通过仿真出来的时序图可以看出传输一个字节需要 9 个时钟周期, 写时序和读时序和软件程序设计一致。在 ISE14.7 中对 IMX490 摄像头采集模块顶层 模块程序进行编译,还可以得到 RTL 电路图。 

5.4 本章小结 本章完成了对系统视频数据采集、视频数据存储和视频数据压缩编码速率进行了 测试分析。首先对视频数据的采集进行了测试分析,通过液晶屏显示和 Modesim 仿真 测试可以观察到视频数据采集和传输正常。通过视频画面可以观察到视频时标叠加正 常。最后通过对视频数据的回放测试,视频 SATA 盘存储正常。然后对视频的压缩编 码进行测试,视频的压缩编码率在误差范围内,满足系统的要求。根据上述的测试结 果,表明本系统的功能和性能指标均达到课题项目要求,设计的基于 GMSL 的车在视 频采集与存储系统稳定可靠。

M/D-CAPVPX是天津雷航光电科技有限公司推出的一款复合加速计算平台,由Xilinx的28nm制程的FPGA — XC7K325T-3FFG900I和Nvidia的Jetson Xavie的GPU互联构成。 规格 l 集成1片 Nvidia的Jetson Xavier嵌入式GPU处理器; 是目前主流的GPU,主要用于实时处理高速的图像和雷达数据; 而Xavier则是目前功能最强大的嵌入式GPU处理单元,一般的服务器也无法匹敌其处理性能;Xavier可以使得实时处理能力获得成倍的提升;另外Xavier具备PCIE-4.0接口,Virtex-7的PCIE-3.0连接可以获得极高的带宽; l 集成1 片 Xilinx XC7VX690T 芯片(或Ultrascale系列)作为主处理器;外挂 2 组动态存储器QDRII+ SRAM,存储容量72Mb,位宽72bits,存储速度1000Mb/s; 也可以独立挂接DDR3-2166,以最廉价的方案获得最高的数据缓存速率; l FPGA通过板载QSFP/SFP+/FMC等接口可以自由灵活的配置包括用于雷达和软件无线电领域的AD/DA,图像领域的CameraLink/CXP/光纤相机等不同的前端;做到了前端的Fully-Scalable/Fully-Extensible lXavier 和 XC7VX690T 之间通过 PCIE Gen2 x4/PCIE gen3 x8 互联,实现全双工高速数据共享; l FPGA XC7VX690T 上有三组PCIE,其中1组用于和Xavier通信,另 外两组则扩展为2个独立的M.2 M Key NVME PCIE SSD(每个SSD容量为 64GB~2TGB) l FPGA上通过通用的GTH扩展出16~32个SATA接口用于连接RAID0,实现10~22GB/s的超高速存储速度(完全自主知识产权的RAID0/SATA的IP),可以完成高速的CameraLink/CXP/雷达SDR AD数据的实时非易失性存储;其中CXP相机几乎可以适应所有的标准厂家的协议 对外接口 l 2 x QSFp l 2 x SFP+ l 双FMC子卡槽/面板则根据FMC前端连接器类型可选 l RAID0高速连接器(根据RAID0产品接口可定制,一般是镀金线) l M.2本地连接器(在机箱内部,或者也可以通过高速线对板连接器引出) l 以太网/USB/RS422/HDMI/VGA液晶屏 等辅助接口(可选)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值