Cortex-A55国产处理器_教学实验箱_操作案例分享：5-21 手势识别实验-优快云博客

一、实验目的

熟悉Qt程序的开发流程。

掌握Qt Creator的基础开发使用。

通过编写Qt程序实现手势识别的显示界面。

二、实验原理

Qt工程的创建步骤包括：
（1）创建Qt工程；
（2）GUI的设计实现：LCD显示界面以及与用户的交互；
（3）编辑控制代码；
（4）编译程序；
（5）运行程序。

根据原理图，可知使用的手势识别模块是基于 PAJ7620U2 传感器设计的。

PAJ7620U2 传感器
PAJ7620U2 传感器内部自带 LED 驱动器（可发射红外线信号），内置有传感器感应阵列、目标信息提取阵列和手势识别阵列。另外，PAJ7620U2 作为一种光学数组式传感器，其内置 LED 驱动器集成了环境光和光源抑制滤波器，模块基本不受环境光干扰。

CS100A芯片
传感器工作时通过内部 LED 驱动器，驱动红外 LED 向外发射红外线信号，当传感器阵列在有效的距离中探测到物体时，目标信息提取阵列会对探测目标进行特征原始数据的获取，采集到的数据被保存在寄存器中，同时手势识别阵列会对原始数据进行识别处理，最后将手势结果存到寄存器中。
根据 PAJ7620U2传感器数据手册，用户可通过I²C接口总线采集信号并迅速识别出UP、Down、Right、Left等9种常用手势。另外PAJ7620U2还提供内置的接近检测功能，用于检测物体的接近或离开。

三、操作现象

实验设备

本实验中使用的软件为VMware17+Ubuntu18.04.4 和串口调试工具Xshell。

本实验中使用的是TL3568-PlusTEB实验箱，所需的配件为Micro SD卡、Type-C线、电源和人体感应&手势识别模块。

实验步骤

我们先打开Ubuntu，将Demo文件夹拷贝到RK3568目录下。
"Ctrl+Alt+T"打开控制台，执行命令启动Qt Creator。
打开工程文件
如有弹出的对话框，点击No。对话框主要内容为：是否需要加载上一台电脑的配置文件，此文件包含上一台电脑的配置规则，我们不需要使用，重新制定规则。，然后点击configure project即可。
打开界面控制的源码
查看界面设计
点击"Projects"，可以查看编译文件保存的路径
编译生成ARM端的Qt程序镜像，在右下角会出现编译进度条，变绿后编译完成。可在目录下查看生成的ARM端Qt程序镜像
编译完成后使用OpenSSH命令将文件拷贝至实验箱文件系统。

接着进行硬件连接，
（1）将Linux系统启动卡插至Micro SD卡槽。
（2）使用Type-C线连接USB TO UART2调试串口到PC机。
（3）将人体感应&手势识别模块插入实验箱的GPIO/I2C/UART/CAN接口。
（4）连接电源线，先不要上电。

接着进行软件部分操作。
（1）先在设备管理器查看串口的端口号；
（2）再设置串口调试工具，波特率设置为1500000，点击连接，在Xshell调试终端会显示连接成功。
（3）连接成功后，拨动实验箱的电源开关，将实验箱上电。
（4）等待系统登录SD卡系统。
（5）登录成功后，在可执行程序所在目录执行命令运行程序。
（6）程序运行后可以看到LCD显示的界面。
（7）做出手势，在终端会显示相应结果：up，dowm，left，right，Clockwise，anti-clockwise，wave，Forward，Backward。