RK3576/RK3588+FPGA+AI服务机器人解决方案

服务机器人解决方案

针对服务机器人场景,基于3D视觉感知技术,通过自研ASIC芯片,实现高精度3D深度信息获取,助力服务机器人实现感知、避障、导航等功能,可广泛应用于商务清洁、餐饮配送、楼宇配送、仓储物流、教育娱乐等领域。

信迈已为高仙机器人、云迹科技、普渡科技等超100家头部服务机器人品牌提供技术和产品服务。

3D视觉赋能,一台清洁车释放三个人力

人工智能正在进入产业与应用深度结合的爆发期。为代表的一批人工智能产业链企业,通过自研关键核心技术,加大应用型人才投入,赋能AI应用在机器人、智能座舱等领域落地。

在深圳天安云谷产业园,记者看到,搭载3D视觉传感器+信迈机器人控制器的高仙清洁机器人正在清扫地面的落叶。凭借3D视觉“智慧之眼”,该机器人可以自动识别、清理垃圾,并在复杂的户外环境中自动避障,极大地提升了清洁效率。园区清洁运营负责人表示,“园区大概有几万平方米,其中的餐饮区域需要三个保洁人员来循环工作。现在只需要一台商用清洁车,就可以释放三个人力。”

当下,随着人工智能应用场景增多,相关产品不断落地到机器人、智能座舱、虚拟现实、工业等领域。针对智能机器人行业兴起的需求,信迈推出了双目结构光、单目结构光、iToF、激光雷达等多种机器人视觉感知方案,帮助机器人实现建图、定位、避障、场景识别等功能。

央视财经频道报道20221104.mp4_20221110_113133.158.png

基于RK3588智能机器人控制板有哪些特点呢?

智能机器人控制板作为机器人的核心大脑,需要具备一系列关键特点以支撑其高效、智能地运作。以下是智能机器人控制板所需的主要特点:

NPU加持

  • 支持离线大模型:能够处理复杂的AI任务,即使在网络不稳定或离线状态下也能运行大型神经网络模型。

  • 物体识别等算法:内置或可加载多种物体识别、人脸识别、场景理解等算法,提升机器人的感知能力。

  • 单目测距算法:支持通过单目摄像头进行距离测量,增强机器人的空间感知能力。

  • 算力灵活叠加:提供灵活的算力扩展能力,根据任务需求调整NPU的算力资源。

操作系统支持

  • 支持Linux安卓系统:提供对Linux和Android操作系统的广泛支持,便于开发者选择适合的操作系统进行开发。

  • Android友好设计UI:对于采用Android系统的机器人,提供用户友好的界面设计工具和框架。

  • Linux标准适配ROS/ROS2:完美适配ROS(Robot Operating System)和ROS2,为机器人应用开发提供强大的生态系统支持。

智能语音交互

  • 多麦克风阵列:配置多个麦克风阵列,提高语音采集的清晰度和方向性。

  • 离线语音唤醒词:支持离线语音唤醒功能,即使在无网络环境下也能通过特定唤醒词激活机器人。

AMP架构支持

  • 强实时性:确保机器人控制板在处理关键任务时具有极高的响应速度和实时性。

  • 高稳定性:采用稳定的硬件和软件架构设计,降低系统故障率,提升机器人运行的可靠性。

  • 更低的硬件成本:通过优化AMP(Asymmetric Multiprocessing,非对称多处理)架构,实现性能与成本的平衡。

ROS适配

  • 适配标准ROS/ROS2:无缝集成ROS和ROS2,使机器人能够轻松接入机器人生态系统中的各类库、工具和应用程序。

  • 适配部分雷达:支持多种雷达传感器(如激光雷达、毫米波雷达等),提升机器人在复杂环境中的感知能力。

  • 适配RK结构光:与瑞芯微自研的结构光模组高度兼容,实现更精准的3D感知和测量。

RK3588在机器人控制板上的优势

  • 高CPU算力:高达93KDMIPS的CPU算力,为机器人控制板提供强大的数据处理能力,确保机器人能够迅速响应各种指令和任务。

  • 高GPU算力:高达512GFLOPs的GPU算力,支持复杂的图形渲染和多媒体处理,提升机器人的视觉感知和交互体验。

  • 高NPU算力:三核NPU,算力高达6TOPs(INT8),支持深度学习框架,为机器人控制板上的AI应用提供高效、精准的算力支持。例如,在yolo-v8n模型下,单核即可达到59.6fps的推理速度,满足实时性要求高的应用场景。

  • 瑞芯微自研模组:瑞芯微自研的结构光模组和RK1808计算棒等模组,为机器人控制板提供了更加专业的硬件支持,提升了机器人的整体性能和功能。

  • 工规芯片标准:支持-40摄氏度到85摄氏度的宽温工作环境,确保机器人在各种恶劣环境下都能稳定运行。

基于RK3588的机器人控制板设计方案框图

============RK3576+FPGA+AI=======================

 搭载新一代八核 AIOT  RK3576,采用先进工艺制程,内置 ARM Mali G52 MC3 GPU,集成 6 TOPS 算力 NPU,支持主流大模型的私有化部署。具备强大的高清高帧率显示能力,支持外部看门狗,拥有工业级的稳定性,广泛适用于 AI 本地部署应用场景。

2a271852-971b-11ef-8084-92fbcf53809c.jpg

八核 64 位 AIOT 处理器 RK3576

新一代八核 64 位高性能 AIOT 处理器 RK3576,采用大小核构架(4×A72 +4×A53),先进工艺制程,主频高达 2.2GHz,为高性能计算和多任务处理提供了强大支持。搭载 Mali - G52 MC3 GPU,145G FLOPS 的 GPU 可以支持有效的异构计算,满足图形密集型应用的需求。

更多的工业新特性

相对上一代芯片,RK3576更新多种工业新特性,包括:实时网络、信号输入、MCU、DSMC、Flexbus、资源隔离。

2afebbea-971b-11ef-8084-92fbcf53809c.jpg

全面的AI私有化部署

内置强劲 NPU,算力可达 6 TOPS;能够进行更智能的数据处理、语音识别、图像分析,满足大多数终端设备边缘计算 AI 应用需求。支持 Transformer 架构下大规模参数模型,如 Gemma-2B、Qwen1.5-1.8B、Llama2-7B、ChatGLM3-6B 等大模型的私有化部署。

4K@120 fps 高帧率视频解码

支持 8K@30fps / 4K@120fps 解码(H.265 / HEVC、VP9、AVS2、AV1 ) 和 4K@60fps 解码(H.264 / AVC),4K@60fps 编码(H.265 / HEVC、H.264 / AVC)。支持 HDMI2.1(4K@120fps)、DP1.4(4K@120fps0)

强大的网络通讯能力

拥有 1 路 1000Mbps 以太网、1 路 100Mbps 以太网、2.4GHz / 5GHz 双频 WiFi 、蓝牙5.0、4G LTE;让数据传输更稳定,速度更快,满足不同应用场景的需求。

支持 NVMe SSD硬盘

主机内部 M.2 接口,可扩展 2242 PCIe NVMe / SATA SSD 大容量存储设备,让设备轻松拓展至 TB 级的超大容量。

2b7a755a-971b-11ef-8084-92fbcf53809c.jpg

丰富的扩展接口

拥有 HDMI2.1、千兆以太网、百兆以太网、USB 3.0、USB2.0 、type-c(OTG / DP1.4)RS232、RS485、CAN、光耦隔离输入、继电器输出等接口,配置工业级全金属外壳,高效散热。

2b821c1a-971b-11ef-8084-92fbcf53809c.jpg

支持多种操作系统

支持 Android14、Linux OS、Buildroot+QT、国产操作系统,为产品研产提供安全稳定的系统环境。

提供完善的开发资料

我们提供配套的源代码、教程、技术资料和开发工具,让开发变得更加简单方便。

广泛的应用场景

RK3576可广泛适用于:边缘计算、大模型本地化、智慧商显、云终端产品、工控主机、汽车电子等行业领域。

在配置RK3568/RK3588与YT9215交换机芯片的网络通信时,需要从硬件连接、驱动支持、交换芯片配置以及网络功能测试等多个方面进行系统性设计和调试。以下是详细的网络配置指南: ### 硬件连接设计 RK3588的硬件底层支持两路GMAC(Gigabit Media Access Controller),即可以原生支持两个以太网接口[^2]。若需要拓展更多网口,可以将其中一路GMAC连接到交换芯片YT9215上。YT9215是一款支持千兆以太网的交换芯片,能够通过RGMII或SGMII接口与主控芯片通信,从而实现多个以太网口的扩展[^2]。 在设计硬件连接时,需确保以下几点: - GMAC与YT9215之间的接口(如RGMII)电气特性匹配; - 提供稳定的时钟信号(如125MHz)给YT9215; - 正确连接MDIO接口用于配置PHY寄存器; - 电源和复位电路设计合理,确保芯片稳定运行。 ### 驱动支持与配置 在软件层面,RK3588的Linux内核需包含YT9215的驱动支持。通常,交换芯片的驱动需要实现与主控芯片GMAC驱动的协同工作。例如,对于ksz8794等交换芯片,在设备树中需要配置如下节点: ```dts ksz8794_rgmii: ksz8794@1 { compatible = "microchip,ksz8794"; reg = <1>; status = "okay"; chip_id = <0x8760>; }; ``` 虽然ksz8794与YT9215是不同厂商的产品,但其设备树配置逻辑类似。对于YT9215,需在设备树中指定其I2C或MDIO地址、接口模式(如RGMII)、工作状态等参数[^4]。 此外,驱动中需要实现交换芯片的初始化逻辑,包括: - 配置PHY寄存器,设定接口模式; - 初始化交换表,设置端口转发规则; - 启用VLAN、QoS等高级功能(如需要)。 ### 网络功能测试与调试 完成硬件连接和驱动配置后,需进行网络功能测试。可以通过以下步骤验证网络通信是否正常: 1. 使用`ip link`命令查看网口状态是否UP; 2. 配置IP地址并尝试`ping`测试; 3. 使用`ethtool`查看链路状态、速率等信息; 4. 若通信异常,检查以下可能问题: - MDIO通信是否正常; - PHY寄存器配置是否正确; - 交换芯片内部端口转发规则是否设置正确; - 硬件信号完整性是否良好(如RGMII时序是否匹配)[^3]。 ### 注意事项 - 在调试过程中,建议使用逻辑分析仪或示波器检查关键信号(如MDIO、RGMII等)是否正常; - 交换芯片的固件或驱动版本需与硬件兼容; - 若使用VLAN或QoS功能,需在驱动和用户空间工具中统一配置; - 对于RK3568与RK3588之间的差异,需注意其GMAC控制器的寄存器布局和时钟配置是否一致,确保驱动兼容性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值