边缘智能强力驱动，机器人天团花式整活赋能千行百业（独立开发者作品）

边缘智能技术快速迭代，并与行业深度融合。它正重塑产业格局，催生新产品、新体验，带动终端需求增长。为促进边缘智能技术的进步与发展，拓展开发者的思路与能力，挖掘边缘智能应用的创新与潜能，高通技术公司联合阿加犀智能科技主办了“2024高通边缘智能创新应用大赛”。大赛共甄选出 36 个卓越项目，以下为智能机器人赛道独立开发者的优秀项目分享：

▲  混合式AMR双臂机器人

▲  智能电动轮椅

▲ 陪伴式对话机器人

在刚过去不久的第二十六届中国国际高新技术成果交易会上，具身机器人、服务机器人、调酒机器人、情感陪护机器人、灵巧手……各类机器人及相关产业产品纷纷亮相，用强有力的“科技范儿”构建出了一幅幅无需再事事亲力亲为的生活、生产图景。

在此次大赛中，众多参赛团队也纷纷将目光投向了这一充满挑战与机遇的领域。其中独立开发者们凭借灵活和个性化的开发思维打造出了一系列突破传统模式、有望革新行业发展的智能机器人产品。

混合式AMR双臂机器人

尽管机器人技术的概念在市场上被广泛讨论，但实际上开发一款高性能的机器人产品仍面临重重挑战。首先，机器人系统的结构复杂性就是一个难以忽视的问题，它涉及到个人系统与机器人系统的切换、远程登录的实现以及调试端口设备的复杂操作。

此外，要设计出一款能够满足主频、运存、算力等技术参数要求的机器人，同时还要保证其易于开发、低功耗和高性能，这本身就是一项艰巨的任务。更进一步，要让这样的产品价格亲民、生态完善，使得所有人都能够负担得起并易于使用，更是难上加难。

对此，参赛团队基于阿加犀融合架构操作系统，并将高通QCS6490平台边缘智能物联网开发板作为主控运行算法、系统和应用，搭建了建图、定位、自主导航的移动机器人（底盘）和具备视觉识别抓取功能的双臂机械臂。移动底盘+视觉抓取的组合，仿真到实物的无缝衔接，打破机器人传统开发极限，实现了混合式AMR双臂机器人的部署应用。

融合架构操作系统+高性能硬件设备：机器人开发从未如此简单

软件方面，阿加犀融合架构操作系统AidLux提供原生的Android/鸿蒙+Linux+RTOS使用体验，在进行人机交互和导航、避障、运动控制、视觉识别等机器人功能的开发过程中无需再反复切换操作系统。AidLux平台上的Wayland显示服务器+QtScrcpy拷屏登录方式，有效解决了用户需要显示器配置、频繁远程连接的问题，简化了调试和开发流程。

同时，阿加犀边缘智能工具链中的模型优化平台AIMO在性能和功能上已经能够与行业内的领先企业媲美，特别是在算力生态方面，可以为用户提供高效、便捷的模型转换、优化、部署等服务。

硬件方面，高通QCS6490平台边缘智能物联网开发板1×A78@2.7GHz + 3×A78@2.4GHz + 4×A55@1.9GHz的CPU配置在同价位的嵌入式开发板中优势明显，8GB+64GB的运存+存储足以轻松应对大多数应用程序、算法操作、服务、系统的需求，14TOPS的算力可满足各种应用场景对机器人的复杂运算和实时响应需求。这种高性能、低功耗的硬件配置不仅提供了卓越的性能，还确保了成本效益，使得性价比达到了极致。

在软硬件的双重优势加持下，参赛团队在开发板上完成算法验证后，无缝切换实物调试。从开发到部署，一套设备全搞定，跑完仿真跑实物，实现了项目的快速验证——具备自主导航的机器人移动底盘+六轴视觉机械臂。

核心部件全解析：智能底盘与视觉机械臂

其中，机器人移动底盘集成了先进的多传感器系统，包括多目视觉、雷达、惯性测量单元（IMU）和轮速计。利用LVIO传感器的传感数据融合技术，构建出带有RGB色彩信息的高分辨率纹理点云地图；结合模型和语义信息实现精确导航控制。此外，底盘还能接收并处理LVIO的原始数据，将融合后的数据与纹理点云相结合，精确识别并定位具有语义信息的目标点，确保机器人能够准确到达预定位置。

视觉机械臂则通过集成find object物体识别技术、DH参数和AidLux的物体识别功能，实现了对物体的精准识别和抓取。在操作过程中，机械臂能够灵活切换“眼在手”和“眼在外”两种模式，准确解析并抓取目标物体。此外，通过远程操作采集的实时关节数据，机械臂可以训练出精准的抓取模型，简化抓取流程，只需输入图像即可执行抓取任务。

除了作为高等教育和科研的学习套件，提供高性价比且性能卓越的教学服务以外，持续深化具身感知能力的混合式 AMR 双臂机器人还将有望在广泛的复杂应用场景中提供服务，进一步拓展实用性和市场潜力。例如在工业生产装配领域自动完成物料搬运、组装等任务，减少人力成本，提高生产效率，在新零售服务领域提供更加个性化和互动性的服务，增强顾客购物体验，等等。

智能电动轮椅

随着人口老龄化的加速，电动轮椅的需求正日益增长。根据市场研究，2023年中国电动轮椅行业市场规模约为 70 亿元人民币，随着人口老龄化的加剧和慢性病患者数量的增加，中国电动轮椅市场还将迎来爆发式增长。然而，当前市场上的电动轮椅功能相对基础，缺乏智能化辅助，且普遍存在功能同质化的问题，难以满足用户对高安全性和便捷性的需求。

与此同时，自动驾驶技术正在迅速进步，尤其是基于视觉的辅助驾驶技术已经趋于成熟。随着技术的进步，这些技术的成本和算力需求正在显著降低，为电动轮椅行业带来了新的发展机遇。考虑到电动轮椅的运行速度通常不超过10km/h，且在遇到问题时需要立即提示用户接管，电动轮椅成为了L2级别辅助驾驶技术应用的理想场景。

边缘智能技术驱动，电动轮椅迈向无人辅助驾驶新台阶

对此，参赛团队聚焦人流量较小的人行通道或公园景区等特殊应用场景，将先进的辅助驾驶技术整合到现有电动轮椅中，利用嵌入式系统本身多接口的优势，使用单一摄像头以及一个算力平台，打造出具有无人辅助驾驶功能的高端电动轮椅，整体成本低，且对原车的侵害小。

当然，边缘智能计算终端+电动轮椅的应用方案与汽车辅助驾驶系统的应用场景存在显著差异——电动轮椅的使用环境通常涉及更多的特殊情况和复杂多变的行驶条件，有时甚至比传统道路更为复杂。因此电动轮椅的辅助驾驶系统也必须要能够应对这些挑战，才能确保用户在各种环境下的安全和便利。

为满足这些要求，参赛团队采用了算力高达14TOPS的高通QSC6490平台边缘智能物联网开发板，通过摄像头和深度神经网络技术，实现对电动轮椅周围环境的精准识别和测距。目前，大多数电动轮椅的底层通讯依赖于CAN或UART串口，该开发板具备与这些系统进行无缝对接和控制的能力，从而使得电动轮椅能够实现L2级别的辅助驾驶功能。

该项目使用单个摄像头的纯视觉导航，摒弃了自动驾驶中冗余的传感器，使其电动轮椅在无需人工控制的情况下，高效自主完成环境感知、障碍物避让、路径规划以及安全移动等一系列复杂操作，极大地提升了电动轮椅的智能化水平和用户体验。

多场景应用赋能，商业化落地启航

这一项目不仅推动电动轮椅技术的创新，提升了电动轮椅的智能化水平，还带来了更加人性化和智能化的产品，为老年人和行动不便人士提供更加便捷、安全和舒适的移动体验，满足他们对高品质生活的追求。

在确保实用性和性能稳定性的同时，高通平台结合阿加犀技术打造的智能电动轮椅方案具有显著的经济优势，如果该方案能够以千元的价格成功推向市场，预计销售额将达到亿元规模。例如通过与电动轮椅制造商和医疗设备供应商合作，提升传统产品的智能化水平，或者直接向消费者和医疗机构销售智能辅助系统来实现。

陪伴式对话机器人

人工智能技术正逐渐渗透并影响着众多行业，其中儿童智能机器人领域也受到了不少开发者的关注。随着技术的演进，儿童对于智能终端的需求早已超越了单一的学习机，而变成了一个既能益智又能提供情感陪伴的多功能伙伴，儿童智能硬件也从最初的点读机、家教机，发展到了现在的第三代——智能陪伴机器人。

在这样的背景下，开发者们利用边缘智能技术为智慧教育注入新活力，打造了一款集知识与情感于一体的陪伴式对话机器人demo。

边缘智能技术实现高质量陪伴陪护

这款机器人通过外接的摄像头、麦克风和扬声器进行数据采集，并在高通QCS6490平台边缘智能物联网开发板上高效进行数据分析和处理。得益于阿加犀边缘智能开发工具链的支持，开发者成功在端侧部署了大型语言模型（LLM）、自动语音识别（ASR）和文本转语音（TTS）技术，使得机器人能够快速执行人脸识别、动作捕捉、图像识别、语音交互和前端效果展示等多种功能。

具体应用场景包括：识别陌生人入侵并发送警报、监控儿童坐姿并提醒、拍照解题、英语口语对话练习、游戏互动如飞花令，以及根据需求讲故事、播放音乐和进行自然流畅的对话等。总体来看，这款机器人不仅能够提供学习辅导、情感支持和娱乐互动，还能智能预警，守护儿童安全。

输出文本的同时也会输出语音对话

结合前端用户界面（UI），该陪伴式对话机器人能够进一步打造符合儿童认知特点的可视化交互界面，更完美地服务于需要高质量教育和陪伴资源的中高端家庭服务，为3至12岁的儿童提供用户友好、多元化、互动性强且安全性高的陪伴体验。

项目现场演示