ESP-Skainet：开启智能语音助手的新纪元

ESP-Skainet：开启智能语音助手的新纪元

esp-skainet Espressif intelligent voice assistant 项目地址: https://gitcode.com/gh_mirrors/es/esp-skainet

项目介绍

ESP-Skainet 是乐鑫推出的一款智能语音助手，专为 ESP32 系列芯片设计。它提供了唤醒词识别和命令词识别功能，帮助开发者轻松构建智能语音应用。无论是智能家居、智能办公还是其他需要语音交互的场景，ESP-Skainet 都能提供强大的支持。

项目技术分析

唤醒词识别

ESP-Skainet 使用 WakeNet 模型进行唤醒词识别。WakeNet 专注于提供低资源消耗的高性能模型，支持多种常见唤醒词，如“Alexa”、“天猫精灵”、“小爱同学”等。乐鑫还免费开放了“Hi，乐鑫”、“你好小智”、“你好小鑫”、“Hi，ESP”等唤醒词。如果需要定制唤醒词，乐鑫也提供了相应的服务。

语音命令词识别

MultiNet 是 ESP-Skainet 的命令词识别模型，它提供了一个灵活的离线语音命令词识别框架。用户可以根据需求自定义语音命令，无需重新训练模型。MultiNet 支持中文和英文命令词识别，最大支持 200 个自定义命令词。

声学前端算法

ESP-Skainet 集成了 Audio Front-End (AFE) 算法，包括回声消除 (AEC)、自动增益调节 (AGC)、噪声抑制 (NS)、语音活动检测 (VAD) 和麦克风阵列算法 (Mic Array Speech Enhancement)。这些算法确保了语音识别的准确性和稳定性。

项目及技术应用场景

ESP-Skainet 适用于多种应用场景，包括但不限于：

• 智能家居：通过语音控制家电，如“打开空调”、“关闭灯光”等。
• 智能办公：语音助手可以帮助用户管理日程、设置提醒等。
• 智能设备：如智能音箱、智能摄像头等，通过语音交互提升用户体验。

项目特点

• 低资源消耗：WakeNet 和 MultiNet 模型设计精巧，能够在资源有限的 ESP32 芯片上高效运行。
• 灵活定制：用户可以根据需求自定义唤醒词和命令词，无需重新训练模型。
• 集成声学前端算法：AFE 算法确保了语音识别的准确性和稳定性，即使在复杂环境中也能表现出色。
• 丰富的硬件支持：ESP-Skainet 支持多种乐鑫开发板，如 ESP32-Korvo、ESP32-S3-Korvo-1 等，方便开发者快速上手。

快速开始

硬件准备

选择一块集成了音频输入模块的开发板，如 ESP32-Korvo、ESP32-S3-Korvo-1 等。

软件准备

1. 克隆 ESP-Skainet 工程：

   git clone https://github.com/espressif/esp-skainet.git
   

2. 配置 ESP-IDF 环境，支持 ESP-IDF v4.4 和 v5.0 版本。

示例运行

1. 进入 wake_word_detection 示例文件夹：

   cd esp-skainet/examples/wake_word_detection
   

2. 编译和烧写：

   idf.py flash monitor
   

3. 使用 idf.py menuconfig 命令添加或修改语音命令。

资源

• GitHub 问题跟踪：报告 bug 或提出新功能建议。
• 贡献指南：参与 ESP-Skainet 的开发。

ESP-Skainet 为开发者提供了一个强大的工具，帮助他们快速构建智能语音应用。无论你是初学者还是经验丰富的开发者，ESP-Skainet 都能为你提供所需的支持，让你的创意变为现实。

esp-skainet Espressif intelligent voice assistant 项目地址: https://gitcode.com/gh_mirrors/es/esp-skainet