Unity中的本地语音识别：Whisper.unity概览

Unity中的本地语音识别：Whisper.unity概览

whisper.unity Running speech to text model (whisper.cpp) in Unity3d on your local machine. 项目地址: https://gitcode.com/gh_mirrors/wh/whisper.unity

项目基础介绍及编程语言

Whisper.unity 是一个专为Unity3D设计的开源项目，旨在将OpenAI的Whisper自动语音识别（ASR）模型集成到游戏和应用之中，实现高效本地运行。此项目通过C#为主要编程语言，辅以Shell和批处理脚本进行构建操作，实现了跨平台的支持与灵活的应用。

核心功能

Whisper.unity的亮点在于其多语言支持能力，覆盖大约60种语言，不仅能执行语音识别，还能完成语间翻译，例如将德语语音转换成英文文本。它适应不同规模的模型，提供了速度与精度之间的多种选择，非常适合那些对隐私敏感、需离线运行的场景。此外，它的特色还包括：

• 多平台兼容：支持Windows（包括CUDA加速）、MacOS（Intel/ARM）、Linux（CUDA）、iOS、Android以及WebGL。
• 内置模型：附带最小化且快速的“ggml-tiny.bin”模型，尽管牺牲了一定的识别精度，但确保了轻量级应用的需求。
• 可扩展性：用户可以根据需求下载并使用其他大小的Whisper模型，比如提高英语识别准确率的特定模型。

最近更新的功能

由于没有提供具体的更新日志或明确指出最新的改动细节，我们无法直接从提供的信息中提炼出最近的具体更新功能。然而，基于项目的一般描述，可以合理推测，近期的更新可能涉及到对不同硬件架构的优化，特别是CUDA和Metal支持的增强，以及对新版本Unity引擎的兼容性升级。开发者通常会关注模型性能的提升、跨平台稳定性的增强和用户体验的改进。

Markdown格式

# Unity中的本地语音识别：Whisper.unity概览

## 项目基础介绍及编程语言
**Whisper.unity** 是一个基于Unity3D的开源项目，采用C#为主，结合Shell和批处理脚本，实现了OpenAI的Whisper ASR模型在本地设备上的高效率推理。

## 核心功能
- 多达60种语言的语音识别与翻译功能。
- 支持多尺寸模型，平衡速度与准确性。
- 完全离线，适用于隐私保护场景。
- 跨平台支持，涵盖主流操作系统和设备。

## 最近更新的功能
虽然具体更新详情未提及，预计包括性能优化、平台适配增强等。

---

注意：以上内容是基于项目概述的一般性分析，不反映项目的实际最新变动。

请注意，上述分析假设了最近更新的一般方向，而非基于具体的提交记录或版本发布说明。对于确切的更新内容，建议直接查看项目仓库的Release页面或Commit历史。

whisper.unity Running speech to text model (whisper.cpp) in Unity3d on your local machine. 项目地址: https://gitcode.com/gh_mirrors/wh/whisper.unity