AIGC: 关于ChatGPT中基于Whisper模型实现音频转文本

概述

  • 到目前,GPT只能去接收文本的输入,但是在现实的生活当中,会有语音的需求
  • GPT也有相关的能力接入,我们就需要一个能够将语音内容转换成文本的能力
    • 当然其他第三方的软件或者接口也是支持这个功能
    • 在 Open AI 有一个语音转文本的模型叫做 whisper
  • 在 Open AI 它的官方网站当中,在左侧可以看到有一个 Audio 关于音频的API
    • 文档: https://platform.openai.com/docs/api-reference/audio/create-transcription
    • 接口: https://api.openai.com/v1/audio/transcriptions
  • 可以看到它的参数
    • file 参数,必选,file类型,支持 mp3,mp4,mpeg,mpga,m4a,wav,or webm.
    • model 参数,必选,string 类型,目前仅支持 whisper-1
    • prompt 参数,可选,string 类型
    • response_format 参数,可选,string 类型
    • temperature 参数,可选,number 类型 默认 0
    • language 参数,可选,string 类型
    • …
  • 与其他的音频转文本的方法或者工具不同的
Whisper实现语音识别转文本 本文简单介绍了whisper的用途、在windows系统下安装部署whisper的方法以及whisper的简单用法。关于whisper的使用部分仅介绍了命令行模式的使用方法,如果你会使用python,也可以使用以下代码来运行whisper。了解更多请参考官方文档。或者如果你想要在网页上运行whisper,可以安装Whisper Webui。 阅读详情

相关推荐

ChatGPT API之语音转文字

语音到文本 API 提供了两个端点,和基于我们最先进的开源大型Whisper-v2模型。将音频转录成任何语言。将音频翻译并转录成英语。mp3mp4mpegmpgam4awav和webm。

waaaaaa0811的博客 2520

AIGC实战指南:从核心概念到工具应用,构建你的AI生成内容知识体系

人工智能生成内容(AIGC)是当前技术领域的热点,其核心在于让机器学习海量数据后,能够自主生成文本、图像、音频等全新内容。从技术原理上看,当前主流路径主要基于扩散模型和大语言模型(LLM)。扩散模型通过巧妙的“加噪-去噪”过程实现高质量图像生成,而LLM则作为理解人类指令的“大脑”,驱动着多模态系统的运作。这些技术的工程价值在于极大地降低了创意与内容生产的门槛,提升了生产效率。其应用场景已广泛渗透到设计、运营、产品开发乃至日常工作的方方面面。面对信息过载和工具繁多的现状,本文旨在提供一份清晰的AIGC资源地

weixin_30627341的博客 402

生成式AI入门实战:从文本生成到RAG的五个核心项目

生成式人工智能作为当前AI应用落地的核心技术,其核心原理在于通过大规模预训练模型学习数据分布,从而具备理解和创造文本、图像、语音等内容的能力。这项技术的核心价值在于能够自动化内容生产、提升人机交互自然度,并赋能各行各业实现智能化升级。在实际应用场景中,开发者常需从文本生成、图像创作、语音交互等基础功能切入,逐步深入到模型定制与知识增强等高级应用。本文聚焦于模型微调(Fine-tuning)和检索增强生成(RAG)两大关键技术,通过五个由浅入深的实战项目,系统演示如何利用现有API和开源工具,快速构建具备专业

dianwei5413的博客 428

GPT-4o端到端多模态原理与实战:从语音视频联合理解到免费生产力跃迁

多模态AI是指模型能同时处理文本、语音、图像等异构信息的技术范式,其核心在于跨模态对齐与联合表征学习。GPT-4o通过端到端架构摒弃传统ASR→LLM→TTS流水线,实现音频波形、视频帧与文本token的统一张量输入与动态注意力加权,显著提升说话人识别、情绪感知与实时交互能力。该技术突破不仅降低延迟至毫秒级,更重构了AI工程逻辑——将多服务串联压缩为单次推理,释放出面向个人开发者的普惠生产力。结合免费层开放的文件解析、网络检索与Memory功能,开发者可快速构建会议纪要、学术研究、远程协作等高价值场景。GP

weixin_34221773的博客 557

用Python玩转共现分析:从NLTK到热力图可视化(附完整代码)

本文详细介绍了如何使用Python进行文本共现分析,从NLTK基础文本处理到构建共现矩阵,并实现热力图可视化。通过完整的代码示例,帮助数据分析师和开发者掌握这一揭示词语间关联网络的实用NLP技术,快速从文本中提取语义关系和主题结构。

weixin_29313817的博客 351

Proteus仿真——电压比较器

电压比较器是一种对输入信号进行鉴别与比较的电路,是组成非正弦波发生电路的基本单元电路。常用电压比较器有如下几种:单限比较器、滞回比较器、窗口比较器、集成电压比较器等。

weixin_58745307的博客 3377

Autosar Davinci Configurator新建工程以及导入DBC和CDD

Autosar Davinci Configurator新建工程前言一、Autosar Davinci Configurator新建工程二、Autosar Davinci Configurator导入DBC和CDD1.引入库2.读入数据总结 前言 如何用 DavinciCFG 新建工程,以及导入DBC和CDD文件。 一、Autosar Davinci Configurator新建工程 示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。 二、Autosar Davinc

别再跑偏了的博客 1万+

S32DS IDE调试技巧:如何用Attach功能高效定位汽车电子MCU的Bootloader问题

本文详细介绍了在汽车电子MCU开发中,如何利用S32DS IDE的Attach调试模式高效定位Bootloader与应用程序的协同问题。通过对比常规调试与Attach模式的本质差异,并深入讲解工程配置、镜像合并及实战调试流程,帮助开发者在不复位、不重新下载程序的前提下,实时分析系统状态,快速解决内存映射冲突、中断向量表重定向等疑难杂症。

weixin_29168393的博客 272

COMSOL+AI实战:5个超实用技巧让你的仿真效率翻倍(附Python代码)

本文详细介绍了如何将人工智能(AI)与COMSOL仿真软件结合,通过Python脚本实现五大实用技巧,包括自动化生成数据集、构建代理模型、集成AI优化算法、利用神经网络加速场量求解以及智能结果分析,从而显著提升多物理场仿真的效率和自动化水平。

weixin_29230865的博客 444

【现代控制理论期末考点】

现代控制理论期末考点,适用于 SEU Automation

【人工智障 | 计算鸡视觉 | 机器孩】 1445

vscode配置matlab工作环境

前面有两篇文章我们分别讲了在vscode里面如何配置C语言环境和python环境,那两篇文章总体来说比较复杂,当然这篇也有许多有趣的问题。 附上链接: 文章目录matlab简介基本要求code runner插件与matlab相关的插件添加路径小结code runner是否支持更多语言更多选择另一个选择 matlab简介 MATLAB是美国MathWorks公司出品的商业数学软件,用于数据分析、无线通信、深度学习、图像处理与计算机视觉、信号处理、量化金融与风险管理、机器人,控制系统等领域。 MATLAB是ma

Cachel Wood的博客 4543

C#上位机之海康相机开发(SDK)实战教程

SDK的接口设计遵循“句柄-操作-释放”模式,掌握→→→的流程,就能完成基础开发;工业场景需重点关注稳定性:断连重连、内存管理、抗干扰(网口相机的IP设置、触发信号的可靠性);进阶功能(如图像处理、多相机同步)需结合视觉库(EmguCV)和硬件特性(GPIO触发),但前提是保证基础采集的稳定。建议新手先跑通SDK自带的C#示例,理解每个函数的作用,再逐步替换为自己的代码。

这里只有干货:从 Modbus 通信到 MES 对接,从 YOLO 训练到工控机部署,带你搞定工业软件开发全流程。 2196

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

廖雪峰Python教程[完整版]

廖雪峰的python教程整理的,已经排好版了,而且还是完整的,适合小白

上一篇: AIGC: 关于ChatGPT中进行情感分析的功能
下一篇: 前端小技巧: 实现一个比较两个对象是否相等的方法
Wang's Blog
博客等级 码龄12年 7434粉丝 2421原创
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Wang's Blog

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值