【语音处理】4个基本的时域信号特征分析技术

时域特征提取_PHM建模方法论之 数据特征提取 PHM建模方法论包括6大步骤,分别是数据采集、数据预处理、特征提取、模型建立、预测与诊断以及可视化。数据特征提取步骤是整个过程的第3步,目的是通过采用合适的数据分析方法,从原始数据中提取与建模相关的有效特征来建立模型。一、特征提取常用的特征提取方法,包括时域特征提取,频域特征提取,以及时频域特征提取。时域特征提取通常包括的参数较多,比如有RMS(有效值)、峰峰值、峭度、裕度、歪度、均值、... 阅读详情

上一节主要介绍了关于加窗函数的相关内容。对语音的时域信号进行分析是最直观的分析方式。本文将介绍语音信号处理中四种时域特征,分别是短时能量、短时过零率、短时自相关函数以及短时平均幅度差。

作者&编辑 | 小米粥

编辑 | 言有三

1. 短时能量

由于语音信号具有短时平稳性,我们通常对语音进行分帧处理。首先定义矩形窗为w(m),那么对于语音信号 x(t),其加窗分帧后第n帧语音信号 xn(m)为

矩形窗的是最直观、简单的窗函数,我们以其为例进行说明。矩形窗的表达式为:

36ce693fdad97d17767a49d7789f0abd.png

在该计算式中,n=0,T,2T,...,N为帧长,T为帧移长度。

第n 帧语音信号 xn(m)的短时能量En为

7d2ada1dd5a5e6ddfe0a06943d4390e8.png

使用幅值平方将对高幅值信号具有较大的敏感度,为了降低敏感度,定义短时平均幅度函数Mn为

a54533250d337774a36efdeee0b59a7d.png

短时能量En和短时平均幅度函数Mn的主要用途:

1.浊音相比较于清音的En具有较大的数值,因而可用于区分浊音和清音。

2.利用短时能量区分有声段和无声段,也可对声母和韵母分界,对无间隙的连字分界。

3.在语音识别任务中作为特征,表示能量特征和超音频信息。

2. 短时过零率

短时过零率表示一帧语音中波形信号穿过零值的次数。对于连续信号,过零意味着波形通过时间轴,而对于离散信号,过零意味着相邻采样点的符号改变。

首先定义符号函数sgn[·]为

30df8c9d79ed7941dc88025404b02841.png

则第n帧语音信号 xn(m)的短时过零率Zn为

94ca2bb623daea1b7b79b0c7baece9a2.png

由于短时过零率容易受到低频干扰,可设置相关门限T,将过零修改为穿过正负门限的次数,即

63459cfa7986f957c43c8a796802cef1.png

门限的存在使得短时过零率Zn具有一定的扛干扰能力,避免随机噪声导致的虚假过零。

短时过零率的主要用途:

1.浊音能量集中于3kHz内的低频率段,清音能量集中于高频率段,而短时过零率可以一定程度反映频率高低,因而浊音段相对于清音段,其短时过零率减低。

2.将短时过零率和短时能量结合实现端点检查。短时能量适用于背景噪声较小的情况,而短时过零率适用于背景噪声较大的情况。实际中,通常结合两个参数实现语音起点和终点的判断。

3. 短时自相关函数

语音信号xn(m)的短时自相关函数Rn(k)为:

0b6558948b66ab4d443fbe15cd45af42.png

其中,若信号xn(m)具有周期性,则短时自相关函数Rn(k)也具有周期性,且两者周期相同;Rn(k)为偶函数,当k=0s时,自相关函数具有最大值。

假设语音信号xn(m)的周期为T,那么短时自相关函数Rn(k)将在k=T,2T...取值时出现峰值。若要出现第一个峰值(即k=T),根据计算式

1128506499baf8fbf7222d5549085cee.png

需要取到信号中x(m=2T的样本点,即语音帧宽至少应大于两个周期,否则第一个峰值将无法较好的显示。例语音最小基频为80Hz,最大周期为12.5ms,两倍周期为25ms,因此10kHz的采样信号的帧宽至少为250个采样点。

另一方面,考虑到语音信号的短时性,应设置较低的帧长,因此可使用修正短时自相关函数,其定义为

5ca2f5275165c8522209bb83960f3d7a.png

其中,有

0d67c16881fe4e1b7c44c637f3f899b9.png

5f9926de7753a9d3ec205236aa14694b.png

而

2d6d0ee2bba3231251bed28c3cb477ea.png

d0c6463383661c00d8af338c57d95ae2.png

相比于短时自相关函数Rn(k),在修正短时自相关函数中,第一项xn(m)与Rn(k)中的xn(m)相同,而第二项x'n(m)与Rn(k)中的xn(m)相比,差异在于额外向后包括了k个样本点。

在严格定义中,修正短时自相关函数是一个互相关函数,其不满足自相关函数的性质(偶函数性),但其仍在周期整数倍上具有峰值。

短时自相关函数的用途:

1.浊音的自相关函数具有周期性,而清音的自相关函数类似于高频白噪声,没有周期性。

2.根据自相关函数的第一个峰值的位置,估算浊音的基音频率。

4. 短时平均幅度差函数

短时自相关函数使用大量乘法运算,计算时间较长,短时平均幅度差Fn(k)使用减法代替了乘法,大大减少了运算量,大量运用于实时语音处理方案上,其定义为

a57de3aee535bbe67f21294ea4043269.png

对于周期为T的语音信号,短时平均幅度差Fn(k)在k=T,2T...等取值上具有周期性的极小值。类似的,修正短时平均幅度差为

d0ca11b51bd45db1642e5bc22b5a9bbc.png

短时平均幅度差Fn(k)和Rn(k)具有数值关系:

f1db63b3e3f46cae20d7ce7db54f2407.png

其中,β(k)对不同的语音段,其数值在0.6-1.0之间变化。

短时平均幅度差的用途:

基音周期的检测,该方法比短时自相关方法的计算更为简单。

[1] 韩纪庆, 张磊, 郑铁然. 语音信号处理.第2版[M]. 清华大学出版社, 2013.

[2] 赵力. 语音信号处理: 机械工业出版社[M]. 机械工业出版社, 2016.

[3] 卢官明, 宗昉. 数字音频原理及应用[M]. 机械工业出版社, 2012.

总结

本节的主要介绍语音信号处理中的时域信号特征分析技术,主要包括短时能量,短时过零率,短时自相关函数以及短时平均幅度差四种定义以及相关的用途。

下一节,我们将介绍语音信号的频域信号分析相关内容。为了对语音知识有扎实的基础,我们将插入一节关于傅里叶相关的内容介绍。

有三AI-语音群

d44d5ff6d8dbd1ad44cdf659c6716a37.png

有三AI建立了一个语音群,便于有志者相互交流。感兴趣的同学也可以微信搜索 xiaozhouguo94,备注"加入有三-语音群"。

小米粥知乎

bac7309e7143235d0ede9bc7c50eb598.png

本专栏作者——小米粥 也在知乎进行同步更新专栏《语音信号处理》,欢迎相关同学共同讨论学习。

有三AI计算机视觉学习季划

b694e19522bcbf41b0675e15d0cf7ce6.png

ef7316721274d64bb047d4e3e3b1bf38.png

有三AI-CV季划是我们推出的终身计算机视觉培养计划,有三作为导师直接带领,囊括答疑,微信群交流,线下活动,多本自写的书籍,图文课件与代码,视频与直播,知识星球社区,内容组与研发组权限,了解详细请阅读以下文章:

【CV夏季划】2022年正式入夏,从理论到实践,如何系统性进阶CV?(产学研一体的超硬核培养方式)

【CV秋季划】模型算法与落地很重要,如何循序渐进地学习好(2022年言有三一对一辅导)?

【CV秋季划】人脸算法那么多,如何循序渐进地学习好?

【CV秋季划】图像质量提升与编辑有哪些研究和应用,如何循序渐进地学习好?

【CV秋季划】生成对抗网络GAN有哪些研究和应用,如何循序渐进地学习好?

【CV冬季划】终极进阶,超30个项目实战+3本书+3年知识星球

转载文章请后台联系

侵权必究

3276558f997551ba9d192c2ae3d247d6.png

3452f133e285e0b235504d031f35836b.png

63740d399ac1fc2c1b73118e4de72989.png

往期精选

信号与系统复习笔记——信号与系统的时域和频域特性 Xjω∣Xjω∣ej∡Xjω其中模使用∣Xjω∣表示,相位使用∡Xjω表示。Xejω∣Xejω∣ej∡Xejω傅里叶变换的幅值和相位同时影响了时域信号。 阅读详情

相关推荐

【数字语音处理】Part3 语音信号的短时时域分析:短时平均、短时自相关、语音端点检测、基音周期估值

Part3 语音信号的短时时域分析一、帧和加窗的概念二、短时平均能量三、短时平均幅度函数四、短时平均过零率五、短时自相关分析六、基于能量和过零率的语音端点检测七、基音周期估值八、总结 一、帧和加窗的概念 1.短时分析将语音流分为一段一段来处理,每一段称为一“帧”; 2.帧长:1030ms,20ms常见;(帧率)帧移:01/2帧长,帧与帧之间的平滑过度; 3.为了减少语音帧的截断效应,需要加窗处理...

点赞的都能无bug通过! 1万+

时域特征提取

时域信息是以时间为变量,描绘出信号的波形[22]。时域信号包括量纲特征参数以及无量纲特征参数。根据工作状况的差异,有量纲特征值的大小相应发生改变,而且工作环境对有量纲特征值有很大影响,具有表现不够稳定的缺陷,给工程应用带来一定困难,而无量纲指标对负载及转动速度的改变不敏感,能够更直观地表现出旋转设备运行中的状态信息。因此有量纲特征指标时常与无量纲指标一起使用。有量纲特征值容易理解、计算简单,故常被研究者使用。其中信号的平均值并不能反映样本数据的动态变化,通常用于检测,但其它参数的计算通常会用到平均值。工程应

qq_37240982的博客 2万+

信号时域与频域特征提取综合实践项目

在数字信号处理的众多领域中,信号特征提取是理解复杂信号并从中提取有价值信息的核心环节。本章将概述信号特征提取的基本概念,阐述其目的,并探讨其在不同应用场景中的重要性。时域特征是指直接通过信号在时间轴上的表现形式来描述信号特性的参数。在时域中,信号被视为时间的函数,特征包括信号的幅值、形状、持续时间等。时域特征简单直观,易于计算,广泛应用于信号处理、生物医学工程、地震学等多个领域。例如,在语音信号处理中,时域特征可以用来识别语音的不同部分。

weixin_36047538的博客 1045

时域分析——有量纲特征值含义一网打尽

在之前的文章(Mr.括号:信号时域分析方法的理解(峰值因子、脉冲因子、裕度因子、峭度因子、波形因子和偏度等))里对时域指标做过一些分析。最近由于新建立一个公众号(括号的城堡)将会对以前讲过的内容进行系统的梳理。内容将在公众号首发,欢迎大家关注。 时域特征值是衡量信号特征的重要指标,时域特征值通常分为有量纲参数与无量纲参数。 所谓“量纲”,简单地理解就是“单位”。有量纲的参数就是有单位的,比如平...

fengzhuqiaoqiu的博客 1万+

VS2017配置PCL1.9.1 for win10(超详细)

准备工作 VS2017 自行下载 PCL1.9.1 点击链接跳转Github下载,根据自己的环境选择 win64或win32,作者下载的是:PCL-1.9.1-AllInOne-msvc2017-win64.exepcl-1.9.1-pdb-msvc2017-win64.zip 安装PCL 双击点开PCL-1.9.1-AllInOne-msvc2017-win64.exe,选择Add PCL to the system PATH for all users, 更改安装路径,E:\Progra

malapoa的博客 1146

开关电源环路补偿--开关电源进阶知识补充1

笔记 一 . 做开关电源环路补偿时候为了使得环路更加稳定。 1 .-- > 希望开关电源的相位裕量在45° 以上, 2. – > 希望开关电源的增益裕量在10db 以上 3. – > 希望开关电源增益曲线在过0db 时候以20db /dec 斜率下降(体现1个极点) 4. – > 希望开关电源补偿之后的带宽达到开关频率的是1/5 ~1/10,用以原理开关电源的开关噪音。 左边图示电源瞬态拉载和释放负载的时候输出电压存在明显的振铃,说明这个目前的环路相位裕量(phase m

qq_29776365的博客 1万+

《数字语音处理》- 1. 基于MATLAB的语音信号时域特征分析

/1

镰刀 & 锤子;热情 & 初心 3989

铝合金外壳表面处理工艺全解析:从阳极氧化到瓷泳喷涂的7种方法对比

本文全面解析了铝合金外壳的7种主流表面处理工艺,包括阳极氧化、粉末喷涂、瓷泳喷涂等。通过对比其原理、性能、成本与应用场景,为产品设计师和工程师提供了从防护性、装饰性到功能性的立体选型框架,帮助您根据具体需求选择最佳工艺方案。

weixin_29278805的博客 748

语音数字信号处理系统设计(含matlab程序)

目录1 概述1.1.设计目的1.2.设计要求1.3.功能描述1.3.1数字语音信号采集1.3.2时域分析与频谱分析1.3.3叠加噪声1.3.4小波去噪1.3.5数字滤波器处理1.3.6设计框图2 原理分析2.1.语音的产生和感知2.2.语音信号的数学模型2.2.1激励模型2.2.2声道模型2.2.3辐射模型2.3.语音信号的时域、频域特性和短时分析技术2.3.1语音信号分帧2.3.2短时时域分析2.3.3短时频域分析2.4.带噪语音处理2.4.1带噪语音的产生2.4.2小波变换去噪2.4.3 IIR数字滤波

xx970829的博客 2万+

时序分析-由D触发器结构来理解Tsu、Th

FPGA逻辑单元内的D触发器(D-FF)是一种在时钟的上升沿(或下降沿)将输入信号的变化传送至输出的边沿触发器。 数字电子技术基础-闫石(第五版)边沿D触发器内部结构见下图: 而FPGA原理与结构(日)一书中,内部结构较之上图多了俩反相器: 由传输门和俩个反相器组成一个循环电路(锁存器),再由前后两级锁存器按主从结构链接而成。这里的传输门起开关作用,随着CLK的状态变化切换开关。只看输出的话,前级锁存器的值会随着时钟输入的变化井然有序地传入后级锁存器。为了防止时钟信号变化时输入信号发生冒险,从而使稳定.

XY_Chang的博客 3975

解决RK3566 USB OTG模式识别问题:从原理图分析到otg_mode文件操作全解析

本文深入解析RK3566 USB OTG模式识别问题,从硬件原理图设计到Linux内核的otg_mode文件操作,提供全面的调试方案。针对USB_OTG0_ID引脚电路设计、电源管理关联及内核驱动交互等关键点,给出实战调试技巧和常见问题解决方案,帮助开发者高效解决USB OTG模式切换难题。

eee77的博客 866

语音信号的特征分析

前言 语音信号处理主要包括语音通信(语音编码),语音合成和语音识别等,前提是对语音信号进行分析。只有将语音信号分析表示成其本质特性的参数,才有可能利用这些参数进行高效的语音通信,才可能建立用于语音合成的语音库,才有可能建立用于识别的模板或知识库。根据分析的参数不同,语音信号分析可分为时域、频域倒谱域等方法。贯穿于语音信号分析全过程的是“短时分析技术”,语音是一个非稳定的过程,具有时变特性,但是在一个较短的时间范围内其特性基本保持不变,即相对稳定,可以看成一个准稳定状态,因此一般分析语音都是进行“短时分析”。

weixin_43245268的博客 5772

昇腾310B实战:FFmpeg硬件加速全流程解析与性能优化

本文详细解析了昇腾310B与FFmpeg硬件加速的全流程,包括环境配置、性能优化及常见问题排查。通过实战案例展示,昇腾310B在视频转码中性能提升可达6倍,同时降低功耗,特别适合多媒体处理和高性能计算场景。

m3n5b7v8c9x的博客 737

matlab信号分割与比对,基于MATLAB的语音信号时域特征分析

程序代码如下:1.%短时谱函数figure(1)cleara=wavread('speech_c.wav');subplot(2,1,1)plot(a);title('original signal');gridN=256;h=hamming(N);form=1:Nb(m)=a(m)*h(m)endy=20*log(abs(fft(b)))subplot(2,1,2)plot(y);title('...

weixin_39551366的博客 1594

OpenCV-Python图形图像处理:自用的一些工具函数源代码

本文为《OpenCV-Python图形图像处理:博主自用的一些工具函数功能及调用语法介绍》内容配套函数的源代码。

老猿Python 2495

161、车载环视系统的ISP多路同步架构——海思Hi3516DV300的4路鱼眼校正与拼接的帧同步误差控制

文章摘要: 针对海思Hi3516DV300车载环视系统四路鱼眼摄像头拼接画面动态撕裂问题,分析发现根本原因为帧同步误差(部分通道帧起始时间差1.2ms)。关键解决措施包括:1)通过VI通道主从同步模式(MASTER/SLAVE)结合软件补偿控制帧延迟;2)优化VPSS通道帧率锁定与丢帧策略确保拼接时序一致;3)严格校准鱼眼校正LUT参数与产线标定数据匹配;4)建议采用硬件同步信号(如sensor的FSIN引脚)降低软件同步压力。调试阶段需通过示波器直接测量sensor VSYNC信号,量产时需注意动态切换分

zzfmlxs的博客 138

【语音处理】语音信号时域频域分析(含降噪滤波,端点检测,特征提取)【含Matlab源码 4173期】

语音信号时域频域分析(含降噪滤波,端点检测,特征提取) 完整的代码,方可运行;可提供运行操作视频!适合小白!

订阅付费专栏Matlab(奶茶价版)或下载付费资源,可赠送奶茶价版付费专栏指定代码1份; 1482

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

语音信号特征分析

直接从语音波形时间序列中提取,反映信号随时间的幅度、能量等动态变化,计算效率高,是语音信号的基础表征:通过傅里叶变换(Fourier Transform, FT)将时域信号转换为频率域表示,反映信号的频谱结构与能量分布,揭示语音的频率特性:通过离散余弦变换(Discrete Cosine Transform, DCT)将频谱转换为倒谱域,模拟人耳的听觉感知特性,是语音识别、特征提取的核心方法:属于“超音段特征”,刻画语音的宏观节律与语调变化,不依赖单个音素/音节,而是反映语音的整体动态模式:反映语音的“质地

weixin_39699362的博客 1051

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

SAP B1中文培訓教材_SDK

公司内部培训资料,对开发工具 ,DIAPI, UIAPI,Add-ON有详细解说

matlab 怎么画时域图,matlab画e时域波形图

用Matlab画出信号的时域波形及频谱,观察它们的关系。共20页_数学_自然科学_专业资料。用Matlab画出信号的时域波形及频谱,观 察它们的关系。 ? 46、寓形宇内复......首先,新建一个 MATLAB 的 GUI 项目,在命令行输入 guide,即会弹...(2t) 一 实验题目 f1(t)sa(2t) f2(t)u(t2)u(t2) f3(t)t[u(t 1 ) u(t 1 )] f...

weixin_31968639的博客 8015

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

【语音分离】通过分析信号的FFT,根据音频使用合适的滤波器进行语音信号分离附Matlab代码

在语音处理领域,从混合音频(如含人声、背景音乐、噪声的录音)中分离出目标语音是核心任务,广泛应用于语音识别、会议记录、降噪处理等场景。基于快速傅里叶变换(FFT)的频域分析结合滤波器设计,通过挖掘不同声源在频率域的分布差异,可实现高效的语音分离。该方法无需复杂的机器学习模型,仅通过 “时域 - 频域转换→特征分析→滤波器设计→信号重构” 的流程,即可将目标语音的信噪比提升 10-20dB,尤其适用于频率特征差异显著的混合信号(如人声与低频噪声、高音乐器与语音的分离)。语音信号的频域特性与分离原理。

m0_60703264的博客 865

matlab单字音频合成,2015Matlab语音信号处理-P84.doc

2015Matlab语音信号处理-P84数字语音信号处理前言语音信号处理是研究用数字信号处理技术和语音学知识对语音信号进行处理的新兴的学科,是目前发展最为迅速的信息科学研究领域的核心技术之一。通过语音传递信息是人类最重要、最有效、最常用和最方便的交换信息形式。同时,语言也是人与机器之间进行通信的重要工具,它是一种理想的人机通信方式,因而可为信息处理系统建立良好的人机交互环境,进一步推动计算机和其他...

weixin_42303721的博客 177

【MATLAB数字信号处理】离散时间信号的时域分析(一)

1.1 基础知识回顾 1.1.1 信号的特征与分类 ​ 信号可以由一个或多个源产生。在前一种情况下,该信号为标量信号;而在后一种情况下,该信号为向量信号,通常也称为多通道信号。一维信号是单个自变量的函数,二维信号是两个自变量的函数,多维信号是多个自变量的函数。 ​ 在自变量的指定值上信号的值称为信号的振幅,作为自变量的函数的振幅变化称为波形。 ​ 对于一维信号,自变量通常为时间。若自变量是连续的,则该信号称为连续时间信号;若自变量是离散的,则称为离散时间信号。对于一维连续时间信号,连续自变量通常用t表示;而

Planck_meteora的博客 4377

【语音处理】基于IIR+FIR滤波器声音信号时域频域分析附Matlab代码和报告

一. 研究背景随着互联网时代的飞速发展,音频信号依旧是当今时代通信行业发展的一大重要领域。音频模拟信号的分析也是各大领域研究的一个重点。在音频信号数字处理的过程也是研究的一个方向,将原始的音频信号进行处理,例如音乐行业调音师对音乐的细节调整,生物学研究生命发声的特性,计算机领域对音频信号的变声处理等,都离不开音频的数字信号处理。随着数字化技术的发展, 许多场合所使用的音频设备都由数字化音频处理技术代替了模拟音频技术, 数字化音。

qq_59747472的博客 907
上一篇: 【语音处理】时域信号分析基本工具,什么是窗函数
下一篇: 【视频课】CV必学,超10小时,3大模块,5大案例,循序渐进地搞懂图像分类理论与实践!...
言有三
言有三 领域专家: 人工智能技术领域 领域专家: 人工智能技术领域
博客等级 码龄15年 3635粉丝 976原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

言有三

三人行必有AI

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值