机器人语音---走进优必选

本文介绍了机器人语音技术部的关键技术,包括信号处理、语音识别ASR、自然语言处理及语音合成TTS等内容。探讨了多模态交互的概念,并通过案例展示了如何通过少量样本实现语音转换。文中还对比了几种主流的语音合成模型和技术,如Tacotron、Tacotron2和Transformer-TTS等,以及不同声码器如WaveGAN、WaveRNN和WaveGlow的表现。

 听会笔记

介绍了机器人语音技术部的关键技术包括前端的信号处理,语音识别ASR,自然语言处理,以及最后的语音合成TTS

                                        

 

机器人的多模态交互 

                                  

 语音转换案例,可以通过20句话使语音合成变成目标人声音

                                                                           

语音合成部分

 介绍了语音合成大致流程

 

                                           

 语音合成的发展

                                             

 优必选的pipeline

                                             

 

多音字发音和停顿的解决方法

                                                     

                                                            

seq2seq模型比较

tacotron:相比SPSS,节省了时长模型,语音质量好,但计算量大,训练/推理速度慢,容易丢字,漏字,句尾重音,不易控制

tacotron2:优化了丢字,漏字,计算量大,无法并行,训练/推理速度慢,

Transformer-TTS:语音质量好,结构并行,训练速度快,但推理速度慢

                                                            

 端到端模型方案比较

                                                          

 声码器比较

  1. WaveGAN 模型结构(GAN) 难训练,表现不稳定
  2. WaveRNN 模型结构 RNN   , 音质好且稳定
  3. WaveGlow 模型结构 CNN   , 有底噪,音质稳定

 

评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值