销售客服的语音质检新实践:双模质检

上篇文章,我们介绍了新一代智能质检模式——基于深度学习技术的“非正则”质检落地应用效果:在很多质检项上远超“关键词+正则”的传统模式,能多找出 2~10 倍数量的目标通话,并且介绍了其工作原理与“关键词+正则”的区别。

​随着自然语言处理(NLP)领域技术的发展,以“非正则”质检模式为主、“关键词+正则”模式为辅的方案已成为未来发展趋势。两种模式将长期共存,因为它们各有其更擅长做的事情、更适配的场景。

 

“关键词+正则”模式的 2 种适配场景

在实际应用中,“关键词+正则”作为一种基础质检模式,越来越难以满足企业在质检效果和效率上的精细化需求。但是,这种模式也有它的优势:上手快。

当企业提出一个新的、此前从未用过的质检项时,质检项的标准尚未完全确定,因此可以用“关键词+正则”模式先跑起来,快速进行探索和迭代。其后根据初步探索和迭代的结果,再判断是否可以升级到基于深度学习技术的“非正则”模式。这是适配“关键词+正则”模式的第一种场景。

第二种场景:当一个质检项命中的目标通话量比较少,只有几百甚至几十条,就无法产生足够的“正例”给机器学习模型进行训练,只能继续采用“关键词+正则”模式。这是一种被动场景,也是比较常见的场景。

还有一种场景比较特殊:有些质检项命中的目标通话比较多,原则上可以用来训练机器学习模型,但是因为“关键词+正则”已经得出不错的结果,既找得全(术语叫召回率高),又找得准(术语叫准确率高),两个值都超过 90%,那么暂时就不迫切需要升级到“非正则”质检模式了。比如很多企业需要的正向质检项——“礼貌问候”,因为可以穷举出大部分“礼貌问候”的用词,用“关键词+正则”模式就能得到双 90%的结果。

不过,这种场景非常少见。大部分情况下,“关键词+正则”质检模式相比基于深度学习技术的“非正则”质检模式,在找全率和找准率上有很大差距。

“非正则”模式的 2 种适配场景

在实际应用中,基于深度学习技术的“非正则”质检模式(原理细节可参考上一篇文章),可以大幅提升质检效率,更好地解决企业质检任务的痛点:传统“关键词+正则”的模式,很难找得全和找得准目标通话,大大影响工作效率——如果找不全,就意味着会遗漏很多目标通话;如果找不准,就意味着在人工复检时会浪费大量人力。

我们之前分享过实际对比的例子,贷后资产管理领域的基础质检项“恐吓威胁”,采用基于深度学习技术的“非正则”质检模式找出的违规通话量是“关键词+正则”的 9 倍。

考虑到在实际使用中,质检项与命中的目标通话量之间的关系也存在“二八法则”——20%的质检项贡献了80%的质检量,所以将质检量大的少数质检项升级到“非正则”模式,往往可以大幅提升整个质检任务的找全率和找准率。这是“非正则”质检模式的第一种适配场景,也是主要的适配场景。

第二种场景:某些质检项,虽然从某一家企业的角度看,所命中的目标通话量不算大,但是这个质检项是整个行业中较为成熟的、通用的质检项,其他企业也都在用,那么就可以采用基于深度学习技术的“非正则”模式进行模型训练。因为其他企业都可以比较快速的复用或者经过简单调整之后复用,所以“非正则”模式带来的收益就更高。比如,消费金融领域的正向质检项“提示逾期天数”;客服领域的负向质检项“暴露客户隐私”等都是各自领域或行业通用的。

与“关键词+正则”质检模式相比,基于深度学习技术的“非正则”模式,不再需要既懂业务又懂正则的稀缺人才编写规则和迭代规则,只需要普通人快速进行数据标注即可训练算法模型,而且通常能得到更好的效果。唯一显著的缺陷就是,如果没有数千条数据,很难训练出效果好的模型。

“双模”质检,各司其职

当前阶段,质检项应该采取哪种模式,主要取决于该质检项产生的目标通话量大小——通常数量大,才能快速标注数据、训练出更好的算法模型,采用“非正则”模式,否则仍需要继续使用“关键词+正则”模式。

其次也要考虑到质检项的成熟度——太新的、标准尚不明确的质检项,适合先用“关键词+正则”模式迭代起来,再决定何时升级到基于深度学习技术的“非正则”模式。

综合来看,在实践中采用“双模”方案,让两种模式各司其职,可以最大程度提升质检效率。

  © THE END   

循环智能的主产品是基于对话数据的 AI 销售中台,针对销售和客服场景,提供三大核心模块:线索成单预测、客户心声分析和智能质检,并提供电话录音ASR语音识别基础服务。

相关推荐

零样本NLP平台:一句话生产一个模型的时代已经来临

技术变革带来全新生产方式,提升10-1000倍生产效率

循环智能(Recurrent AI) 576

线下门店销售过程看不见?智能工牌让每次沟通数据化、可分析

整合企业微信、App-IM、邮箱等线上沟通数据,与线下门店采集的互动信息深度融合,结构化还原客户全渠道沟通旅程,精准提炼动态客户画像,并自动生成全景式客户沟通总结,告别碎片化信息,全面呈现客户需求的演进脉络。✅ 赋能门店管理层:智能推送门店盘客日报,自动生成门店的盘客日报,分析客户意向等级、购买抗性、销售团队表现等;:汽车4S店、银行网点、高端家电和家居、高端零售、上门运维等所有复杂、多轮、长周期的线下销售场景。汽车销售:客户试驾3次,家庭成员意见从"要空间"到"要安全配置"再到"比价格"

循环智能(Recurrent AI) 680

智能质检产品Compliance:七大亮点满足企业多样化合规质检、SOP质检需求

最近,循环智能的智能质检产品Compliance全新升级,不仅对包括关联质检、流程质检、自定义字段在内的核心功能进行了全面迭代,满足企业更加多样化的合规质检和SOP质检需求的同时,还优化了语音转写模型、应用NLP小样本/零样本的盘古大模型提升AI检出效率,升级了软件的用户使用界面(UI),提升用户操作体验等。

循环智能(Recurrent AI) 942

65家保险机构参与调研,《2022保险业数字化客户经营白皮书》发布

中国银行保险报、普华永道与循环智能(Recurrent AI)联合编写

循环智能(Recurrent AI) 411

循环智能入选英特尔“AI百佳”计划,通过AI算力加速销售科技应用的落地

循环智能入选英特尔“AI百佳”计划,通过AI算力加速销售科技应用的落地

循环智能(Recurrent AI) 4557

循环智能与华为云联合推出全球最大中文语言模型,专攻企业级落地应用

循环智能与华为云联合推出全球最大中文语言模型,专攻企业级落地应用4月25日,循环智能(Recurrent AI)与华为云联合推出千亿参数、40TB训练数据的全球最大中文语言预训练模型“盘古”,鹏城实验室提供算力支持。在权威的中文语言理解评测基准CLUE榜单中,总成绩及阅读理解、分类任务单项均排名第一,刷新...

循环智能(Recurrent AI) 779

如何借助AI语义分析技术,帮助保险“电网销中心”人工坐席提升业务水平?

保险“电网销”的融合是近些年和未来很长一段时间内的行业发展趋势。以人身保险为例,从中国保险行业协会最新发布的统计数据来看,2020年“电网销”融合更紧密的互联网渠道累计实现规模保费2110.8亿元,较2019年同比增长13.6%;而纯电销渠道累计实现规模保费136亿元,较上一年下降了22.5%。其实,“电网销”融合之所以成为趋势,原因在于结合了两者的优势:先借助互联网实现客户的广泛触达和初步需求验证,再借助电话和企业微信等方式进行一对一沟通和深入需求挖掘,以实现需求为导向的销售。...

循环智能(Recurrent AI) 820

曾创造 XLNet 的团队宣布新计划:打造面向产业落地的超大规模中文预训练语言模型

由 XLNet 作者杨植麟联合创立的循环智能,在造一个面向产业应用的、超大规模的中文预训练语言模型。最近,如果你看过,智源研究院联合七家单位发布超大规模新型预训练模型“悟道·文汇”的新闻,会发现循环智能(Recurrent AI)是七家单位之一,其他六家是:阿里巴巴、清华大学、中国人民大学、中国科学院、搜狗和智谱.AI。这个模型的参数规模超过 100 亿,用于自动生成图片、文字以及视频,可具有初级认知能力。语言大模型的价值仍需要朝多种方向进行持续研究和探索。除了继续参与“悟道·文汇”模型的后续打..

循环智能(Recurrent AI) 952

销售沟通场景下,来自头部教育公司的三种AI对话分析方案

几乎每家在线教育公司都面临这样的难题:获客成本高昂,转化率难提升。为了提升转化率,很多企业提出了“精细化运营”策略——拆解转化流程的每一步,分析导致转化流失的原因,然后有针对性地去寻找每个环节的解决方案:从“获取线索”环节的广告投放渠道选择、落地页的设计,到“上试听课”前的预约试听、提醒上课,再到“回访转化”环节的答疑解惑和正价课的推介。但是整个转化过程的流失,也可能是由于销售人员(包含TMK电销专员、CC课程顾问、TA课程助理等有销售任务的职位)在与客户沟通过程中,未能准确传达产品价值...

循环智能(Recurrent AI) 1289

教育公司借助AI对话分析系统,提升销售效率分三步走

几乎每家在线教育公司都面临这样的难题:获客成本高昂,转化率难提升。​为了提升转化率,很多企业提出了“精细化运营”策略——拆解转化流程的每一步,分析导致转化流失的原因,然后有针对性地去寻找每个环节的解决方案:从“获取线索”环节的广告投放渠道选择、落地页的设计,到“上试听课”前的预约试听、提醒上课,再到“回访转化”环节的答疑解惑和正价课的推介。但是整个转化过程的流失,也可能是由于销售人员(包含TMK电销专员、CC课程顾问、TA课程助理等有销售任务的职位)在与客户沟通过程中,未能准确传达产品价值、未能..

循环智能(Recurrent AI) 663

循环智能的主动学习(Active Learning)技术探索与实践:减少 80% 标注量

作者 | 李海玉、陈虞君编辑 | 郝晓茹很多企业通过建立自己的客户联络中心,为客户提供服务、解答疑惑、推介新产品。在企业与客户的沟通过程中,产生了海量的非结构化录音和文本数据。为了让沟通更高效,服务质量更优,客户满意度更强,企业就需要从数据中洞察客户的真实需求、管理和提升业务员的沟通能力。但由于需要收集分析的数据量急剧增加,从大量数据中手动提取有用的知识变得非常困难和不可能,因此需要利用自然语言处理(NLP)和数据挖掘(Data Mining)技术来帮助企业挖掘和发现有用的知识。为了让机..

循环智能(Recurrent AI) 1029

AI智能质检新实践:如何借助“流程质检”,提升客服或销售的执行力

​想了解一家企业是否值得信赖,打一次热线电话就知道了。电话那头的客服或销售人员,代表企业直接与客户打交道,他们能否快速定位和解答问题,往往可以反应出企业的专业性和规范性。为了赢得更多客户信赖,企业不断总结出客户常见问题的标准作业流程(SOP),要求业务人员按流程帮助客户定位和解答问题。但是,如何监督业务人员在遇到特定场景或客户的特定问题时,有没有执行标准流程,有没有按要求进行回复呢?可...

循环智能(Recurrent AI) 1829

XLNet第一作者杨植麟:为什么预处理模型XLNet比BERT、RoBERTa更加优越

在2020年2月11日下午的“智源论坛Live | 青年科学家线上报告会”中,智源青年科学家、循环智能(Recurrent AI)联合创始人杨植麟做了题为《Latest Advances of Neural Language Models》的主题演讲。杨植麟,2019年博士毕业于卡内基梅隆大学,师从苹果AI负责人Ruslan Salakhutdinov,他曾与图灵奖得主Youshua Beng...

循环智能(Recurrent AI) 1565

AI智能质检优化实践:召回率和准确率,哪个更重要?

图:美剧《了不起的麦瑟尔夫人》很多企业拥有中大型电销或客服中心,每天与客户产生成千上万次沟通。沟通的质量,决定了企业的收入或客户满意度。企业监督业务人员的沟通质量和执行力的过程,被称为质检。前两篇文章,我们介绍了“关键词+正则”质检方式和全新的“非正则”质检方式的区别,也介绍了两种机器质检方式各自适配的场景。双模质检,各司其职。“非正则”质检方式通过引入深度学习算法模型,能够更好地...

循环智能(Recurrent AI) 3063

基于XLNet模型的下一代机器质检:从关键词到语义点

市面上有很多面向销售和客服人员的语音质检系统、文本质检系统,绝大部分产品实际使用的是基于“关键词+正则表达式”的机器质检系统。这种方法的主要优点是部署和上手使用都比较快,主要缺点是存在非常严重的漏检情况。就像一个漏孔很大的筛子一样,难以满足企业对质检的需求越来越精细、对质检效率要求越来越高的发展趋势。因此,在“关键词+正则表达式”之外,我们开始越来越多地为客户提供基于“语义点+机器学习...

循环智能(Recurrent AI) 951

语音识别新范式:完全的“端到端”模型优势在哪里?

目录语音识别新范式Transformer-XL 进一步释放注意力模型的优势从学术前沿到商业落地​“自然科学的发展除了按常规科学一点一滴地积累之外,还必然要出现‘科学革命’。”托马斯·库恩在其发表于 1962 年的经典著作《科学革命的结构》中提出的“范式转换”一词,如今已成为大家耳熟能详的技术用语。大的“范式转换”存在于基础科学领域,小的“范式转化”也存在于几乎每个细分的技术...

循环智能(Recurrent AI) 1613
上一篇: 基于XLNet模型的下一代机器质检:从关键词到语义点
下一篇: AI智能质检优化实践:召回率和准确率,哪个更重要?
循环智能
循环智能 企业官方账号 企业官方账号
博客等级 码龄7年 26粉丝 15原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值