1.本发明涉及语音降噪技术领域,特别涉及一种频带增益模型的训练方法及用于车载场景的语音降噪方法。
背景技术:2.随着汽车智能化程度的提升,车载语音系统成为汽车座舱内的标准配置,车载语音系统有两个需求,(1)行车时保证清晰的语音通话质量;(2)行车时保证稳定的语音识别系统性能。由于行车过程中发动机噪声、风噪、路噪和空调噪声等的影响,语音信号受到复杂环境的干扰,严重影响语音系统的表现,影响用户的使用体验。车载场景中的噪声已经成为一个必须克服的问题。
3.语音降噪的常用方法及特点可以归纳如下:
4.(1)传统的基于信号处理的算法,如谱减法,维纳滤波法等,假定语音服从一定的分布,而噪声是平稳或者缓慢变化的,估计噪声的功率谱或者理想维纳滤波器,算法简单,实时性好,满足条件下能取得较好的分离性能,但实际的场景环境中,难以满足假设条件,降噪性能会打折扣。
5.(2)基于分解计算的方法,如非负矩阵分解,假设声音信号的频谱具有低秩结构,因此可以采用一个数量比较小的基来进行表示,能够挖掘语音信号中的基本谱模式,但这种计算方法是线性模型结构,难以捕捉语音信号的非线性特性,而且计算代价较大,复杂度高,很难满足实时性要求。
6.(3)基于规则的算法,如根据听觉场景分析的研究中发现的一些规则或机制对噪声场景下的语音增强问题进行建模,这种方法的以规则为支撑,模型的可解释性较强,但因为听觉研究一般采用较为简单的刺激作为输入,得到的规律不一定适用于复杂听觉环境,其模型目标是重现实验范式中的结果,难以应用到实际的问题中,另外大部分的听觉模型严重依赖于分组线索,尤其是基音提取的准确性,而这在复杂的听觉环境下又难以保证,因此语音降噪的效果不够理想。
7.(4)基于深度学习模型的降噪算法,依靠计算机强大算力,利用深度神经网络的高度非线性对语音进行建模,在庞大数据量的驱动下,能获得较好的降噪表现,但模型对计算资源要求高,实时性差。
8.另外由于语音降噪和语音识别的优化目标不同,很多降噪算法处理后的语音数据会受损,导致语音识别系统的准确率下降,因此降噪算法的设计需要兼顾语音识别算法的模型设计。
技术实现要素:9.为了克服现有技术存在的不足,本发明提供了频带增益模型的训练方法及用于车载场景的语音降噪方法,所述技术方案如下:
10.一方面,本发明提供了一种频带增益模型的训练方法,所述频带增益模型基于神
经网络模型,采用sru架构,所述频带增益模型能够依据带噪语音信号的特征值对其多个频段的信号进行降噪增益;
11.所述训练方法包括以下步骤:
12.s1、将纯语音信号和纯噪声信号分别分帧后,并逐帧按照频率进行分带,得到n个纯语音频带和n个纯噪声频带,计算各纯语音频带和各纯噪声频带的能量;将所述纯语音信号和纯噪声信号混合后,得到带噪语音信号,对其进行分帧处理,并逐帧按照相应频率进行分带,得到n个带噪语音频带,计算各带噪语音频带的能量;
13.根据各纯噪声频带的能量,以得到所述纯噪声频带相应的n个对数谱;
14.根据所述纯语音频带的能量与相应频段的所述带噪语音频带的能量的比值,以得到n个增益期望值;
15.根据各带噪语音频带的能量,得到相应的对数功率谱,并通过反离散余弦变换得到n个mfcc系数,以作为所述带噪语音频带相应的n个特征值;
16.s2、将所述n个特征值输入所述频带增益模型,以输出各带噪语音频带对应的增益值,并利用所述增益期望值以及所述对数谱作为标签进行神经网络训练,以实现对所述频带增益模型的参数优化。
17.进一步地,所述频带增益模型包括第一sru层、第二sru层、第三sru层、第四sru层、第五sru层、第一全连接层和第二全连接层,
18.所述特征值输入至所述第一sru层,使用tanh激活函数处理后输出;
19.所述特征值输入至所述第一全连接层,使用tanh激活函数处理后输出至所述第二sru层,在所述第二sru层,使用relu激活函数处理后输出至所述第三sru层;
20.在所述第三sru层中,对所述第一全连接层的输出和第二sru层的输出使用relu激活函数处理后输出;
21.在所述第四sru层中,对所述第一sru层的输出和第三sru层的输出使用relu激活函数处理后输出;
22.在所述第五sru层中,对所述第一sru层的输出、第三sru层的输出和第四sru层的输出使用relu激活函数处理后输出;
23.在所述第二全连接层中,对所述第五sru层的输出使用sigmoid激活函数处理后输出,以得到所述带噪语音频带的增益值。
24.进一步地,所述第二sru层中的sru单元能够进行并行计算,并能通过遗忘门更新隐藏态。
25.进一步地,对所述带噪语音信号的各帧进行清音判断及处理,以得到其基音周期值,并将所述基音周期值作为新增特征值输入至所述频带增益模型一起进行训练。
26.进一步地,根据所述基音周期值,得到所述带噪语音信号对应的基音信号带,计算所述基音信号带的能量,并结合所述带噪语音频带的能量一起做离散余弦变换,以得到关联参数,将其作为新增特征值输入至所述频带增益模型一起进行训练。
27.进一步地,对所述特征值做一阶导数和/或二阶导数处理,将得到的结果作为新增特征值输入至所述频带增益模型一起进行训练。
28.进一步地,所述纯语音信号、纯噪声信号和带噪语音信号均才采用梅尔滤波器进行分带。
29.另一方面,本发明还提供了一种适用于车载场景的语音降噪方法,包括以下步骤:
30.p1、将带噪语音进行分帧处理,并逐帧按照频率进行分带,得到m个带噪语音频带,提取其对应的m个特征值,并输入所述的频带增益模型,以得到所述带噪语音频带对应的增益值;
31.p2、采用梳状滤波器对所述带噪语音频带进行基音滤波;
32.p3、计算所述带噪语音频带滤波后的能量,以得到所述带噪语音频带在滤波前后的能量比值;
33.p4、将所述带噪语音频带滤波后的信号与所述能量比值相乘,再与所述带噪语音频带对应的增益值相乘,以得到降噪后语音数据。
34.进一步地,所述梳状滤波器的设置公式如下:
35.x
′
[i]=x[i]+a
×
p
[0036]
其中,x[i]和x
′
[i]分别表示滤波前后的信号,a为滤波器系数,p为含基频部分语音信号生成的频域数据。
[0037]
进一步地,所述滤波器系数采用以下公式计算:
[0038][0039]
其中,expe为所述带噪语音信号能量与其基音能量的相关值,g
b
为增益值。
[0040]
本发明提供的技术方案带来的有益效果如下:
[0041]
(1)提高了在低信噪比以及不平稳噪声的环境下的降噪效果;
[0042]
(2)对带噪语音进行降噪的同时保证语音识别系统的鲁棒性。
附图说明
[0043]
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0044]
图1是本发明实施例提供的频带增益模型框架示意图;
[0045]
图2是本发明实施例提供的频带增益模型结构示意图;
[0046]
图3是本发明实施例提供的频带增益模型中sru单元的结构示意图;
[0047]
图4是本发明实施例提供的用于车载场景的语音降噪方法的流程示意图。
具体实施方式
[0048]
为了使本技术领域的人员更好地理解本发明方案,更清楚地了解本发明的目的、技术方案及其优点,以下结合具体实施例并参照附图对本发明实施例中的技术方案进行清楚、完整地描述。需要说明的是,附图中未绘示或描述的实现方式,为所属技术领域中普通技术人员所知的形式。另外,虽然本文可提供包含特定值的参数的示范,但应了解,参数无需确切等于相应的值,而是可在可接受的误差容限或设计约束内近似于相应的值。显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施
例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。除此,本发明的说明书和权利要求书中的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、装置、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0049]
在本发明的一个实施例中,提供了一种频带增益模型的训练方法,所述频带增益模型基于神经网络模型,采用sru架构,所述频带增益模型能够依据带噪语音信号的特征值对其多个频段的信号进行降噪增益。
[0050]
所述训练方法包括以下步骤:
[0051]
s1、将纯语音信号和纯噪声信号分别分帧后,并逐帧按照频率进行分带,得到n个纯语音频带和n个纯噪声频带,计算各纯语音频带和各纯噪声频带的能量;将所述纯语音信号和纯噪声信号混合后,得到带噪语音信号,对其进行分帧处理,并逐帧按照相应频率进行分带,得到n个带噪语音频带,计算各带噪语音频带的能量;
[0052]
根据各纯噪声频带的能量,以得到所述纯噪声频带相应的n个对数谱;
[0053]
根据所述纯语音频带的能量与相应频段的所述带噪语音频带的能量的比值,以得到n个增益期望值;
[0054]
根据各带噪语音频带的能量,得到相应的对数功率谱,并通过反离散余弦变换得到n个mfcc系数,以作为所述带噪语音频带相应的n个特征值;
[0055]
s2、将所述n个特征值输入所述频带增益模型,以输出各带噪语音频带对应的增益值,并利用所述增益期望值以及所述对数谱作为标签进行神经网络训练,以实现对所述频带增益模型的参数优化。
[0056]
其中,所述频带增益模型包括第一sru层、第二sru层、第三sru层、第四sru层、第五sru层、第一全连接层和第二全连接层,
[0057]
所述特征值输入至所述第一sru层,使用tanh激活函数处理后输出;
[0058]
所述特征值输入至所述第一全连接层,使用tanh激活函数处理后输出至所述第二sru层,在所述第二sru层,使用relu激活函数处理后输出至所述第三sru层,所述第二sru层中的sru单元能够进行并行计算,并能通过遗忘门更新隐藏态;
[0059]
在所述第三sru层中,对所述第一全连接层的输出和第二sru层的输出使用relu激活函数处理后输出;
[0060]
在所述第四sru层中,对所述第一sru层的输出和第三sru层的输出使用relu激活函数处理后输出;
[0061]
在所述第五sru层中,对所述第一sru层的输出、第三sru层的输出和第四sru层的输出使用relu激活函数处理后输出;
[0062]
在所述第二全连接层中,对所述第五sru层的输出使用sigmoid激活函数处理后输出,以得到所述带噪语音频带的增益值。
[0063]
为了增强训练的效果以及加快训练的时间,至少可以采用以下三种方式以丰富所述带噪语音的特征值的来源:
[0064]
方式一:对所述带噪语音信号的各帧进行清音判断及处理,以得到其基音周期值,并将所述基音周期值作为新增特征值输入至所述频带增益模型一起进行训练。
[0065]
方式二:在方式一的基础上,在根据所述基音周期值,得到所述带噪语音信号对应的基音信号带,计算所述基音信号带的能量,并结合所述带噪语音频带的能量一起做离散余弦变换,以得到关联参数,将其作为新增特征值输入至所述频带增益模型一起进行训练。
[0066]
方式三:对所述特征值做一阶导数和/或二阶导数处理,将得到的结果作为新增特征值输入至所述频带增益模型一起进行训练。
[0067]
需要注意的是,以上三种方式可同时使用,大量地增加了所述带噪语音的特征值,将其一起输入所述频带增益模型进行模型训练,效果更佳。
[0068]
在本发明的一个实施例中,针对频带增益模型,进行以下方式训练。
[0069]
步骤1使用录音设备采集行车过程中的纯噪声音频数据和纯语音频数据。
[0070]
其中,行车过程中的纯噪声音频数据指在某一车速以及车窗和空调状态下对应采集的纯噪声音频数据;车速数据即为对应背景噪声的车速,数值为整数,如80代表80km/h;空调数据表示该背景噪声下空调风挡的挡位信息,这里分别为[关闭,半开]状态;车窗数据表示该背景噪声下的车窗开闭状态信息,这里分别为[关闭,半开,全开]状态。数据包括车速30
‑
120区间,四个车窗和空调不同开启状态,各种行车工况下的噪声。
[0071]
步骤2对收集的音频数据执行升采样或降采样操作,统一纯语音音频数据和纯噪声音频数据的采样率,采样率为8k
‑
48k,以分别作为纯噪声信号和纯语音信号。
[0072]
步骤3对纯语音信号以及纯噪声信号进行分帧,帧长15~30ms,帧移5~10ms。
[0073]
步骤4将步骤3得到的音频数据进行加窗,加平顶窗,窗函数表达式为:
[0074][0075]
步骤5将步骤4得到音频数据进行傅里叶变换,其变换公式为:
[0076][0077]
其中,x
n
(e
jω
)是针对时域信号x(n)的傅里叶变换,下标n表示时间标号,{ω(n)}为实数窗序列。
[0078]
步骤6将步骤5得到的音频数据逐帧按频率进行分带,为符合人耳听觉特征,此处分带采用梅尔滤波器,使用65个滤波器分成66个频段,其中梅尔频率与实际频率的关系如下:
[0079][0080]
其中,f
mel
是以mel为单位的感知频率,f是以hz为单位的实际频率。
[0081]
步骤7将步骤6分带后的信号进行能量的计算,能量计算公式如下:
[0082]
e(k)=|x(k)|2[0083]
则频带的能量为:
[0084][0085]
步骤8纯噪声信号经步骤7的计算方式后得到纯噪声能量,使用纯噪声能量计算得到66个对数谱,其计算公式如下:
[0086]
ln[i]=log
10
(10
‑2+en[i])
[0087]
其中ln[i]为对数谱,en[i]为纯噪声能量。
[0088]
步骤9将所述纯语音信号和纯噪声信号进行混合,对得到混合后的音频数据进行降采样,以节省计算量,以得到带噪语音信号,并进行相应的分帧处理。
[0089]
步骤10对带噪语音使用步骤6中的梅尔滤波器进行滤波,得到相应的带噪语音频带,将每个带噪语音频带内的能量进行叠加。
[0090]
步骤11将每个滤波器的输出取对数,得到相应频带的对数功率谱,并进行反离散余弦变换,得到66个mfcc系数,将得到66个mfcc系数作为特征值,分别记作x1~x
66
。
[0091][0092]
式中,x
′
(k)为第k个滤波器输出功率谱,l为mfcc系数的个数。
[0093]
步骤12针对x1~x
66
的前18个系数分别做一阶、二阶导数处理,以增加36个特征值,分别记作x
67
~x
102
。
[0094]
一阶求导:
[0095]
二阶求导:
[0096]
步骤13计算带噪语音信号的基音周期,作为特征值,记作x
103
。
[0097]
其计算步骤包括:
[0098]
(1)用900hz低通滤波器对一帧带噪语音信号{x(n)}进行滤波,并去掉开头的20个输出值不用,得到的数据记作{x
′
(n)};
[0099]
(2)分别求{x
′
(n)}的前部100~120个样点和后部100~120个样点的最大幅度,并取其中较小的一个,乘以因子0.68作为门限电平c
l
;
[0100]
(3)对{x(n)}分别进行中心消波得到{y(n)}和三电平量化得到{y
′
(n)};
[0101]
(4)求{y(n)}、{y
′
(n)}的互相关值r(k),计算公式如下:
[0102][0103]
此处k的取值范围20~150,相应于基音频率范围60~500hz,r(0)相当于短时能量;
[0104]
(5)得到互相关值后,可以得到r(20)~r(150)中的最大值r
max
,如果r
max
<0.25r(0),则认为本帧为清音,令其基音周期值p为0,否则基音周期p即为使r(k)为最大值r
max
时位置k的值,即p=argmax
20≤k≤150
r(k)。
[0105]
步骤14根据步骤13得到带噪语音中基音信号带,使用步骤7的能量计算公式,计算每个带噪语音频带的能量数据ex以及其基音信号带的能量数据ep。其中w
b
(k)为频带在频点k处的振幅。
[0106]
ex=∑
k
w
b
(k)|x(k)|2[0107]
ep=∑
k
w
b
(k)|p(k)|2[0108]
利用得到的相关能量,做离散余弦变换,以计算得到12个值x
104
~x
115
做为特征值。离散余弦变换公式如下:
[0109][0110]
其中,f(i)为原始的信号,f(u)是离散余弦变换后的系数,n为原始信号的点数,c(u)为补偿系数,可以使离散余弦变换矩阵为正交矩阵。
[0111]
步骤15利用变换后的纯语音能量与带噪语音能量的比值来计算出66个增益期望值g[i],增益计算公式如下:
[0112][0113]
其中,e
y
(b)为纯语音能量,e
x
(b)为带噪语音能量。
[0114]
如果g[i]>1,令g[i]=1;如果纯语音的端点检测值为零、纯语音的特征提取得到的静音标记为零或g[i]=0,令g[i]=
‑
1。
[0115]
步骤16将115个特征值输x1~x
115
入所述频带增益模型中,所述频带增益模型共7层,66个输出,共450个神经元,如图1和图2所示,其模型内部数据流程如下:
[0116]
步骤16
‑
1首先进入全连接层,使用tanh激活函数处理,设置权重约束,损失函数权重0.3~0.5,对主权重矩阵进行约束0.45~0.5,对偏置向量进行约束为0.45~0.5,施加在权重上的正则项为10
‑
6~10
‑
7,施加在偏置向量上的正则项为10
‑
6~10
‑
7,共输出64个值。
[0117]
步骤16
‑
2将步骤16
‑
1得到的64个值输入sru层,依靠输入的x
t
进行并行计算,其中w表示权重矩阵。
[0118][0119]
ft=σ(w
f
*x
t
+b
f
)
[0120]
r
t
=σ(w
r
*x
t
+b
r
)
[0121]
步骤16
‑
3使用步骤16
‑
2中计算出的值通过遗忘门来更新隐藏态c
t
,最终得到输出h
t
,其中g表示激活函数。
[0122][0123]
h
t
=g(c
t
)
[0124]
步骤16
‑
4参见图3,步骤16
‑
2和步骤16
‑
3中的sru单元,运用relu激活函数处理,输出36个值。
[0125]
步骤16
‑
5将步骤16
‑
1和步骤16
‑
4中的输出放入一个sru层,使用relu激活函数处理,共有42个输出。
[0126]
步骤16
‑
6将最开始输入的115个特征值放入一个sru层,使用tanh激活函数处理,
共有86个输出。
[0127]
步骤16
‑
7将步骤16
‑
5和步骤16
‑
6中两层的输出值放入一个新的sru层,使用relu激活函数处理,共输出48个值。
[0128]
步骤16
‑
8将步骤16
‑
5、步骤16
‑
6和步骤16
‑
7中的三层的输出放入一个新的sru层,使用relu激活函数处理,共输出108个值。
[0129]
步骤16
‑
9将步骤16
‑
8的输出作为一个全连接层的输入,使用sigmoid激活函数处理,共输出66个增益值。
[0130]
通过以上步骤已完成对频带增益模型的基础构建。
[0131]
步骤17将提取到的115个特征值输入至所述频带增益模型,将66个增益期望值以及66个对数谱做为标签进行训练。整个模型有一组66维的输出,它们作用于不同频率,从而完成噪声抑制的工作。
[0132]
具体地,将数据分成30~40/份,即一次训练选取30~40个样本,训练100~120次,将训练集中10%~20%的数据作为验证集,训练后得到增益数据。
[0133]
其中,设置训练所用到的优化器、损失函数,优化器使用adam,用于梯度控制,使用交叉熵损失函数。
[0134][0135]
式中,x表示样本,y表示实际的标签,a表示预测的输出,n表示样本总数量。
[0136]
需要说明的是该实施例的步骤没有严格的先后顺序,可根据实际进行灵活调换或删减,在不付出实质性对该方法的修改仍属于被实施例的保护范围。
[0137]
在本发明的一个实施例中,提供了一种适用于车载场景的语音降噪方法,包括以下步骤:
[0138]
p1、将带噪语音进行分帧处理,并逐帧按照频率进行分带,得到m个带噪语音频带,提取其对应的m个特征值,并输入所述的频带增益模型,以得到所述带噪语音频带对应的增益值;
[0139]
p2、采用梳状滤波器对所述带噪语音频带进行基音滤波;
[0140]
p3、计算所述带噪语音频带滤波后的能量,以得到所述带噪语音频带在滤波前后的能量比值;
[0141]
p4、将所述带噪语音频带滤波后的信号与所述能量比值相乘,再与所述带噪语音频带对应的增益值相乘,以得到降噪后语音数据。
[0142]
其中,所述梳状滤波器的设置公式如下:
[0143]
x
′
[i]=x[i]+a
×
p
[0144]
式中,x[i]和x
′
[i]分别表示滤波前后的信号,p为含基频部分语音信号生成的频域数据,a为滤波器系数,所述滤波器系数采用以下公式计算:
[0145][0146]
式中,expe为所述带噪语音信号能量与其基音能量的相关值,g
b
为增益值。
[0147]
车载语音识别系统在低信噪比的行车工况中效果差,其中一个重要原因是真实车载环境下会产生许多不稳定性噪声,影响语音识别的效果。传统的语音降噪技术不能很好的完成真实场景下的语音降噪,本发明提供的方法能够针对不同车速以及不同的开窗和空调情况下的场景进行实时的语音降噪,有效解决多种行车环境下语音识别不准确的问题。
[0148]
具体针对处理车载降噪时,参见图4,包括以下步骤:
[0149]
步骤a使用录音设备采集各种行车场景下的语音音频数据,语音音频数据为不同行驶工况下的带噪语音,将带噪语音进行分帧处理,并逐帧按照频率进行分带,得到带噪语音频带,对带噪语音频带提取特征值输入训练好的频带增益模型中,以得到相应的增益值,上述实施例中含有提取特征值的过程,再此不再赘述。
[0150]
步骤b设计截至频率为800hz的低通滤波器,使带噪语音通过该滤波器,除高频噪音;。
[0151]
步骤c根据步骤a获得的增益值完成基音滤波,基音滤波采用梳状滤波器,梳状滤波器的公式如下:
[0152]
x[i]=x[i]+a*p
[0153]
其中,a为滤波器系数,p为含基频部分语音信号生成的频域数据。使用滤波器重新量化到原始语音的能量。
[0154]
其中,滤波器系数采用以下公式计算:
[0155][0156]
式中,expe为带噪语音频带信号能量与其基音能量的相关值,g
b
为增益值,当expe≥g
b
时,则a=1;若g
b
=1,则a=0,此时没有噪声;若expe=0,则a=0,此时没有基音。
[0157]
expe的计算公式如下:
[0158][0159]
其中,
[0160]
expe
′
=∑
k
w
b
(k)x(k)p(k)
[0161]
ex=∑
k
w
b
(k)|x(k)|2[0162]
ep=∑
k
w
b
(k)|p(k)|2[0163]
从而得到expe的展开公式:
[0164][0165]
其中,expe是对expe
′
做标准化处理,x(k)为信号,p(k)为含基频部分语音信号生成的频域数据。其中w
b
(k)为频带在频点k处的振幅,ex为带的能量数据,ep为对应基音信号带的能量数据。
[0166]
步骤d计算步骤c滤波后的带噪语音频带的能量newe。
[0167]
步骤e计算滤波前带噪语音频带能量与相应滤波后带噪语音频带能量的比值,计
算公式如下:
[0168][0169]
步骤f将滤波后信号x[i]与步骤e得到的比值相乘得到信号x
′
[i],使每个频带的能量与原始信号的能量一样。
[0170]
x
′
[i]=x[i]
×
norm
[0171]
步骤g将经过步骤f处理后得到的信号x
′
[i]乘以每个频带对应的增益值,得到降噪后的语音数据x
″
[i]。
[0172]
x
″
[i]=x
′
[i]
×
g[i]
[0173]
步骤h将每一帧数据进行快速傅里叶逆变换操作,将频域信号转换到时域。
[0174]
快速傅里叶逆变换:
[0175][0176]
步骤i合成每一帧处理后的数据,输出降噪后的音频流。
[0177]
传统的基于信号处理的语音降噪方法中,有很多参数需要人工估计或者微调,导致得到的参数不够准确,对噪声估计的也不够准确,在低信噪比以及不平稳噪声的环境下,降噪效果不够理想。本发明将传统信号处理技术与深度学习方法相结合,用数据驱动的方式训练学习降噪参数,保留传统信号处理算法的实时性优势,提升了算法的降噪性能,同时设计算法时,兼顾人耳的听觉特性和语音识别模型的感知特性,使得对带噪语音进行降噪的同时保证语音识别系统的鲁棒性。
[0178]
本发明提供频带增益模型的训练方法及用于车载场景的语音降噪方法将传统信号处理与深度学习相结合,针对行车场景的噪声特性,设计神经网络模型进行参数学习,得到噪声的频谱估计权重数据。依据人耳的听觉特性规律和语音识别模型中对语音特征的依赖,对接收的带噪语音按照梅尔倒谱进行分频带滤波操作,将信号的每一帧数据进行增益控制,从而实现语音降噪。
[0179]
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。