1.本发明实施例涉及电力的技术领域，尤其涉及一种语音识别模型的训练、人机交互方法、设备和存储介质。


背景技术：

2.随着深度学习领域的发展，语音识别、人机交互等人工智能技术的成熟，大量基于人工智能的新一代服务应用被广泛的应用在电力，金融，互联网等多个行业，成为整体智能化发展的基础建设。
3.语音识别为人机交互的基础，为了实现训练电力行业中用于语音识别的模型，需求大量的语料，但是，电力行业的语料数量无法和通用的语料数量相比，若直接按照学术上不考虑数据集数量的情况直接训练，用于语音识别的模型因语料的数量不足而导致性能偏低。
4.如果人工进行语料的标记，由于语料的需求量巨大，人工的耗时长，并且容易出错，将导致成本偏高，但效率偏低。


技术实现要素：

5.本发明实施例提出了一种语音识别模型的训练、人机交互方法、设备和存储介质，以解决电力行业中用于语音识别的模型因语料的数量不足而导致性能偏低的问题。
6.第一方面，本发明实施例提供了一种语音识别模型的训练方法，包括：
7.获取属于非电力行业的第一语音数据、作为所述第一语音数据的内容的第一文本信息；
8.获取属于电力行业的术语；
9.将所述术语融入所述第一文本信息，获得属于所述电力行业的第二文本信息；
10.校验所述第二文本信息对于所述电力行业的合法性；
11.若所述第二文本信息对于所述电力行业合法，则将所述术语融入所述第一语音数据，获得属于所述电力行业的第二语音数据；
12.以所述第二语音数据为样本、所述第二文本信息为标签，训练语音识别模型，以将属于所述电力行业的语音数据转换为文本信息。
13.第二方面，本发明实施例还提供了一种人机交互方法，包括：
14.接收电力行业中表示问题的语音数据；
15.加载如第一方面所述的方法训练的语音识别模型；
16.调用所述语音识别模型将所述语音数据转换为文本信息；
17.在所述电力行业中查询用于解决所述文本信息所表示的问题的答案。
18.第三方面，本发明实施例还提供了一种语音识别模型的训练装置，包括：
19.训练集获取模块，用于获取属于非电力行业的第一语音数据、作为所述第一语音数据的内容的第一文本信息；
20.电力术语获取模块，用于获取属于电力行业的术语；
21.文本信息融合模块，用于将所述术语融入所述第一文本信息，获得属于所述电力行业的第二文本信息；
22.合法性校验模块，用于校验所述第二文本信息对于所述电力行业的合法性；
23.语音数据融合模块，用于若所述第二文本信息对于所述电力行业合法，则将所述术语融入所述第一语音数据，获得属于所述电力行业的第二语音数据；
24.模型训练模块，用于以所述第二语音数据为样本、所述第二文本信息为标签，训练语音识别模型，以将属于所述电力行业的语音数据转换为文本信息。
25.第四方面，本发明实施例还提供了一种人机交互装置，包括：
26.问题接收模块，用于接收电力行业中表示问题的语音数据；
27.语音识别模型加载模块，用于加载如第一方面所述的方法或如第三方面所述的装置训练的语音识别模型；
28.文本转换模块，用于调用所述语音识别模型将所述语音数据转换为文本信息；
29.问题查询模块，用于在所述电力行业中查询用于解决所述文本信息所表示的问题的答案。
30.第五方面，本发明实施例还提供了一种计算机设备，所述计算机设备包括：
31.一个或多个处理器；
32.存储器，用于存储一个或多个程序，
33.当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如第一方面所述的语音识别模型的训练方法或者如第二方面所述的人机交互方法。
34.第六方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如第一方所述的语音识别模型的训练方法或者如第二方面所述的人机交互方法。
35.在本实施例中，获取属于非电力行业的第一语音数据、作为第一语音数据的内容的第一文本信息，获取属于电力行业的术语，将术语融入第一文本信息，获得属于电力行业的第二文本信息，校验第二文本信息对于电力行业的合法性，若第二文本信息对于电力行业合法，则将术语融入第一语音数据，获得属于电力行业的第二语音数据，以第二语音数据为样本、第二文本信息为标签，训练语音识别模型，以将属于电力行业的语音数据转换为文本信息，本实施例在非电力行业的语料的基础上，参照电力行业的术语构造电力行业的语料，可以保证语料的真实性，由于非电力行业的语料众多，使得电力行业的语料数量充足，可用于训练语音识别模型，摆脱了人工进行语料的标记，大大降低了耗时，基于非电力行业的语料的标记先验的准确性，电力行业的语料的标记准确性高，大大降低了成本偏高，并大大提高了效率。
36.进一步地，电力行业中数量充足且准确的语料可以训练高性能的语音识别模型，提高了在电力行业中语音识别的准确率，后续基于高准确的语音识别结果进行人机交互，可以保证人机交互的质量。
附图说明
37.图1为本发明实施例一提供的一种语音识别模型的训练方法的流程图；
38.图2是本发明实施例二提供的一种人机交互方法的流程图；
39.图3为本发明实施例三提供的一种语音识别模型的训练装置的结构示意图；
40.图4为本发明实施例四提供的一种人机交互装置的结构示意图；
41.图5为本发明实施例五提供的一种计算机设备的结构示意图。
具体实施方式
42.下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
43.实施例一
44.图1为本发明实施例一提供的一种语音识别模型的训练方法的流程图，本实施例可适用于基于通用的语料生成电力行业的语料、从而训练语音识别模型的情况，该方法可以由语音识别模型的训练装置来执行，该语音识别模型的训练装置可以由软件和/或硬件实现，可配置在计算机设备中，例如，个人电脑、服务器、工作站，等等，具体包括如下步骤：
45.步骤101、获取属于非电力行业的第一语音数据、作为第一语音数据的内容的第一文本信息。
46.为便于采集足够数量的数据集，在本实施例中，可以在开源的数据库和/或开源的项目等通用的渠道中采集属于非电力行业的第一语音数据、作为第一语音数据的内容的第一文本信息，即，说话者说出“第一文本信息”时记录“第一音频数据”。
47.其中，非电力行业可以指除电力行业之外的其他行业，例如，教育行业、体育行业、媒体行业，等等，在非电力行业中，出现电力行业的术语可能性较低，但容易采集，数据量大。
48.此外，第一语音数据通常为句子级别的语音数据，可以是同一种语言(如中文)下的语音数据，也可以是不同语言(如中文、英文)下的语音数据，本实施例对此不加以限制。
49.步骤102、获取属于电力行业的术语。
50.在本实施例中，可以在开源的数据库和/或开源的项目等通用的渠道属于电力行业的术语，或者，在电力行业提供的网站中采集属于电力行业的术语。
51.其中，属于电力行业的术语可以指电力专业的术语，可以是短语，也可以是短句，例如，无功电压控制信息avc、配电管理系统dmis、电能量采集与计费系统tmr、分散控制系统dcs，单元机组电气控制系统ecs，等等。
52.步骤103、将术语融入第一文本信息，获得属于电力行业的第二文本信息。
53.在本实施例中，将电力行业的术语融入非电力行业的第一文本信息中，形成新的文本信息，由于该新的文本信息包含电力行业的术语，可视为描述电力行业的句子，因此，可记为属于电力行业的第二文本信息。
54.在本发明的一个实施例中，步骤103可以包括如下步骤：
55.步骤1031、按照语法结构将第一文本信息划分为多个第一关键词。
56.在本实施例中，可以使用语法树、依赖树的词性标注、语法边、树结构等方式对第一文本信息进行自然语言处理，识别该第一文本信息中的语法结构，如主谓宾等，在语法结构中的每个词性(如主语、谓语、宾语等)映射至第一文本信息中的第一关键词。
57.步骤1032、确定第一关键词的第一长度。
58.对第一关键词中的最小单元(如汉字、字母等)进行统计，将最小单元的数量设置为第一关键词的第一长度。
59.步骤1033、在第一文本信息中，将符合目标条件的术语替换第一关键词，获得属于电力行业的第二文本信息。
60.在本实施例中，遍历第一文本信息中的第一关键词，寻找符合目标条件的第一关键词。
61.其中，目标条件包括如下两条：
62.1、术语的第二长度与第一长度之间的差异小于或等于第一阈值
63.对术语中的最小单元(如汉字、字母等)进行统计，将最小单元的数量设置为术语的第二长度。
64.计算术语的第二长度与第一关键词的第一长度之间的差异(以绝对值表示)，将该差异与预设的第一阈值进行比较。
65.若该差异小于或等于该第一阈值，表示术语与第一关键词之间的差异较小，此时，若将术语替换该第一关键词，对于第一语音数据的影响较小，保持后续基于第一语音数据生成第二语音数据的真实性。
66.若该差异大于该第一阈值，表示术语与第一关键词之间的差异较大，此时，若将术语替换该第一关键词，对于第一语音数据的影响较大，后续基于第一语音数据生成第二语音数据容易失真。
67.2、术语适用于语法结构
68.术语的词性与第一关键词的词性一致，如术语为名词、第一关键词为名词，两者均可以作为主语、谓语，使得术语可应用替换第一关键词生成第二文本信息时，第二文本信息的语法结构合理，从而保证第二文本信息的真实性。
69.术语的词性与第一关键词的词性不一致，如术语为动词、第一关键词为名词，术语可以作为谓语、第一关键词可以作为主语、谓语，使得术语可应用替换第一关键词生成第二文本信息时，第二文本信息的语法结构不合理，第二文本信息容易失真。
70.步骤104、校验第二文本信息对于电力行业的合法性。
71.在本实施例中，对于融合术语生成的第二文本信息，可能是电力行业出现的句子，也可能不是电力行业出现的句子，为了保证语料的准确性，可以校验第二文本信息对于电力行业的合法性，即，校验第二文本信息是否为电力行业合法的句子。
72.例如，设第一文本信息为“这台电脑坏了”，“小明家的电脑坏了”，电力行业的术语为“变压器”，将该术语“变压器”替换第一关键词“电脑”，可以得到第二文本信息“这台变压器坏了”，“小明家的变压器坏了”，对于电力行业而言，变压器并不会设置在某一个人家中，“这台变压器坏了”为电力行业中合法的句子，而“小明家的变压器坏了”为电力行业中非法的句子。
73.在本发明的一个实施例中，步骤104包括如下步骤：
74.步骤1041、获取属于电力行业的第三文本信息。
75.在本实施例中，可以在开源的数据库和/或开源的项目等通用的渠道属于电力行业的第三文本信息，或者，在电力行业提供的网站中采集属于电力行业的第三文本信息。
76.其中，属于电力行业的第三文本信息通常为句子，可以是同一种语言(如中文)下的文本信息，也可以是不同语言(如中文、英文)下的文本信息，本实施例对此不加以限制。
77.步骤1042、计算第二文本信息与第三文本信息之间的相似度。
78.在本实施例中，可以通过编辑距离、tf
‑
idf(term frequency
–
inverse document frequency，词频
‑
逆文本频率指数)、simhash、主题建模lda、doc2vec、word2vec等算法计算第二文本信息与第三文本信息之间的相似度，该相似度可以在一定程度上反映用户是否在电力行业说出第二文本信息。
79.步骤1043、计算第二文本信息中、包含术语的语法结构在第三文本信息中的分布概率。
80.将第二文本信息中、包含术语的语法结构作为整体，考量该整体在第三文本信息中分布的情况，计算该整体在第三文本信息中的分布概率，该分布概率可以在一定程度上反映用户是否在电力行业说出第二文本信息。
81.在一种计算分布概率的方式中，可通过基于同样的字符串匹配等方式对第三文本信息进行分词处理，从而查询到第三文本信息中的第二关键词。
82.统计各个第二关键词在第三文本信息中的依赖概率，其中，依赖概率为第一词频数与第二词频数的比值，第一词频数为当前第二关键词在第三文本信息中出现在其他第二关键词之后的词频数，第二词频数为其他第二关键词在第三文本信息中的总词频数。
83.假设第二关键词的出现仅仅依赖于它前面出现的有限的一个或者几个第二关键词。对于一个句子t，可以假设t是由词序列w1，w2，w3，
…
，wn组成，那么这个句子t由w1，w2，w3，
…
，w
n
连接组成的概率为p(t)＝p(w1w2w3…
w
n
)＝p(w1)p(w2|w1)p(w3|w1w2)
…
p(w
n
|w1w2
…
w
n
‑1)。
84.如果一个第二关键词的出现仅依赖于它前面出现的一个第二关键词，则p(t)＝p(w1w2w3…
w
n
)＝p(w1)p(w2|w1)p(w3|w1w2)
…
p(w
n
|w1w2…
w
n
‑1)≈p(w1)p(w2|w1)p(w3|w2)
…
p(w
n
|w
n
‑1)。
85.将术语与第一关键词作为语法结构的代表，与存在依赖关系的多个第二关键词进行比较。
86.当术语与当前第二关键词相同、且第一关键词与其他第二关键词相同时，将依赖概率设置为第二文本信息中、包含术语的语法结构在第三文本信息中的分布概率，其中，第一关键词为在第一文本信息中被术语替换的关键词。
87.步骤1044、若相似度大于或等于第二阈值、且分布概率大于或等于第三阈值，则确定第二文本信息对于电力行业合法。
88.如果相似度大于或等于第二阈值、且分布概率大于或等于第三阈值，表示第二文本信息具有较大的几率出现在电力行业中，则可以确定第二文本信息对于电力行业合法。
89.此外，若相似度小于第二阈值、且分布概率小于第三阈值，表示第二文本信息具有较小的几率出现在电力行业中，则可以确定第二文本信息对于电力行业非法。
90.步骤105、若第二文本信息对于电力行业合法，则将术语融入第一语音数据，获得属于电力行业的第二语音数据。
91.如果第二文本信息对于电力行业合法，则可以进一步地参考术语的发音，在第一语音数据的基础上形成新的语音数据，记为属于电力行业的第二语音数据，使得第二语音
数据的内容为第二文本信息。
92.在本发明的一个实施例中，步骤105包括如下步骤：
93.步骤1051、在第一语音数据中查询内容为第一关键词的第一语音信号。
94.在本实施例中，第一关键词为在第一文本信息中被术语替换的关键词，第一语音数据包括多帧语音信号，每帧语音信号已预先标记关联的字，此时，可以查找组成第一关键词的字对应的语音信号，记为第一语音信号。
95.步骤1052、确定语音转换模型。
96.在本实施例中，可预先训练语音转换模型，该语音转换模型用于将文本信息转换为语音信号，即实现从文本到语音(texttospeech)的操作，语音转换模型的输入为文本信息，输出为语音信号。
97.步骤1053、调用语音转换模型将术语转换为第二语音信号。
98.将电力行业的术语(文本信息)输入语音转换模型中，语音转换模型按照自身的逻辑对语音转换模型进行处理，输出语音信号，记为第二语音信号，即第二语音信号的内容为电力行业的术语。
99.进一步地，部分语音转换模型可以使用少量的话语(如，数秒持续时间的句子)中学习说话者的特征，即，部分语音转换模型具有语音复制(voice cloning)的功能，如durian，deep voice等。
100.在这些语音转换模型中，通常聚焦于两种基本的方法，以解决语音复制的问题：说话者适应(speaker adaptation)和说话者编码(speaker encoding)，这两种技术都可以通过说话者嵌入向量应用于一个多说话者生成语音转换模型，而不会降低语音质量。关于语音的自然性以及它和原始说话者的相似性，这两种方法都可以获得很好的性能，即使只有少量的复制音频。
101.那么，可以在开源的数据库和/或开源的项目等通用的渠道中获取多段第三语音数据、作为每段第三语音数据的内容的第四文本信息，其中，第三语音数据的音色与第一语音数据的音色相同，即，第三语音数据与第一语音数据均为同一说话者说出的语音。
102.以第一语音数据与第三语音数据为样本、第一文本信息与第四文本信息为标签，使用有监督的方式更新语音转换模型的参数，以使语音转换模型用于合成音色的语音信号，此时，该语音转换模型具备复制第一语音数据与第三语音数据的说话者的功能。
103.在限定该说话者的音色的条件下，将术语输入更新之后的语音转换模型中进行处理，获得音色与第一语音数据相同的第二语音信号，可以保证后续生成第二语音数据时的自然性、真实性。
104.步骤1054、在第一语音数据中，将第二语音信号替换第一语音信号，获得属于电力行业的第二语音数据。
105.在本第一语音数据中，将电力行业中内容为术语的第二语音信号替换非电力行业中表示第一关键词的第一语音信号，形成新的语音数据，由于该新的语音数据包含电力行业的术语，可视为描述电力行业的句子，因此，可记为属于电力行业的第二语音数据。
106.进一步地，可以在第二语音信号中确定第一目标信号、第二目标信号，第一目标信号为第二语音信号中排序起始的多帧语音信号，第二目标信号为第二语音信号中排序们末尾的多帧语音信号。
107.在第一语音数据中确定第一参考信号、第二参考信号，第一参考信号为第一语音数据中与第一目标信号相邻的多帧语音信号，第二参考信号为第一语音数据中与第二目标信号相邻的多帧语音信号。
108.分别在音量等音频参数下对第一参考信号与第一目标信号进行平滑处理、对第二参考信号与第二目标信号进行平滑处理。
109.若平滑处理完成，则将第二语音信号替换第一语音信号，获得属于电力行业的第二语音数据，使得第二语音信号与第一语音数据中其他语音信号更加平滑地过渡，保证第二语音数据的自然性、真实性。
110.步骤106、以第二语音数据为样本、第二文本信息为标签，训练语音识别模型，以将属于电力行业的语音数据转换为文本信息。
111.在本实施例中，可以将第二文本信息标注为第二语音数据的标签，表示第二语音数据真实的内容。
112.以第二文本信息作为样本，在标签的监督下，对语音识别模型进行有监督训练，提高语音识别模型对第二语音数据的学习能力，提高语音识别模型在电力行业的泛化能力，从而提高在电力行业进行语音识别的准确性，保证后续人机交互的准确性。
113.其中，语音识别模型的结构不局限于人工设计的神经网络，如cnn(convolutional neural network，卷积神经网络)、rnn(rerrent neural network，循环神经网络)等，也可以通过模型量化方法优化的神经网络，通过nas(神经网络结构搜索)方法针对电力行业的题型搜索的神经网络，等等，本实施例对此不加以限制。
114.进一步而言，可以重新训练语音识别模型，也可以对已有的第三方模型进行微调(fine
‑
tuning)，得到语音识别模型，还可以是对语音识别模型进行持续学习，等等，本实施例对此不加以限制。
115.在本实施例中，获取属于非电力行业的第一语音数据、作为第一语音数据的内容的第一文本信息，获取属于电力行业的术语，将术语融入第一文本信息，获得属于电力行业的第二文本信息，校验第二文本信息对于电力行业的合法性，若第二文本信息对于电力行业合法，则将术语融入第一语音数据，获得属于电力行业的第二语音数据，以第二语音数据为样本、第二文本信息为标签，训练语音识别模型，以将属于电力行业的语音数据转换为文本信息，本实施例在非电力行业的语料的基础上，参照电力行业的术语构造电力行业的语料，可以保证语料的真实性，由于非电力行业的语料众多，使得电力行业的语料数量充足，可用于训练语音识别模型，摆脱了人工进行语料的标记，大大降低了耗时，基于非电力行业的语料的标记先验的准确性，电力行业的语料的标记准确性高，大大降低了成本偏高，并大大提高了效率。
116.进一步地，电力行业中数量充足且准确的语料可以训练高性能的语音识别模型，提高了在电力行业中语音识别的准确率，后续基于高准确的语音识别结果进行人机交互，可以保证人机交互的质量。
117.实施例二
118.图2为本发明实施例二提供的一种人机交互方法的流程图，本实施例可适用于在电力行业基于语音识别模型识别语音并进行人机交互的情况，该方法可以由人机交装置来执行，该人机交模装置可以由软件和/或硬件实现，可配置在计算机设备中，该计算机设备
可以为用户端的设备，例如，个人电脑、移动终端、部署在电力场所的服务终端或智能机器人等，该计算机设备也可以为服务端的设备，例如，服务器、工作站，等等，具体包括如下步骤：
119.步骤201、接收电力行业中表示问题的语音数据。
120.在本实施例中，计算机设备可以在本地或向远端的客户端提供用户交互界面(user interface，ui)，该用户交互界面提供咨询电力行业问题的功能，如智能机器人的交互界面、搜索故障解决方式的交互界面等，用户可以在该用户交互界面上进行操作，在输入问题时说话，此时，在本地或远程的客户端可调用麦克风录制语音数据，得到电力行业中表示问题的语音数据。
121.步骤202、加载语音识别模型。
122.在本实施例中，可以预先通过实施例一的方法训练语音识别模型，并存储其结构及参数，在应用语音识别模型时，将语音识别模型及其参数加载至内存进行运行。
123.步骤203、调用语音识别模型将语音数据转换为文本信息。
124.将语音数据输入语音识别模型中，语音识别模型按照自身的逻辑对语音数据进行语音识别，输出文本信息。
125.由于语音识别模型是针对电力行业定制训练的，因此，在对电力行业中表示问题的语音数据进行语音识别时，可以获得高准确性的文本信息。
126.步骤204、在电力行业中查询用于解决文本信息所表示的问题的答案。
127.在进行了语音识别得到作为用户询问的问题的文本信息之后，理解问题的含义，识别用户的意图。此时，可以对问题进行归一化、拼写纠错等处理，再调用分词、实体识别、句法分析等语义识别，以方便对询问语句做进一步的处理。
128.在此过程中，对人机交互的对话进行状态追踪(dst)，更新对话状态，dst会记录到目前为止用户所有的聊天记录，已经发生的系统行为，用于更新对话状态；依据更新后的对话状态来决定接下来的策略，决定这个信息是交由哪个服务处理。激活某个服务后，这个服务也会有自己的对话策略或者流程，来最终决定返回什么信息作为回复。
129.在电力行业中，对于用户提出的问题可以采用如下三种方法进行答案的搜索和反馈：
130.(1)、faq(frequently asked questions，常见问题)
131.faq把用户经常提问的问题和相关答案保存起来。对于用户输入的问题，可以在faq库中查找答案。如果能够找到相应的问题，就可以直接将问题所对应的答案返回给用户，而不需要经过问题理解、信息检索、答案抽取等许多复杂的处理过程，提高了效率。
132.在faq库中在用户问题候选问题集的基础上，建立常问问题集的倒排索引，提高了系统的检索效率，同时，可以用基于语义的方法计算相似度提高了问题的匹配精度，即，从用户输入到答案输出，faq系统主要经过答案检索、语义匹配、答案重排序等过程。
133.(2)、docqa(抽取式问答)
134.所谓抽取式问答，也可以称为机器阅读理解任务，指的就是给一段参考文本描述，然后对应的给一个问题，然后机器通过阅读参考文本后，抽取出文本中对应问题的答案。在特定的情况下还需要对抽取出的答案进行整合、加工、复述形成信达雅的正确答案。
135.(3)、kbqa(knowledge based qustioning and answering，知识图谱的问答)
136.基于知识图谱的问答利用构建的营销、配网领域知识图谱，可以知道知识本体与知识间的关联。这使得问答系统具有推理功能，能够回答一些较为复杂的问题。
137.基于知识图谱的问答过程捅错包括系统分析问题，通过实体链指(entity linking)、关系抽取(relation detection)等等方法得到需要匹配的实体，并在知识库中查找相应的问题答案。
138.该方法使用命名实体识别与关系抽取的方式对查询语句进行分析，结合分析结果，以状态转移的思想使用模型生成查询子图。最终使用查询子图在知识库中取得答案。我们使用的生成查询子图方式使kbqa系统能够在单跳查询与多跳查询中实现当前最先进的结果。
139.在本实施例中，接收电力行业中表示问题的语音数据，加载语音识别模型，调用语音识别模型将语音数据转换为文本信息，在电力行业中查询用于解决文本信息所表示的问题的答案，本实施例在先在非电力行业的语料的基础上，参照电力行业的术语构造电力行业的语料，可以保证语料的真实性，由于非电力行业的语料众多，使得电力行业的语料数量充足，可用于训练语音识别模型，摆脱了人工进行语料的标记，大大降低了耗时，基于非电力行业的语料的标记先验的准确性，电力行业的语料的标记准确性高，大大降低了成本偏高，并大大提高了效率。
140.电力行业中数量充足且准确的语料可以训练高性能的语音识别模型，在语音势必时，可以提高了在电力行业中语音识别的准确率，后续基于高准确的语音识别结果进行人机交互，可以保证人机交互的质量，准确地针对用户提出的问题查找到答案。
141.需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
142.实施例三
143.图3为本发明实施例三提供的一种语音识别模型的训练装置的结构框图，具体可以包括如下模块：
144.训练集获取模块301，用于获取属于非电力行业的第一语音数据、作为所述第一语音数据的内容的第一文本信息；
145.电力术语获取模块302，用于获取属于电力行业的术语；
146.文本信息融合模块303，用于将所述术语融入所述第一文本信息，获得属于所述电力行业的第二文本信息；
147.合法性校验模块304，用于校验所述第二文本信息对于所述电力行业的合法性；
148.语音数据融合模块305，用于若所述第二文本信息对于所述电力行业合法，则将所述术语融入所述第一语音数据，获得属于所述电力行业的第二语音数据；
149.模型训练模块306，用于以所述第二语音数据为样本、所述第二文本信息为标签，训练语音识别模型，以将属于所述电力行业的语音数据转换为文本信息。
150.在本发明的一个实施例中，所述文本信息融合模块303还用于：
151.按照语法结构将所述第一文本信息划分为多个第一关键词；
152.确定所述第一关键词的第一长度；
153.在所述第一文本信息中，将符合目标条件的所述术语替换所述第一关键词，获得属于所述电力行业的第二文本信息；
154.其中，所述目标条件包括所述术语的第二长度与所述第一长度之间的差异小于或等于第一阈值，所述术语适用于所述语法结构。
155.在本发明的一个实施例中，所述合法性校验模块304还用于：
156.获取属于所述电力行业的第三文本信息；
157.计算所述第二文本信息与所述第三文本信息之间的相似度；
158.计算所述第二文本信息中、包含所述术语的语法结构在所述第三文本信息中的分布概率；
159.若所述相似度大于或等于第二阈值、且所述分布概率大于或等于第三阈值，则确定所述第二文本信息对于所述电力行业合法。
160.在本发明的一个实施例中，所述合法性校验模块304还用于：
161.查询所述第三文本信息中的第二关键词；
162.统计各个所述第二关键词在所述第三文本信息中的依赖概率，其中，所述依赖概率为第一词频数与第二词频数的比值，所述第一词频数为当前所述第二关键词在所述第三文本信息中出现在其他所述第二关键词之后的词频数，所述第二词频数为其他所述第二关键词在所述第三文本信息中的总词频数；
163.当所述术语与当前所述第二关键词相同、且第一关键词与其他所述第二关键词相同时，将所述依赖概率设置为所述第二文本信息中、包含所述术语的语法结构在所述第三文本信息中的分布概率，所述第一关键词为在所述第一文本信息中被所述术语替换的关键词。
164.在本发明的一个实施例中，所述语音数据融合模块305还用于：
165.在所述第一语音数据中查询内容为第一关键词的第一语音信号，所述第一关键词为在所述第一文本信息中被所述术语替换的关键词；
166.确定语音转换模型，所述语音转换模型用于将文本信息转换为语音信号；
167.调用所述语音转换模型将所述术语转换为第二语音信号；
168.在所述第一语音数据中，将所述第二语音信号替换所述第一语音信号，获得属于所述电力行业的第二语音数据。
169.在本发明的一个实施例中，所述语音数据融合模块305还用于：
170.获取第三语音数据、作为所述第三语音数据的内容的第四文本信息，所述第三语音数据的音色与所述第一语音数据的音色相同；
171.以所述第一语音数据与所述第三语音数据为样本、所述第一文本信息与所述第四文本信息为标签，更新所述语音转换模型，以使所述语音转换模型用于合成所述音色的语音信号；
172.在限定所述音色的条件下，将所述术语输入更新之后的所述语音转换模型中进行处理，获得音色与所述第一语音数据相同的第二语音信号。
173.在本发明的一个实施例中，所述语音数据融合模块305还用于：
174.在所述第二语音信号中确定第一目标信号、第二目标信号，所述第一目标信号为
所述第二语音信号中排序起始的多帧语音信号，所述第二目标信号为所述第二语音信号中排序们末尾的多帧语音信号；
175.在所述第一语音数据中确定第一参考信号、第二参考信号，所述第一参考信号为所述第一语音数据中与所述第一目标信号相邻的多帧语音信号，所述第二参考信号为所述第一语音数据中与所述第二目标信号相邻的多帧语音信号；
176.分别对所述第一参考信号与所述第一目标信号、所述第二参考信号与所述第二目标信号进行平滑处理；
177.若所述平滑处理完成，则将所述第二语音信号替换所述第一语音信号，获得属于所述电力行业的第二语音数据。
178.本发明实施例所提供的语音识别模型的训练装置可执行本发明任意实施例所提供的语音识别模型的训练方法，具备执行方法相应的功能模块和有益效果。
179.实施例四
180.图4为本发明实施例四提供的一种人机交互装置的结构框图，具体可以包括如下模块：
181.问题接收模块401，用于接收电力行业中表示问题的语音数据；
182.语音识别模型加载模块402，用于加载语音识别模型；
183.其中，语音识别模型可以通过实施例一的方法或实施例三的装置训练。
184.文本转换模块403，用于调用所述语音识别模型将所述语音数据转换为文本信息；
185.问题查询模块404，用于在所述电力行业中查询用于解决所述文本信息所表示的问题的答案。
186.本发明实施例所提供的人机交互装置可执行本发明任意实施例所提供的人机交互方法，具备执行方法相应的功能模块和有益效果。
187.实施例五
188.图5为本发明实施例五提供的一种计算机设备的结构示意图。图5示出了适于用来实现本发明实施方式的示例性计算机设备12的框图。图5显示的计算机设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
189.如图5所示，计算机设备12以通用计算设备的形式表现。计算机设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
190.总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(isa)总线，微通道体系结构(mac)总线，增强型isa总线、视频电子标准协会(vesa)局域总线以及外围组件互连(pci)总线。
191.计算机设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
192.系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(ram)30和/或高速缓存存储器32。计算机设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图5未显示，通常称为“硬盘驱动器”)。尽管图5中未示出，可以
提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如cd
‑
rom,dvd
‑
rom或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
193.具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
194.计算机设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该计算机设备12交互的设备通信，和/或与使得该计算机设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口22进行。并且，计算机设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(lan)，广域网(wan)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与计算机设备12的其它模块通信。应当明白，尽管图中未示出，可以结合计算机设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。
195.处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的语音识别模型的训练方法或人机交互方法。
196.实施例六
197.本发明实施例六还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述语音识别模型的训练方法或人机交互方法的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
198.其中，计算机可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd
‑
rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
199.注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。