CN114333795B 语音识别方法和装置、计算机可读存储介质 （科大讯飞股份有限公司）

一文本中的第一实体文本序列替换为对应的发2包括第一实体文本序列，所述第一语义包括与所述第一实体文本序列对应的第一实体语否则，将所述第一文本中的所述第一实体文本序列替3.根据权利要求2所述的语音识别方法，其特征在于，所述对纠错模型进行训练的步提供第一训练文本，所述第一训练文本中包括发音编码样本序列，且本序列带有与之匹配的文本标注样本序列和类型标注样本序列；将所述第一训练文本输入至所述纠错模型中获得第一基于所述第一训练文本和所述第一预测结果调整所述纠错模型中述类型标注样本序列。获得所述初始文本中每个文字被替换为预设集合内任一其他文字将所述第二训练文本输入至所述预训练语言模型中获得第二基于所述初始文本和所述第二预测结果调整所述预训练语言模针对所述初始文本中的每一文字，获得当前文字与所述预设3获得与所述当前文字相关的所有所述发音相似度的第一和值、以及与获得所述当前文字与另一文字之间的发音相似度与所述第一和述当前文字与所述另一文字之间的含义相似度与所述第二和值的获得所述第一比值与第一概率p1的第一乘积、以及所述第二比值与第义，所述第一特征实体文本序列的语义理解结果为属于所述特征类实体的第一实体语义；根据所述第二文本获取第二语义，并判断所述第二文本与所述第一文否则，响应于所述第二语义符合所述预设标准对所述第二文本进行意图语义理解以获得第二意图语义，以将所述第二意图语义和所述第二实体语义组合以获得所若是，则不执行所述利用所述第二文本获取语音识别结果的4第一语义获取模块，用于根据语音信息获取第一文本，并根据所述第一文响应模块，用于在所述第一语义符合所述预设标准体文本序列替换为对应的发音编码序列，并为所述发音编码序列添加所述实体类型标签，5[0008]否则，将所述第一文本中的所述第一实体文本序列替换[0011]将所述纠错文本输入所述纠错模型，并将所述纠错模型的输出作为所述第二文码样本序列带有与之匹配的文本标注样本序列和类型标注样本序和所述类型标注样本序列。6及所述当前文字与所述另一文字之间的含义相似度与所述第二述第二实体文本序列和所述实体类型标签获得第7体语义属于集合类实体或者特征类实体；所述判断所述第一语义是否符合预设标准的步8[0067]下面将结合本申请实施方式中的附图，对本申请实施方式中的技术方案进行清9正确的第一语义可以表示为：intent＝play,slot＝song:忘情水|artist:刘德华。其中，[0077]如果第一语义符合预设标准，说明步骤S11获得的第一语义较大概率是符合用户[0079]如果第一语义不符合预设标准，说明步骤S11获得的第一语义较大概率是不符合更接近发音编码序列、且更接近用户意图的第二实体文本序列及对应的实体类型标签，提[0085]本实施方式对不符合预设标准的第一语义对应的第一文本进行纠错处理以获得码样本序列带有与之匹配的文本标注样本序列和类型标注样本序[0088]基于神经网络模型例如seq2seq模型构建初始的纠错模型之后，提供第一训练文注样本序列和类型标注样本序列。纠错模型主要包括编码(Encoder)层和解码(Decoder)[0104]本实施方式包括但不限于使用MLM(MaskLanguageModel)任务进行预训练语言[0105]步骤S42，获得初始文本中每个文字被替换为预设集合内任一其他文字的第三概获得初始文本中每个文字被替换为预设集合内任一其及当前文字与另一文字之间的含义相似度与第二中的文字以更高概率替换为其近音字或者近义字，从而提高纠错模型这方面的学习能力，[0126]第二文本在对第一文本中的第一实体文本序列及对应的实体类型标签进行纠错[0131]本实施方式根据纠错的具体内容及第二语义设置了认可最终的语音识别结果的[0134]第二文本在对第一文本中的第一实体文本序列及对应的实体类型标签进行纠错语义和第二实体语义获得的第二语义提高了语音识别及语[0156]如果不是同时满足上述两个条件，本实施方式判定第一语义是不符合预设标准[0172]本实施方式对不符合预设标准的第一语义对应的第一文本进行纠错处理以获得在第一语义符合预设标准时，将第一语义作为语音识别结果。纠错模块132包括替换模块据发音编码序列获得第二实体文本序列，并使实体类型标签与第二实体文本序列相匹配，[0174]其中，第一神经网络模块1322包括第一训练模块13221和第一输入输出模块码样本序列，且发音编码样本序列带有与之匹配的文本标注样本序列和类型标注样本序[0181]在一个实施方式中，第二语义获取模块133包括第一分析模块1331和调用模块在第二语义获取模块133利用第二文本获取语音识别结果之前，判断第二文本中的字符及语义获取模块133执行利用第二文本获取语音识别[0188]具体地，第二分析模块121用于判断第一语义包括的组合是否在预设的合理组合列表中。报告模块122用于在该组合不在合理组合列表中时，判定第一语义不符合预设标请语音识别装置一实施方式的结构示意图，该语音识别装置包括存储器141和处理器142，