CN111966811B 意图识别和槽填充方法、装置、可读存储介质及终端设备 (平安直通咨询有限公司上海分公司)_第1页
CN111966811B 意图识别和槽填充方法、装置、可读存储介质及终端设备 (平安直通咨询有限公司上海分公司)_第2页
CN111966811B 意图识别和槽填充方法、装置、可读存储介质及终端设备 (平安直通咨询有限公司上海分公司)_第3页
CN111966811B 意图识别和槽填充方法、装置、可读存储介质及终端设备 (平安直通咨询有限公司上海分公司)_第4页
CN111966811B 意图识别和槽填充方法、装置、可读存储介质及终端设备 (平安直通咨询有限公司上海分公司)_第5页
已阅读5页,还剩19页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

司模型对所述符号序列进行意图识别和槽填充联能技术以及区块链技术,可应用于智慧城市领2根据所述叠加序列中的首个符号的隐藏层状态生成所述使用注意力机制对所述意图矩阵和所述叠加序列中的各个符号的隐藏层状态进行处根据所述目标文本的注意力矩阵确定所述目标文本的意图识别结果和槽对所述词嵌入序列、所述分段嵌入序列和所述位置嵌入序列进行叠加对所述叠加序列中的首个符号的隐藏层状态进行全连接层处理,得使用预设的目标函数对初始的神经网络模型进行训练,得到已训练的神经网络模型;3ns联合处理模块,用于生成与所述符号序列对应的叠加序列;对8.一种终端设备,包括存储器、处理器以及存储在要求1至5中任一项所述的意图识别和槽填充4[0002]意图识别和槽填充是自然语言处理领域(尤其是智能问答领域)中非常重要的任56要创新点都在预训练(pre-training)方法上,即用了MaskedLM和NextSentence的包含上下文依赖关系的句子表示,可以用来处理多种自然语言处理(NaturalLanguage所述叠加序列。[0043]如图3所示,所述符号序列有A7[0046]步骤S1033、根据所述叠加序列中的首个符号的隐藏层状态生成所述目标文本的[0053]对所述各个全连接层输出向量进行拼接处理,即可得到所述目标文本的意图矩[0059]步骤S1034、使用注意力机制对所述意图矩阵和所述叠加序列中的各个符号的隐质可以被描述为一个查询(query)到一系列(键key-值value对)的映射。首先将query和每应的键值value进行加权求和得到注意力值(A8[0065]其中,H_(2:T)为所述叠加序列中除首个符号之外的各个符号的隐藏层状态,~=[0066]步骤S1035、根据所述目标文本的注意力矩阵确定所述目标文本的意图识别结果9[0077]对应于上文实施例所述的一种意图识别和槽填充方法,图5示出了本申请实施例提供的一种意图识别和槽填充装置的一个实施例[0081]联合处理模块503,用于使用预设的神经网络模型对所述符号序列进行意图识别计算机可读指令62时实现上述各装置实施例中各模块/单元的功能,例如图5所示模块501述一个或多个模块/单元可以是能够完成特定功能的一系列计算机可读指令段,该指令段用于描述所述计算机可读指令62在所述终端设备其它通用处理器、数字信号处理器(DigitalSignalProcessor,DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit,ASIC)、现场可编程门阵列(Field-分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器元也包括外部存储设备。所述存储器61用于存储所述计算机可读指令以及所述终端设备6[0110]所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论