CN112528654B 自然语言处理方法、装置及电子设备 （作业帮教育科技（北京）有限公司）

进行分词处理以获取文字和/或词汇；将所述文本数据和其对应的领域属性输入文字向量模型所述文本数据确定所述文字对应的第一权重和/所述第一权重和/或所述词向量、所述第二权重子语义向量对所述实时文本数据进行自然语言处理。本发明能够有效提升句子的语义表达能2基于所述分词字典对实时文本数据进行分词，生成词汇网络，所基于动态规划算法确定所述词汇网络中的最大概率路径；包括：基于所述最大概率路径确定文字和词汇；基于所述文本数据的内基于所述文本数据确定所述文字对应的第一权重和所述词汇对将第一句向量和第二句向量进行拼接以生成基于所述句子语义向量对所述实时文本数据进行自基于所述句子语义向量将所述文本数据和所述多个预设文本数据进根据相似度比较结果由所述多个预设文本数据中确定目基于多个带有领域属性的语料对深度神经网络模型进行训练，生成所述文字向量模基于多个带有领域属性的语料对浅层神经网络模型进行训练，生成所述词汇向量模将所述文本数据和其对应的领域属性输入训练完毕的BERT模型中将所述文本数据和其对应的领域属性输入训练完毕的Word2vec模型中基于所述文本数据中所述文字和所述词汇对应的逆文档频率确定所述第一权重和所分词模块，用于获取分词字典；基于所述分词字3文字模块，用于将所述文本数据和其对应的领域属性输入文词汇模块，用于将所述文本数据和其对应的领域属性输入权重模块，用于基于所述文本数据确定所述文字对应的第一权重和当所述计算机可执行程序被所述处理器执行时，所述处理器执行如权利要求1-5中任4[0002]自然语言处理(NLP)是计算机科学领域与人工智能领域中的一个重要方向。它研别。对文本数据中的文字进行分词处理以获取文字和/或词汇；将所述文本数据和其对应的领义向量；基于所述句子语义向量将所述文本数据和所述多个预设文本数据进行相似度比5[0009]根据本发明的优选实施方式，对文本数据中的文字进行分词处理以获取文字和/[0011]根据本发明的优选实施方式，对文本数据中的文字进行分词处理以获取文字和/[0014]根据本发明的优选实施方式，基于所述文本数据确定所述文字对应的第一权重权重将所述字向量和/或所述词向量进行拼接以生成所述句子语述第一权重和/或所述词向量、所述第二权重确定所述文本数据的句子语义向量；语义模数据中的文字进行分词处理以获取文字和/或词汇；将所述文本数据和其对应的领域属性6[0030]附图中的框图一般表示的是功能实体，并不一定必然与物理上独立的实体相对省略了对相同或类似的元件、组件或部分的重复描述。还应理解，虽然文本中可能使用第7[0036]附图中的框图一般表示的是功能实体，并不一定必然与物理上独立的实体相对省略了对相同或类似的元件、组件或部分的重复描述。还应理解，虽然文本中可能使用第8还可例如基于所述句子语义向量将所述文本数据和所述多个预设文本数据进行相似度比较；服务器105还可例如根据相似度比较结果由所述多个预设文本数据中确定目标文本数[0046]服务器105还可例如基于多个带有领域属性的语料对深度神经网络模型进行训器105中的一部分还可例如对文本数据进行[0048]需要说明的是，本公开实施例所提供的自然语言处理方法可以由服务器105或终[0049]图2是根据一示例性实施例示出的一种自然语言处理方法的流程图。自然语言处9[0059]在S208中，基于所述文本数据确定所述文字对应的第一权重和/或所述词汇对应的第二权重。可基于所述文本数据中所述文字和/或所述词汇对应的逆文档频率确定所述量和/或所述词向量进行拼接以生成所述句[0068]6)该句的字向量切分方式对应的第一句向量：(idf(今)*[0.1,0.2,0.3]+idf户。向量对所述实时文本数据进行自然语言处理的方式，能够有效提升句子的语义表达能力，对句子级别的自然语言处理任务在保证其简便高效性的前提下大大的增强了其语义表达流程30是对图2所示的流程中S202“文本数据中的文字进行分词处理以获取文字和/或词[0089]本领域技术人员可以理解实现上述实施例的全部或部分步骤被实现为由CPU执行[0094]文字模块504用于将所述文本数据和其对应的领域属性输入文字向量模型中，获[0095]词汇模块506用于将所述文本数据和其对应的领域属性输入词汇向量模型中，获[0096]权重模块508用于基于所述文本数据确定所述文字对应的第一权重和/或所述词[0098]语义模块512用于基于所述句子语义向量对所述实时文本数据进行自然语言处向量对所述实时文本数据进行自然语言处理的方式，能够有效提升句子的语义表达能力，对句子级别的自然语言处理任务在保证其简便高效性的前提下大大的增强了其语义表达[0100]图6是本发明的一个实施例的电子设备的结构示意图，该电子设备包括处理器和所述处理器执行基于旋转角监测的车辆智能助[0107]可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序