CN119415619A 基于组合模型的数据处理方法、装置、设备及存储介质 (广州盈风网络科技有限公司)_第1页
CN119415619A 基于组合模型的数据处理方法、装置、设备及存储介质 (广州盈风网络科技有限公司)_第2页
CN119415619A 基于组合模型的数据处理方法、装置、设备及存储介质 (广州盈风网络科技有限公司)_第3页
CN119415619A 基于组合模型的数据处理方法、装置、设备及存储介质 (广州盈风网络科技有限公司)_第4页
CN119415619A 基于组合模型的数据处理方法、装置、设备及存储介质 (广州盈风网络科技有限公司)_第5页
已阅读5页,还剩28页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

本申请实施例公开了一种基于组合模型的通过对文本内容进行语境分析确定各敏感词中以及每个关键词的词性生成所述文本信息对应2获取文本信息,通过第一语言模型对所述文本信息进行敏感信确定各敏感词在所述文本信息中的文本位置,根据所述通过对所述文本内容进行语境分析确定所述各敏感词中的目标敏将所述安全数据上报至服务器,用于所述服务器基于第二语言模型确定各敏感词所属的文本段落和文本行号,根据所述文对所述文本段落进行字数统计,根据统计结果确定语境分析的目标在所述目标文本段落与所述文本段落相同的情况下,将所在所述目标文本段落与所述文本段落不同的情况下,确定通过对所述文本内容进行语境分析确定各敏感词的在所述敏感等级大于预设敏感等级且各类别中存在敏感类根据所述多个关键词以及每个所述关键词的词性确定所述文本信息的应答类型以及所述应答类型对应的应答数据库,根据所述应答数据库生成所述文本信息对应的应答信个关键词以及每个所述关键词的词性确定所述文本信息的应答类型以及所述应答类型对根据所述多个关键词以及每个所述关键词的词性确定所述文本信息3在所述语句类型为陈述句类型的情况下,确定所述文本信识别所述多个关键词中是否存在疑问词或语言标识词敏感信息检测模块,用于获取文本信息,通过第一语言模型对所述文文本内容确定模块,用于根据所述文本位置确定语境分数据上报模块,用于将所述安全数据上报至服务器,用于所述服务实现如权利要求1_7中任一项所述的基于组合模型10.一种存储计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1_7中任一项所述的基于组合模4[0001]本申请实施例涉及计算机技术领域,尤其涉及一种基于组合模型的数据处理方为自然语言处理(NLP)领域的重要范式。这些模型通过在大量无标注文本数据上进行自监决了商业大模型的数据处理过程中存在安全隐患的问题以及文本匹配过程中由于缺乏对5[0012]可选的,所述根据所述文本段落和所述文本行号确定语[0017]通过对所述文本内容进行语境分析确定各敏感词的类别以及文本内容的敏感等[0020]根据所述多个关键词以及每个所述关键词的词性确定所述文本信息的应答类型[0022]根据所述多个关键词以及每个所述关键词的词性确定所在所述语句类型为疑问句类型的情况下,确定所述文本信息对应的应答类型为答复类型,6计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的基于组合模型的[0035]本申请实施例获取文本信息后通过第一语言模型对文本7象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互[0048]本申请实施例提供的基于组合模型的数据处理方法应用于对用户输入的语音或8[0054]步骤S103、通过对所述文本内容进行语境分析确定所述各敏感词中的目标敏感[0057]第二语言模型可以是服务器中的大语言模型,大语言模型(LargeLanguage9[0064]图2是本申请实施例提供的一种目标文本行号的确定方法[0070]图4是本申请实施例提供的另一种文本信息的展示示意图,敏感词的所属文本段段中第1_5行为目标文本行号,第4段中共3行文本内容,则第4段中第1_3行为目标文本行本行号相邻的文本行号确定为目标文本行号;在目标文本段落与文本段落不同的情况下,[0075]步骤S502、在所述敏感等级大于预设敏感等级且各类别中存在敏感类别的情况体敏感程度和敏感类别的判断提高确定目标敏感[0082]步骤S603、通过对所述文本内容进行语境分析确定所述各敏感词中的目标敏感[0087]根据所述多个关键词以及每个所述关键词的词性确定所在所述语句类型为疑问句类型的情况下,确定所述文本信息对应的应答类型为答复类型,[0095]图7是本申请实施例提供的一种基于组合模型的数据处理装置的结构示意图,如[0102]本申请实施例获取文本信息后通过第一语言模型对文本[0110]通过对所述文本内容进行语境分析确定各敏感词的类别以及文本内容的敏感等[0115]在一个可能的实施例中,识别所述多个关键词中是否存申请实施例提供的一种基于组合模型的数据处理装置。图8是本申请实施例提供的一种电程序以及模块,如本申请任意实施例提供的基于组合模型的数据处理方法对应的程序指指令在由计算机处理器执行时用于执行如上述实施例提供的基于组合模型的数据处理方更多存储介质。存储介质可以存储可由一个或多

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论