已阅读5页,还剩10页未读, 继续免费阅读
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
一种非规范文档的切片处理方法,包括以下步二词向量确定子段落和章节名称之间的关联程2S1:将文档中单个章节对应的段落标记为子段落,基于TS3:将子段落和章节名称之间的关联程度小于将所述段落排序中首位的待定段落作为目标段落,获取所述目标段确定所述文档切片中子段落的文本摘要c,对所述文本摘要c进行分词得到第三关键获取用户的检索文本,对所述检索文本进行分词得到第四关键词,将的词向量记为第四词向量,基于第三词向量和第四词向量确定所述检索文本和文本摘要c计算第二向量,Dnb表示第b个所计算所述第一向量和第二向量间的余弦相似度,将其作为3关联程度相同的待定段落按照待定段落在文档中出现的顺序进4一词向量和第二词向量确定子段落和章节名称之间的关[0012]将所述段落排序中首位的待定段落作为目标段落,获取所述目标段落的文本摘56一词向量和第二词向量确定子段落和章节名称之间的关[0032]将所述段落排序中首位的待定段落作为目标段落,获取所述目标段落的文本摘7章节作为一个独立的文档切片,使得每个切片的长度适合大语言模型的上下文窗口限制,8
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026事业单位工勤技能-江苏-江苏热力运行工三级(高级工)历年参考题库含答案详解
- 2026事业单位工勤技能-江苏-江苏广播电视天线工五级(初级工)历年参考题库含答案详解
- 2026事业单位工勤技能-新疆-新疆热处理工四级(中级工)历年参考题库含答案详解
- 理赔员保险核赔实务模拟试卷及答案
- 建筑工程地质工程师考试冲刺练习题及答案
- 环保工程师职业资格考试土壤污染修复技术模拟试卷及答案
- 电气工程师考试电力系统调度及通信技术模拟试题及答案
- 房地产经纪人考试房地产经纪业务创新备考习题及答案
- 2026年企业资本运作模拟试题及答案
- 调酒师专业资格认证备考习题集及答案
- 浪潮存储AS520E操作手册
- 110KV变电站运营管理方案
- 中建办公、生活区临时设施专项施工方案
- 《土地经济学》课程教学大纲
- 氧气吸入操作评分标准(中心供氧)
- JC-T2723-2022预应力混凝土实心方桩
- 腹股沟斜疝的护理
- (21)-《计算机组成与结构》-华为-鲲鹏处理器
- 贵州玄德生物科技股份有限公司年产5000吨生态特色食品(4500L超临界CO2流体萃取)精深加工生产线建设项目环境影响报告
- 科学注塑成型技术
- BIM房地产BIM实施详细方案
评论
0/150
提交评论