版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
识别记录的结构化:从一段话到可检索字段的转化本文档提供:段落拆字段判定表1张;字段设计字典表1张;枚举值字典表1张;三级标签体系表1张;标签与字段挂接表1张;三类检索示例表1张;字段完整率式(1)及变量定义表1张;检索命中率排查表1张;决策规则6条与矛盾四段1处;完整示例1个(含四次试错与变量表);三套场景操作序列表1张;来源说明表1张。2026-11-03这一节的标题读完你能拿到什么这一节在全文中的功能一、一段话先拆成“谁、什么时候、对什么、做了什么”,拆不出的是缺信息段落拆字段判定表(表1),含拆取位置、缺项标记、退回动作确定结构化第一个动作,把段落转成字段候选二、字段设计分三类:必填、条件必填、选填,每类写出填不出的处理字段设计字典表(表2),含字段名、类型、取值规则、缺填处理给出字段清单和填写规则,防止字段名随人变三、枚举值写死在字典里,不允许现场造词枚举值字典表(表3),含字段、枚举值、适用条件、误用示例把“部门”“类别”这类字段的取值固定下来,保证可检索四、标签挂在字段之外,一级分域、二级分类、三级场景三级标签体系表(表4)与标签与字段挂接表(表5)解决“字段管事实、标签管检索入口”的分工五、三类检索示例:按编号找、按条件筛、按标签召回三类检索示例表(表6),含检索目的、字段组合、命中判定给出字段组合的检索写法,验证字段设计是否够用六、字段完整率与检索命中率:结构化做没做到位看这两个值字段完整率式(1)、变量定义表与检索命中率排查表(表7)把结构化结果压成两个可对照的数值七、什么情况补字段、什么情况改枚举、什么情况接受决策规则6条与矛盾四段式给超出标准结构化流程时的判断依据八、一次完整的转化:从86段记录到可检索字段完整示例,含起点、分步操作、四次试错、终点与变量表(表8)展示规则在真实转化顺序中的落地过程九、三套场景操作序列:完整结构化、精简结构化、极简结构化三套版本检查项与产出增减对照表(表9)按记录量与检索需求选择执行深度按第一列在正文找对应那节,按第二列判断这节有没有所需内容,按第三列判断这节是否对应当前卡住的位置。风险登记册里有86条记录,每条是一段话,最长的一条写了217字,内容混着事件描述、部门名称、发生时间和处理意见。评审会前有人问“去年Q3信息科技部报过哪几条”,登记册只能逐条打开看,看完86条用了40分钟,回答还是不全。一、一段话先拆成“谁、什么时候、对什么、做了什么”,拆不出的是缺信息打开登记册第一段记录,按四个位置逐句找:主语是谁、时间是什么、对象是什么、动作是什么。四个位置各拆出一个候选值,拆不出的位置标“缺”,不猜、不补。表1段落拆字段判定段落原句谁什么时候对什么做了什么拆取结果去年三季度信息科技部在生产变更中发现核心交易系统连接池配置错误,已回退并加监控信息科技部去年三季度(具体日期缺)核心交易系统连接池发现配置错误、回退、加监控4项中3项可拆,时间缺具体日供应商交付延迟导致产线停了两天,已经换了备选供应商缺(哪个供应商未写)两天(起止未写)产线停线、换供应商4项中2项可拆,谁和时间缺数据质量问题比较突出缺缺数据质量(对象不具体)无动作4项中0项可拆,整段退回重写表1第1行的“时间缺具体日”,处理动作是回原记录查发生日期,查不到的在时间字段填“季度级”,并在备注列写“日期待补”。第2行的“谁”缺,处理动作是查采购记录确认供应商名称,查不到的填“供应商未具名”,该记录在检索时按“供应商未具名”可召回。第3行四个位置都拆不出,整段退回写记录的人重写,退回时附一句“写出谁在什么时候对什么做了什么”。拆取完成后统计四个位置的拆出率。任一位置的拆出率低于70%时,先做一轮记录写法说明,再继续拆,不直接进入第二节字段设计。二、字段设计分三类:必填、条件必填、选填,每类写出填不出的处理字段清单从拆取结果来。四个位置各对应一组字段,必填字段是每条记录都必须有的,条件必填是某个条件下才要求的,选填是检索加分项。表2字段设计字典字段名类型必填或条件取值规则填不出时怎么处理示例值记录编号文本必填前缀加6位流水号,前缀按记录来源定不适用,录入时自动生成R-2026-000137发生部门枚举必填取表3“部门”枚举值之一填“未具名部门”,备注列写来源文件信息科技部发生日期日期必填精确到日;只有季度信息时填季度首日并在精度列标“季度”填季度首日,精度列标“季度”2025-07-01日期精度枚举条件必填日、月、季度三选一发生日期填到日时填“日”季度对象名称文本必填写出具体系统、产线、合同或数据对象名称填“对象未具名”,退回补写核心交易系统连接池动作类型枚举必填取表3“动作类型”枚举值之一填“其他”,备注列写原句发现并处置影响对象数整数条件必填动作影响到的下游对象个数,没有填0填“未知”,进排查清单1责任岗位文本选填写出岗位名称,不写人名留空基础架构岗关联记录编号文本选填同一条风险的多段记录互相引用留空R-2026-000102表2第3行的发生日期允许季度级精度,靠“日期精度”列区分,检索时按精度列过滤。第5行的对象名称填不出时退回补写,不填“未具名”了事,原因是对象名称是检索的主键之一。第7行的影响对象数在字段设计阶段就要求填,是因为第六节的影响面检索依赖这一列。字段名在字典里固定,录入界面的列名、检索时的字段名、导出报表的列名三处逐字一致。字段名中途改名时,旧记录按映射表迁移,不在一张表里混用两个名字。三、枚举值写死在字典里,不允许现场造词部门、动作类型、影响等级这类字段,取值必须从枚举字典里选,不允许录入人自己写。现场造词会让同一含义出现多种写法,检索时召回不全。表3枚举值字典字段枚举值适用条件误用示例正确写法发生部门信息科技部、运营管理部、采购管理部、财务管理部、风险管理部、未具名部门按记录中写明的部门选写“IT部”“科技部”信息科技部动作类型发现并处置、发现未处置、预防、监测、整改、其他按记录中描述的主要动作选,一条记录只选一个同时选“发现并处置”和“整改”主动作是回退加监控,选“发现并处置”影响等级高、中、低、未评定按记录中写明的后果描述选,无描述填“未评定”凭印象填“高”记录写“停线两天”填高,写“无影响”填低记录来源风险登记册、审计发现、事件记录、工作坊、其他按记录最初出现的文件选写“内部”“外部”风险登记册日期精度日、月、季度按发生日期可精确到的粒度选日期填季度首日却标“日”日期填2025-07-01且标“季度”表3第1行的误用示例“IT部”“科技部”在录入时会被校验拦下,提示从枚举值中选。第2行的动作类型一条记录只选一个,记录中同时描述发现和整改时,按主要动作选,次要动作写进备注列,不新增枚举值。枚举值新增的触发条件写在第六节规则2。新增枚举值要同时更新三处:字典、录入界面下拉选项、历史记录的映射规则。三处缺一处,旧记录检索时会出现无对应枚举值的行。四、标签挂在字段之外,一级分域、二级分类、三级场景字段回答“谁、什么时候、对什么、做了什么”,标签回答“这条记录在哪些检索入口下应该被召回”。标签与字段分开维护,一个字段值可以对应多个标签,一个标签也可以挂在多条记录上。表4三级标签体系标签层级标签示例挂接依据一条记录可挂几个误用后果一级:业务域支付结算、信贷、供应链、内部运营按记录中对象所属业务域挂1个挂多个导致域统计重复计数二级:风险类别操作风险、信息风险、合规风险、供应链风险按表3记录来源和对象性质挂1个挂多个导致类别覆盖度虚高三级:场景系统变更、供应商中断、数据质量、权限管理按记录中动作发生的场景挂1至3个挂过多导致场景标签失去区分度表4第1行的一级标签一条记录只挂1个,业务域按对象所属域判定,不按发生部门判定。第2行的二级标签与风险清单的类别字段对齐,不另造一套名称。第3行的三级标签允许挂1至3个,超过3个时按场景的具体程度排序,保留最具体的3个。表5标签与字段挂接标签挂接字段判定规则示例记录不挂接的后果支付结算(一级)对象名称对象名称含“支付”“结算”“清算”之一核心交易系统连接池业务域检索召回不全信息风险(二级)记录来源与对象名称记录来源为事件记录且对象为信息系统R-2026-000137类别覆盖度统计漏计系统变更(三级)动作类型动作类型为“发现并处置”且原句含“变更”“上线”“回滚”之一发现配置错误、回退、加监控场景检索无法定位变更类记录表5第3行的挂接规则要求同时满足动作类型和原句关键词两个条件,只满足一个的不挂。挂接由录入时自动匹配加人工确认两步完成,自动匹配结果人工可改,改动记录写进备注列。标签体系新增层级或新增标签时,先检查现有标签能否覆盖,覆盖不了再加。新增三级标签超过20个时,标签体系做一次合并,合并规则按场景相似度,不按部门拆分。五、三类检索示例:按编号找、按条件筛、按标签召回字段和标签设计完后,用三类检索验证是否够用。检索写法逐字段写清,不写“查一下相关记录”。表6三类检索示例检索类型检索目的字段与标签组合写法命中判定示例结果按编号找已知记录编号,调出完整记录记录编号等于R-2026-000137返回1条核心交易系统连接池配置错误记录按条件筛找某部门某季度的高影响记录发生部门等于信息科技部,且发生日期在2025-07-01至2025-09-30之间,且影响等级等于高返回条数与登记册核对一致3条按标签召回找所有系统变更场景的记录三级标签包含系统变更,且日期精度为日或月返回条数不少于按条件筛的同类条数17条表6第2行的条件筛用了三个字段,三个字段都来自表2的必填或条件必填列。第3行的标签召回与条件筛做交叉核对:标签召回的系统变更记录中,属于信息科技部且影响等级为高的条数,应等于或接近条件筛的3条,差异超过2条时说明标签挂接有遗漏。三类检索各跑一遍,把命中条数和人工翻登记册的条数对照。任一检索类型的命中条数比人工翻找少20%以上时,回第四节检查标签挂接或回第二节检查字段取值规则,不直接改检索条件。检索写法固定后,把三类检索的字段组合写进检索模板,模板里字段名与表2逐字一致,下次检索直接套模板改取值。六、字段完整率与检索命中率:结构化做没做到位看这两个值字段完整率回答“必填字段填没填全”,检索命中率回答“该被召回的记录有没有被召回”。两个值一起看,完整率高但命中率低,说明字段设计或标签挂接有问题。式(1)字段完整率F表7式(1)变量定义与检索命中率排查表变量含义取值来源常见错误校验方法FR字段完整率由式(1)算出只算必填字段却用全部字段数作分母分母取必填字段数Ncomplete所有记录中填写完整的必填字段格数导出表逐格计数把“未具名部门”算作已填“未具名”不算完整Ntotal记录总数登记册行数用去重后编号数按原始行数计K每条记录的必填字段数表2必填列计数用全部字段数按必填列数取式(1)的两个常见错误。第一,分母用全部字段数,选填字段留空被算作不完整,完整率虚低;第二,把“未具名部门”“对象未具名”算作已填,完整率虚高。校验方法:手里有导出表和表2必填列清单,从登记册导出中拿到;算出FR后与0.90对照,同时抽10行逐格核对分母是否只含必填字段。检索命中率排查表检查点在哪张表哪一行哪一列看什么算什么比什么标准值或参照物换哪条路按条件筛命中数导出表按发生部门、发生日期、影响等级三列筛数筛出条数,与人工翻登记册的条数比差异不超过20%差异超20%的查字段取值是否用了枚举外写法按标签召回命中数导出表按三级标签列筛数筛出条数,与同类条件筛条数比标签召回不少于条件筛的80%少于80%的回第四节查标签挂接规则枚举外取值条数导出表发生部门、动作类型两列数不在表3枚举值内的取值数等于0大于0的按表3映射表纠正后重导表7第1行的换路指向字段取值核对,第2行指向标签挂接核对,第3行指向枚举映射。三条检查点走完,产出三行排查结论,每行写“检查点、实测值、标准值、下一步动作”。七、什么情况补字段、什么情况改枚举、什么情况接受规则1(必填字段填不出)。如果某条记录的必填字段填不出,则该记录不进主登记册,进“待补记录”临时表,两周内补齐。退路:两周内补不出的,按字段类型填占位值并在备注列写“补不出”,该记录在检索时按占位值可召回,不消失。规则2(枚举值不够用)。如果录入时连续5条记录的同一字段找不到合适枚举值,则新增一个枚举值,新增时同步更新字典、录入下拉和历史记录映射表。退路:新增后使用该值的记录少于3条,该枚举值在下一季度合并回最接近的旧值。规则3(标签挂接冲突)。如果一条记录按表5规则应挂两个互斥的一级标签,则该记录只挂一个,另一个写进备注列。退路:备注列也写不清时,该记录一级标签留空,进第六节排查表第2行核对。规则4(检索命中数偏低)。如果按条件筛的命中数比人工翻找少20%以上,则先查字段取值是否用了枚举外写法,再查发生日期是否因精度问题被筛掉。退路:两项都正常仍偏低,该批记录重做一次字段拆取,不调整检索条件迁就数据。规则5(字段名变更)。如果某字段需要改名,则旧记录按映射表迁移,映射表保留旧名与新名的对应关系,检索模板同步更新。退路:迁移期间新旧名并存超过一个季度时,暂停新增记录录入,先完成迁移。规则6(接受)。如果字段完整率不低于0.90且检索命中率差异不超过20%,则本轮结构化按“通过”验收,剩余少量缺填记录按规则1处理。退路:下一轮检索命中率下降超过10%时,重跑表7三条检查点。矛盾四段。矛盾陈述:字段设计要求必填字段尽量少、枚举值尽量固定,录入才快、检索才准;但记录里的信息本来就杂,必填字段定得少,检索时缺维度的记录召回不全,必填字段定得多,录入人填不出就填占位值,完整率看似达标,检索时占位值又造成误召回。实质分析:字段少服务录入效率,字段多服务检索精度;占位值是两者的折中,折中做多了,登记册变成一张填满占位值的表,检索结果里大量记录需要人工二次判断。权衡规则:对象名称、动作类型、发生部门三个字段不允许占位,填不出即退回重写;发生日期允许季度级精度,影响对象数允许填“未知”并进排查清单。退路:待补记录占登记册比例超过15%时,暂停新增录入,先集中补写两周,补写完成前检索结果在报表中标“含待补记录”。八、一次完整的转化:从86段记录到可检索字段以下示例案例为合理设定,细节用于展示规则在转化顺序中的落地。起点。某企业风险登记册86条记录,每条一段话,最长217字,评审会前需要回答“去年Q3信息科技部报过哪几条高影响记录”,人工翻找用了40分钟且回答不全。分步操作与不顺利环节。第一轮。信号:按四个位置逐段拆,86段中有31段的“谁”拆不出,其中24段写的是“相关部门”“有关方面”。当时以为这些可以统一填“未具名部门”。试了填完,按部门检索时“未具名部门”下有24条,无法区分具体是哪个部门报的。试完发现占位值过多让部门维度失去检索价值,推翻了“拆不出就填占位”的假设。换路:31段回原始文件查记录人所属部门,查到19段,其余12段填“未具名部门”并进待补清单。第二轮。信号:发生日期有43段只写到月份或季度,例如“去年三季度”“今年上半年”。当时以为日期字段必须精确到日,准备把季度首日填进去且精度标“日”。试了标“日”后,按日期范围筛Q3时把一条7月1日实际发生在9月的记录也筛进来了。试完发现精度列不是装饰,推翻了“日期填了就行”的假设。换路:43段的日期精度按实际信息标“月”或“季度”,检索时按精度列过滤,季度级记录在季度范围检索中单独统计。第三轮。信号:动作类型枚举只有6个值,录入到第52条时遇到“已上报监管”这个动作,枚举里没有对应值。当时以为可以临时新增一个“上报监管”枚举值。试了新增后,前51条里同类动作有的填“整改”有的填“其他”,新旧记录不一致。试完发现枚举值中途新增会造成历史记录分裂,推翻了“不够用就加”的假设。换路:按规则2,连续5条找不到合适值才新增,本次只有1条,填“其他”并在备注列写“已上报监管”,新增动作留到下一季度统一评估。第四轮。信号:跑三类检索验证,按条件筛“信息科技部加2025年Q3加高影响”返回2条,人工翻登记册找到3条。当时以为检索条件写错了。试了放宽日期范围,返回5条,多出的3条是Q2和Q4的记录。试完发现漏掉的那条发生日期填的是“2025-07-01”但精度标“季度”,实际发生在8月,按Q3范围筛时因日期在范围内被筛入,但另一条日期填“2025-06-30”精度标“季度”实际发生在7月,被Q3范围排除。推翻了“日期字段填了季度首日就能按范围筛”的假设。换路:按规则4,季度精度记录的日期字段改为填该季度最后一日,检索Q3时范围设为7月1日至9月30日,季度精度记录按精度列单独召回后人工确认。终点。86条记录全部录入,必填字段完整率0.93,待补记录12条占14%。按条件筛“信息科技部加2025年Q3加高影响”返回3条,与人工翻找一致。三级标签挂接完成,系统变更场景召回17条。表7三条检查点各填一行结论,枚举外取值经映射后为0条。表8示例中的关键变量与处置变化变量案例中情形如果变量不同处置变化“谁”拆不出的段数31/86超过半数暂停录入,先做一轮记录写法说明只有季度精度的段数43/86少于10段不设精度列,统一精确到日枚举不够用的条数1条连续5条以上按规则2新增枚举值并更新映射表字段完整率FR0.93低于0.90按规则1补待补记录后再验收检索命中差异2条对3条差异超过20%按规则4重做字段拆取,不调检索条件待补记录占比14%超过15%按矛盾退路暂停新增录入,集中补写两周变量表中权重较高的变量是“待补记录占比”:它决定是否暂停新增录入,其余变量影响的是单条记录的字段取值和检索条件写法,不改变四位置拆取规则。九、三套场景操作序列:完整结构化、精简结构化、极简结构化选择依据:对外报送或跨部门检索走完整结构化;内部季度评审走精简结构化;岗位交接或少量记录走极简结构化。表9三套场景的检查项与产出增减版本执行哪些步骤(对应表1至表7)保留产出去掉检查项不能妥协的底线完整结构化表1至表7全量,式(1)计算,三类检索各跑一遍字段字典、枚举字典、标签体系、检索模板、完整率与命中率结论不删对象名称、动作类型、发生部门不允许占位;枚举外取值为0精简结构化表1四位置拆取、表2必填字段、表6按条件筛与按标签召回两类字段字典、检索模板、两类检索结果选填字段、按编号找检索、式(1)逐格计算被跳过字段标“本期未填”,不默认完整极简结构化表1四位置拆取、表3枚举值对照四位置拆取简表、枚举对照简表字段字典、标签体系、检索模板、两个比例对象名称拆不出的记录必须标“待补”,不能直接进检索表极简结构化的一条具体排查规则:某记录的对象名称拆不出时,
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026 外包项目质量巡检自查内部自查报告
- 2026 人力预算管控粗放内部研究报告
- 2026 客户回访效果测算内部测算报告
- 2026 公车调度效率评估内部研究报告
- 2026 差旅报销标准执行复盘内部复盘报告
- 2025数字化视野下优化地方政府公共服务的路径研究
- 2025年职称评审继续教育《专业技术人员公需科目培训班》试题
- 高二年级英语形容词比较级和最高级随堂作业
- 成品保护安全专项方案
- 2025-2026山东七年级地理下期末测试卷
- 2026年自动控制原理期末考试题及答案
- 草原牧区人畜共患病中西医结合科普课件
- 新教科版科学四年级上册3-1《声音是怎样产生的》课件
- 2026年叉车司机N1证理论知识考试题库完整答案
- 铁路接触网安装施工手册
- 2025年山西大同市高职单招职业技能考试模拟试卷含答案详解(黄金题型)
- 《反对浪费》教学设计-2026-2027学年统编版(新教材)小学道德与法治四年级上册
- 2025-2026学年江苏省苏州高新区实验初级中学八年级上册期中考试物理试卷 含答案
- 2025+WSESAAST指南:胸部创伤课件
- 事业单位采购业务培训
- 双创知识培训课件
评论
0/150
提交评论