KRI的误报与漏报：阈值调整的规则与记录

KRI的误报与漏报：阈值调整的规则与记录本文档提供：误报与漏报归因判定表（表1）；误报三来源处置表（表2）；漏报复盘检查表（表3）；误报率式(1)、漏报率式(2)、调整量式(3)与调整幅度对照表（表4）；调整审批材料清单（表5）；调整记录必填项表（表6）；调整失效排查表（表7）；一次从误报率偏高到阈值定稿的完整示例与变量表（表8）；决策规则6条与矛盾四段式1处；完整版、精简版、极简版三套场景操作序列；数据来源与时效说明表（表9）。2026-11-04这一节的标题读完你能拿到什么这一节在全文中的功能一、报警响了但没事，和出事了没响，先分到两张单子上误报与漏报归因判定表（表1），五问定归因方向在动阈值之前把问题归到可处理的那一类二、误报的三种来源：阈值、指标定义、响应流程误报三来源处置表（表2），每种来源对应改哪个文件区分“阈值太松”与“指标本身不指向风险”三、漏报复盘：哪几笔是阈值问题，哪几笔不是漏报复盘检查表（表3），逐笔核对取数时点与覆盖范围防止把覆盖缺口当成阈值偏高来调四、一次调多少：误报率与漏报率的组合决定方向和幅度式(1)、式(2)、式(3)与调整幅度对照表（表4）把“调一调阈值”换成可复算的调整量五、谁签字、附什么材料：调整审批的三个层级调整审批材料清单（表5），按调整幅度分三级固定审批链，避免口头同意后直接改配置六、调整记录写哪几列，下季度复盘才查得到调整记录必填项表（表6），逐项写不填的后果把一次调整落成可被下季度读取的字段七、阈值调了半年指标没改善，先查这五处调整失效排查表（表7），第一检查点是调整前后的报警记录定位调整无效的具体环节八、一次从误报率偏高到阈值定稿的完整示例含四次试错、判断转折、终点与变量表（表8）演示归因、计算、审批、记录四条线的联动九、什么时候调阈值，什么时候改指标或补取数决策规则6条、矛盾四段式1处、权衡规则与退路把“调不调”写成可执行判断十、报送、内部监控、个人查数各走哪套流程三套场景的检查项与公式实际增减，逐套写明底线按交付对象与可用时间选择执行深度十一、每个判断的依据层级和复核方式信息项、来源层级、核对状态、建议验证事项、核对路径交代关键判断的依据层级与复核路径按第一列在正文找对应那节，按第二列判断这节有没有要用的成品，按第三列判断这节是否对应当前卡住的位置。运营条线的KRI季度报表显示，六项指标共触发报警41次，响应后确认有实质风险的4次，其余37次填的是“已关注”；同期损失台账新增5笔事件，其中4笔在事发前30天内对应KRI没有触发。报表编制人收到两条意见：一条说阈值太松，一条说阈值太紧，两条意见指向同一张表。一、报警响了但没事，和出事了没响，先分到两张单子上误报和漏报的处理方向相反。误报多，通常指向阈值偏低或指标与风险脱节；漏报多，通常指向阈值偏高、取数缺失或事件类型未覆盖。把两类问题混在一张单子上讨论，调整动作会互相抵消。表1误报与漏报归因判定表判定顺序问什么什么算通过不通过时先做什么一个已填样例第1问报警记录里有没有响应结论栏，结论是否写到具体动作每条报警有结论，结论含动作与完成日先补响应栏，再讨论阈值41次报警中37次只写“已关注”第2问误报的报警，触发值距阈值有多远触发值在阈值上方20%以内的误报，归阈值问题触发值远离阈值的误报，查指标定义37次误报中29次触发值在阈值上方10%以内第3问漏报的事件，事前取数有没有记录有取数记录且未触发，归阈值问题无取数记录，归取数缺失4笔漏报中2笔无取数记录第4问漏报事件是否属于该KRI设计覆盖的事件类型属于，进入阈值讨论不属于，归覆盖缺口1笔外部欺诈不在该KRI覆盖范围第5问本次调整准备改变哪个文件能指到具体配置项或指标定义页指不到，暂不调整指向阈值配置表第3行第2问的20%是初始判定线，不是固定值。触发值在阈值上方20%以内的误报，说明报警与阈值贴得近，阈值小幅上移即可消除；触发值远离阈值的误报，上移阈值会把真实风险信号一起挡掉。第3问和第4问分开，原因是取数缺失和覆盖缺口对应的修复动作不同。取数缺失补管道，覆盖缺口补候选KRI，两者都不改阈值。二、误报的三种来源：阈值、指标定义、响应流程表2误报三来源处置表来源识别信号改哪个文件不改什么一个已填样例阈值偏低触发值集中在阈值上方20%以内，且事后确认无实质风险阈值配置表指标定义、取数字段29次误报触发值在阈值上方10%以内指标定义与风险脱节触发值分布宽，事后确认无风险的比例在各区间均匀指标定义页阈值、取数字段空缺天数误报率83%，各区间均匀响应流程缺失报警有触发，响应栏为空或只写“已关注”报警响应模板阈值、指标定义37次报警响应栏无具体动作取数时点错位报警集中在月末或批次日取数调度配置阈值批处理超时报警集中在月末三天多重共线两项KRI在同一天同时报警，事后只确认一项候选池清单单项阈值复核积压与检查完成率同日触发9次响应流程缺失在误报处置中排第三，但它对误报率的影响可能大于阈值。响应栏只写“已关注”时，无法区分“确实无风险”和“没有核实”。案例中37次“已关注”里，有6次事后补查发现存在实质问题，只是当时未记录。这6次计入误报会高估误报率，进而推动阈值上移，方向错误。多重共线的处理动作在候选池清单，不在单项阈值。两项指标同源时，调低其中一项的阈值不能减少联合报警，需要合并为一项或指定其中一项为主指标。三、漏报复盘：哪几笔是阈值问题，哪几笔不是漏报的复盘逐笔做，不做汇总讨论。每笔事件填一行，四列：事件编号、事前取数有无记录、是否属于该KRI覆盖类型、触发值距阈值多远。表3漏报复盘检查表检查项怎么查归到哪一类对应动作一个已填样例事前取数记录打开取数日志，看事件前30天该字段有无记录无记录归取数缺失补管道，不改阈值2笔漏报无取数记录事件类型归属对照KRI设计说明中的覆盖事件类型不属于归覆盖缺口补候选KRI，不改阈值1笔外部欺诈不在覆盖范围触发值距阈值取事件前30天该KRI的峰值，与阈值比较峰值低于阈值且差距在20%以内，归阈值偏高下调阈值一档1笔事件前峰值距阈值8%报警时点取触发日与事件发生日，算间隔触发晚于事件，归指标定义改取数时点或指标定义0笔，本季无此类事件分类版本对照事件分类标准版本与KRI映射版本版本不一致，归映射未更新先对齐版本再复盘分类2026版，映射2025版漏报率的计算依赖分母的完整性。事件总数取损失台账中已确认的事件，未确认的疑似事件不计入分母，单列为“待确认”。待确认事件在一个季度内未转为确认的，从分母中剔除，剔除记录写入复盘说明。案例中4笔漏报的归类结果是：2笔取数缺失、1笔覆盖缺口、1笔阈值偏高。只有1笔进入阈值调整，其余3笔的修复动作在管道、候选池和映射表。这个分布说明漏报率不能直接作为调阈值的依据。四、一次调多少：误报率与漏报率的组合决定方向和幅度误报率按式(1)计算。FN误报为报警响应后确认无实质风险的次数；N报警漏报率按式(2)计算。MN未触发为事件前30天内该KRI未触发的事件数，按表3逐笔归类后，只计入归因为“阈值偏高”的笔数；取数缺失和覆盖缺口的笔数从分子中剔除，分别列入各自的修复清单。N事件式(1)和式(2)各有两个特有错误。式(1)的两个错误：把未核实报警计入分母，误报率被稀释；分子只算“确认无风险”，漏算“响应后未记录结论”的笔数。式(2)的两个错误：分子包含取数缺失的笔数，漏报率被放大；分母包含待确认事件，事件基数虚增。校验方法：手里有报警响应记录、取数日志和损失台账，三份取同一季度；先算未核实比例，超过30%时先补响应记录；再算F和M，与上一季度对照，两个比率同时上升时检查事件分类版本是否变更。调整量按式(3)计算。ΔT原为原阈值；α式(3)的两个特有错误：α取整后跨期累积，三次各上调10%等于实际上调33%，与一次上调30%不同；误报率与漏报率取自不同窗口，一个按季度、一个按半年，组合判定失真。校验方法：手里有原阈值配置表、本季F与M的计算底稿；先确认两个比率同窗口；算出ΔT后与调整幅度上限对照，超过上限时分两次执行。表4调整幅度对照表误报率F漏报率M调整方向调整系数α上限案例结果高于0.40不高于0.20上调阈值+0.10单次不超过原阈值20%F为0.90，M为0.25，不适用0.25至0.400.20至0.30微调+0.05同上未出现0.20至0.300.20至0.30不调0—未出现不高于0.20高于0.30下调阈值−0.10同上未出现高于0.40高于0.30不调阈值0先改指标定义或补取数F为0.90，M为0.25，本例走此格不高于0.20不高于0.20维持0—上一季度：F0.18，M0.17案例落在第五格：误报率0.90，漏报率0.25。两个比率同时偏高时，表4不给阈值调整，原因是误报和漏报同时高通常意味着指标与风险脱节，上调阈值会压低误报，同时把漏报推得更高。这一格的动作在表2的“指标定义与风险脱节”行。五、谁签字、附什么材料：调整审批的三个层级表5调整审批材料清单调整幅度谁审批必须附的材料审批时限一个已填样例绝对值不超过5%KRI责任人式(1)、式(2)计算底稿；调整记录表3个工作日未触发5%至10%风险经理加KRI责任人上项加表3漏报逐笔归类、调整前后模拟报警次数5个工作日未触发超过10%风险委员会上项加指标定义复核意见、候选池合并方案次月会议未触发，本例不调阈值任何幅度的下调风险经理式(2)底稿、漏报事件逐笔记录5个工作日未触发涉及指标定义变更风险委员会指标定义页新旧对照、覆盖事件类型清单次月会议待提交：空缺天数降为观测指标下调阈值的审批层级不低于上调。下调会提高报警量，响应资源跟不上时，报警会退化为背景噪声。案例中漏报的1笔阈值偏高事件，因调整方向是下调且幅度在5%以内，审批层级为风险经理。材料清单里“调整前后模拟报警次数”是审批人判断可行性的主要依据。模拟方法：用过去12个月的原始数据，按新阈值重算报警次数，与响应资源上限对照。模拟报警次数超过上季度实际响应能力的80%时，调整分两次执行。六、调整记录写哪几列，下季度复盘才查得到表6调整记录必填项表记录项写在哪谁填不填的后果一个已填样例调整编号阈值配置表备注列KRI责任人下季度无法关联调整前后报警ADJ-2026-03调整依据同上，引用式(1)(2)结果KRI责任人无法复算为何调这个幅度F0.90、M0.25，落表4第五格原阈值与新阈值阈值配置表数值列系统自动调整前后无法对照空缺天数10天，维持审批链审批单签字栏各级审批人责任无法追溯风险经理、责任人生效日期配置表生效列KRI责任人新旧阈值并行期无法界定2026-11-15调整后首季结果调整记录表回填列KRI责任人调整是否有效无记录待回填，2027年1月第三项“原阈值与新阈值”由系统带入，不由人工填写。人工填写时容易把调整后的值写成调整前的值，下季度复盘时方向判断反了。第六项“调整后首季结果”在生效后一个季度回填，回填内容至少两个数：调整后的F和M。两个数都不改善时，进入表7排查，不再继续调阈值。七、阈值调了半年指标没改善，先查这五处表7调整失效排查表检查顺序第一检查点什么算异常换哪条路1打开阈值配置表，比对调整前后的报警记录条数阈值改了但报警条数不变查配置是否生效，生效日期与报警记录对不上时先修配置2取调整前后的误报确认记录，看响应栏质量调整后响应栏仍以“已关注”为主先补响应结论，再读F和M3看调整是否伴随指标定义变更只调阈值，指标定义未动误报率未降时，按表2第二行改指标定义4看漏报事件的归类是否每季度更新连续两季用同一份归类结果逐笔重新归类，取数缺失和覆盖缺口分开5看调整记录第六项是否回填回填列为空未回填前不进行下一次阈值调整第1项是排查起点。配置改了但报警条数不变，说明调整没有落到实际运行的配置上，后续四项都建立在错误的前提上。第1项的核对动作在两张表上完成：配置表的生效日期与报警记录的首条日期，两个日期对不上即视为未生效。第5项拦住的是连续调整。一次调整的结果没有回填，下一次调整的依据仍然是调整前的数据，两次调整叠加后无法归因。八、一次从误报率偏高到阈值定稿的完整示例示例案例，细节为合理设定。起点。运营条线六项KRI季度报警41次，确认有实质风险4次，误报率按式(1)计算为0.90。损失台账同期5笔事件，4笔事前未触发，漏报率初步算为0.80。报表编制人收到两条方向相反的意见。第一轮试错。编制人先按误报率0.90处理，把六项阈值各上调10%。下一季度报警降到22次，确认有实质风险3次，误报率0.86；漏报从4笔升到6笔。当时以为调整幅度不够。试了再上调10%，报警降到14次，误报率0.79，漏报升到8笔。试完发现，阈值上调在压低报警量的同时把漏报推高，误报率下降的幅度远小于报警量下降的幅度。换路：先补响应记录，再算误报率。第二轮试错。回查上一季度37次“已关注”记录，逐条补核实，其中6次事后确认存在实质问题，只是当时未记录。补录后误报率从0.90降到0.76。当时以为误报率下降说明阈值问题不严重。试了按表1第2问检查触发值分布，29次误报的触发值在阈值上方10%以内，但补录的6次实质问题中有4次触发值也在阈值上方10%以内。试完发现，触发值距阈值的远近无法区分真伪报警，同一区间内既有误报也有真风险。换路：误报率不再作为单独调阈值的依据，转表4组合判定。第三轮试错。按式(2)重算漏报率，先逐笔归类。4笔漏报中2笔无取数记录、1笔不在覆盖范围、1笔阈值偏高。剔除前3笔后，M为0.25。F为0.76、M为0.25，落表4第一格，方向为上调阈值10%。试了上调10%，下一季度F降到0.61，M升到0.31，落入表4第五格。试完发现，一次调整把组合从一个格子推到另一个格子，两个格子都不给继续调整，说明单项阈值不是这一层的调节变量。换路：回到表2第二行，检查指标定义。第四轮试错。逐项看六项KRI的定义与覆盖事件类型。“空缺天数”的误报在各触发值区间均匀分布，事后确认无风险的比例不随触发值变化，符合表2第二行的识别信号。按表1第4问核对该KRI覆盖的事件类型，过去三年11笔事件中只有4笔属于其设计覆盖范围。当时以为需要重新设计该指标。试了把它降为观测指标，六项变五项，报警总量降到26次，F降到0.58，M维持0.25。试完发现，误报的主要来源是一项与风险脱节的指标，不是阈值。换路：保留五项KRI，阈值不动，空缺天数进入观测报表。终点。六项KRI调整为五项，阈值全部维持原值。调整记录写三行：空缺天数降为观测指标，依据为该指标误报分布均匀且覆盖事件类型不足；其余五项阈值不变，依据为表4组合判定；调整后首季结果待2027年1月回填。审批材料按表5“涉及指标定义变更”行提交风险委员会。表8完整示例变量表变量案例中情形如果变量不同处置变化响应记录完整率补录后从0升到0.85维持在0.30以下F只做参考，先补响应模板，不进入表4误报率F0.76降到0.30落表4第三格，不调阈值，维持监控漏报率M0.25升到0.45落表4第五格，同格，先补取数再判定触发值分布各区间均匀集中在阈值上方10%以内归阈值偏低，按表4第一格上调10%覆盖事件类型占比11笔中4笔属于覆盖范围达到9笔指标定义有效，误报归阈值或响应流程指标项数六项减为五项维持六项误报率不降时，按表7第3项改定义权重较高的变量是响应记录完整率。完整率从0.85降到0.30以下时，误报率本身不可计算，表4的组合判定失去输入，整条调整链在第一个环节停止。九、什么时候调阈值，什么时候改指标或补取数决策规则。第1条。如果响应记录完整率低于0.70，则本期不调整任何阈值，先补响应结论；补录完成后重算式(1)。第2条。如果误报率与漏报率落入表4第五格，则不调阈值，按表2逐项检查指标定义、取数时点和多重共线，检查结论写入调整记录的依据栏。第3条。如果漏报事件逐笔归类后，归因为“阈值偏高”的笔数占漏报总数不足一半，则本期不做阈值下调，其余归类项进入各自的修复清单。第4条。如果单次调整幅度超过原阈值10%，则分两次执行，两次间隔不少于一个季度，首次调整后回填式(1)与式(2)结果再执行第二次。第5条。如果调整涉及指标定义变更或指标降为观测，则审批层级为风险委员会，材料按表5第四行准备，不得以阈值调整名义提交。第6条。如果调整记录第六项未回填，则下一次调整申请不予受理；回填内容至少包含调整后的F与M两个数。矛盾：降低误报的阈值上移与漏报的同步上升。矛盾陈述。误报率高时，上移阈值是最直接的动作，报警量下降，响应资源压力减轻；同一动作会把阈值附近的真实信号一起挡掉，漏报率上升。误报和漏报由同一个阈值参数控制，压低一个必然抬高另一个，两个比率没有同时下降的阈值取值。案例中两次上调10%的过程把这个关系量化了：报警量从41降到14，漏报从4笔升到8笔。实质分析。阈值是单一参数，误报与漏报是它在两个方向上的后果。真正能同时改善两个比率的动作不在阈值层，在指标定义层和取数层：指标与风险脱节时，无论阈值取何值，误报和漏报都同时偏高；取数缺失时，漏报与阈值无关。案例中误报率0.90与漏报率0.25同时出现，落表4第五格，这一格的规则是不调阈值，原因就在这里。权衡规则。误报率与漏报率落入表4第一格或第四格时，阈值是可用的调节变量，按系数调整并在下季度回填；落入第二、三、六格时，阈值调整的收益有限，优先检查响应记录与取数完整性；落入第五格时，阈值不是调节变量，指标定义和覆盖范围是。调整动作的优先级按表2的来源顺序排列，阈值排在指标定义和响应流程之后。退路。如果指标定义短期无法修改、取数管道也无法补齐，而误报率已高到响应资源无法承受，则对该项KRI设置临时静默期：静默期内报警只记录不派发，静默期结束前必须提交指标定义复核意见或取数修复计划。静默期不改变阈值，也不改变误报率的统计口径，它只是把响应资源从无效报警中释放出来。十、报送、内部监控、个人查数各走哪套流程完整版（对外报送或监管材料）。表1五问、表2五个来源、表3五项检查、式(1)至式(3)、表4六格、表5五级审批、表6六项记录、表7五项排查全部执行，漏报逐笔归类。序列：走表1定归因方向→按表2和表3分别处置误报与漏报→算F与M→查表4定方向和系数→按表5报批→填表6六项→下季度回填并跑表7。不能妥协的底线：响应记录完整率不低于0.70；漏报逐笔归类；调整记录六项齐全。精简版（内部监控且时间受限）。保留表1第1、2、3问；表2只区分阈值偏低与响应流程缺失；表3只查事前取数记录与触