人工智能驱动中小学考试评价的伦理风险与治理研究-开题报告

PAGE 人工智能驱动中小学考试评价的伦理风险与治理研究开题报告摘要智能阅卷系统、学业预警模块与综合素质评价系统在云溪县中小学的逐步接入，使人工智能技术由教学辅助进入考试评价这一利害关系最强的环节，评价的公平性、效度与申诉救济问题随之凸显。本课题以云溪县教研室为依托，以中小学考试评价场景中的智能评分与评价算法为研究对象，拟解决智能评价伦理风险的类型化识别、人机协同中人工终审边界的划定、评分异议申诉与复核渠道的建设三个核心问题。研究采用文献研究、问卷调查、访谈、行动研究与案例研究相结合的方法，在全县八所中小学开展调研，抽样复核智能阅卷试卷12000份，研制涵盖四类风险的伦理风险清单、人机协同评分复核操作指引与评价伦理制度文本，并在两所基地校开展为期9个月的实践检验。研究预期形成一套可操作的智能评价伦理治理机制，为县域中小学守住评价公平与效度底线提供支撑。本课题属综合研究，研究周期为2027年1月至2028年12月。关键词：智能阅卷；学业预警；教育评价伦理；评分公平；申诉救济一、课题基本情况表1课题基本情况项目内容课题名称人工智能驱动中小学考试评价的伦理风险与治理研究关键词智能阅卷；学业预警；教育评价伦理；评分公平；申诉救济课题类别一般资助课题学科分类基础教育研究类型综合研究负责人厍春生所在单位云溪县教研室研究周期2027年1月—2028年12月预期成果形式研究报告、调研报告、风险清单、操作指引、制度汇编、案例集、论文二、研究背景与问题提出（一）政策背景与实践背景从政策层面看，国家法律与政策体系对评价环节的智能技术应用提出了明确要求。《中华人民共和国个人信息保护法》规定，通过自动化决策方式作出对个人权益有重大影响的决定，个人有权要求说明，并有权拒绝仅通过自动化决策的方式作出决定，这为评价算法的透明度与人工介入提供了直接依据；《未成年人网络保护条例》对涉及未成年人个人信息的处理提出更严格的合法、正当、必要要求；《教育强国建设规划纲要（2024—2035年）》要求深化教育评价改革，扭转唯分数倾向，同时推进教育数字化转型；教育部《关于加强中小学人工智能教育的通知》在部署人工智能应用的同时强调统筹发展和安全。这些要求共同表明，考试评价场景的智能技术应用必须把公平、效度与救济纳入约束条件，而不能只追求评分效率。从实践背景看，县域中小学的场景具有典型性。云溪县已有八所中小学接入智能阅卷系统，部分学校同时使用学业预警模块与综合素质评价系统。课题组前期走访发现，多数学校使用智能评分结果时只关注分数是否一致，很少追问评分依据与群体差异；有独立主观题复核环节的学校仅两所，对进校评价类系统作过伦理评估的仅一所；学业预警模块产生预警名单后，学校普遍直接用于谈话与家长告知，缺少核验环节；综合素质评价系统中，行为表现、活动参与等可采集数据被赋以较高权重，而合作精神、探究兴趣等难以量化的素养只能得到笼统描述。学生与家长对评分算法的了解普遍不足，遇到评分争议时缺乏正式渠道，多数学生的异议只能通过向任课教师私下询问表达。据课题组在八所学校的初步摸查，能够识别智能阅卷常见算法风险的教师不足三成，知道对成绩有异议可以申请复核的学生比例很低，学校层面对评价类系统的管理多停留在配置与运维的技术层面。政策要求与实践现状之间的落差，构成本课题研究的直接动因。（二）现实问题本课题关注三方面现实问题。第一是评分公平问题。调研发现，智能阅卷在客观题评分上一致率高、稳定性好，但在作文等主观题评分上存在偏移，农村学生与书写不够工整的试卷被低估的倾向相对明显，若不加以复核，技术性的评分偏差会转化为对特定学生群体的实际不利，而这类偏差往往在分数统计层面难以察觉，只有通过分组复核才能暴露。第二是评价效度问题。学业预警以成绩与行为数据推断学生风险，部分预警在未核验的情况下直接用于谈话与家长告知，容易造成误标与标签固化，给学生带来不必要的心理压力；综合素质评价算法化则倾向把不易量化的素养简化为可计算指标，使评价偏离育人本意，出现“可测的才有分、不可测的被忽略”的倾向。第三是申诉救济问题。评价结果直接关系学生升学、分班与评优，但当学生对结果存有异议时，学校普遍没有正式、便捷、可闭环的复核渠道，学生只能通过教师私下询问，权利主张缺乏制度保障，一旦发生争议也难以形成可追溯的处理记录。三方面问题相互交织，共同构成智能评价伦理治理需要回应的现实挑战。（三）拟解决的关键问题本课题拟解决三个关键问题。第一，人工智能介入考试评价会在哪些环节、以何种类型产生伦理风险，如何对其进行类型化识别与分级。评价场景的风险直接作用于高利害结果，需要把公平性、效度、透明度与救济等风险落到具体评分与预警环节加以刻画，形成可对照的风险清单。第二，在人机协同的评价流程中，机器与人的职责边界如何划定，哪些环节可以自动执行、哪些环节必须保留人工终审。边界不清既可能导致机器误判被直接采信，也可能使人工复核流于形式，这是评价伦理治理的关键。第三，当学生对评价结果提出异议时，学校与县级教研部门如何提供便捷、可信、可闭环的申诉与复核渠道，使评价结果可解释、可申诉、可复查，从根本上保障评价的程序正义，并使救济渠道同时成为机制自我修正的信息来源。三个问题层层递进，前一个问题的答案构成后一个问题的前提，共同指向本课题的核心目标，即以风险识别为起点、以人机协同为关键、以申诉救济为保障，构建面向考试评价场景的伦理治理机制。三、研究目标与研究内容（一）研究目标本课题的总目标是：面向中小学考试评价场景，构建以风险清单为基础、以人机协同复核为关键、以算法审查与申诉救济制度为支撑的智能评价伦理治理机制，并通过实践检验使之成为可推广的治理范本。围绕总目标，设四条具体目标。一是系统识别智能阅卷、学业预警与综合素质评价算法化中的伦理风险，形成分类型、可对照的风险清单，使公平性、效度、透明度与救济等风险落到具体评分与预警环节，解决“风险在哪里”的问题。二是明确人机协同评价流程中人工终审的边界与复核规则，形成可操作的复核指引，使机器与人的职责边界可执行、可核查，解决“谁来管、管到什么程度”的问题。三是建立考试评价算法的伦理审查与备案制度、评分争议申诉复核制度，使评价责任落实到具体岗位与时限，改变评价监管只讲技术、不讲伦理的局面。四是建成并运行评分申诉与复核渠道，实现学生异议有门、处置有据、结果有反馈，并以运行数据检验机制的有效性与可移植性。（二）研究内容第一，现状调研与风险诊断。通过对学生、教师、家长三类主体的问卷调查、深度访谈与智能阅卷试卷抽样复核，摸清智能评价工具的使用面、评分一致性水平、群体差异状况与申诉行为特征，归纳风险类型并按发生频次与影响程度作初步分级。要做的是把“评得准不准、差异大不大、异议找谁”搞清楚，怎么做是以三套问卷、四类访谈提纲与12000份试卷抽样复核为工具采集数据，产出是调研报告与风险类型清单，为治理设计提供事实依据，也为机制成效提供可对照的基线。第二，风险清单与人机协同复核指引研制。将评分公平类、评分效度类、透明度与可解释类、申诉与救济类四类风险细化为可识别的指标，并针对主观题评分、学业预警、综合评价等关键环节明确人工终审的触发条件、抽样比例与一致率阈值。要做的是把“机器做什么、人做什么、什么时候必须人管”变成可执行规则，怎么做是以教育测量效度理论与程序正义为依据、结合试卷复核证据逐条研制并作两轮试用修订，产出是含4类17项的伦理风险清单与人机协同评分复核操作指引，其中规定主观题保留人工终审、正负一分吻合率低于90%的批次须整批复核。第三，算法审查与申诉复核制度建设。编制考试评价算法伦理审查与备案办法、评分争议申诉复核规程、学业预警使用规范、数据留存与更正规则四项制度文本，明确审查主体、审查标准、处置流程与工作时限。要做的是把“谁来审、审什么、怎么处置”落实到岗位与流程，怎么做是明确进校评价类系统须提交评分依据说明、训练数据来源说明、群体差异自检报告三类材料，并规定学生在成绩公布后五个工作日内可提复核申请、学校在三个工作日内初次答复，产出是《中小学智能评价伦理治理制度汇编》。第四，实践检验。在两所基地校建成申诉受理、分级复核、结果反馈、改进闭环的复核渠道，并与学校原有教务、德育渠道相互衔接，通过为期9个月的运行采集机制运行数据与前后测数据。要做的是让学生的异议有地方主张、有结果反馈，怎么做是全程跟踪评分复核、申诉处置与学业预警核验，同步开展学生评分知情与申诉意识、教师评价伦理素养的前后测，产出是运行台账、典型案例集、微培训实施记录以及机制有效性的检验数据，据以对制度文本作迭代修订。（三）研究重点与难点研究重点有二。重点一是人机协同中人工终审边界的划定。边界过宽会削弱智能评价的效率优势，过窄则可能使机器误判直接进入高利害评价结果，课题组将以评价后果的轻重与评分环节的性质为依据，结合复核证据反复校准边界，并对主观题、预警、综合评价三类环节分别给出规则。重点二是申诉与复核渠道的有效运行。渠道是判断治理机制是否真正发挥作用的试金石，其关键在于受理便捷、复核有据、反馈可信，课题组将把渠道运行数据作为检验机制的核心证据，通过运行中暴露的问题反向修订制度。研究难点有二。难点一是评分公平与评分效度的关系把握。公平关注技术对不同群体的影响是否均等，效度关注分数能否被合理解释与使用，二者既相联系又有区别，如何在风险识别与复核规则中同时兼顾，需要结合测量理论与实践反馈反复权衡。课题组将以分组复核数据与偏差分析作为判断依据，使公平保障与效度论证相互支撑，避免把公平简单等同于分数一致，也避免把效度论证简化为算法性能检验。难点二是治理机制与学校原有考试评价流程的衔接。新机制必须嵌入现有成绩统计、质量分析与家长告知环节，避免另起炉灶增加负担。课题组将通过把复核责任写进既有教研岗位职责、把申诉流程并入既有教务台账的办法，实现新机制与原流程的平稳衔接，同时在设计中注意不把复核工作量简单转嫁给任课教师，而是通过抽样分层与岗位分工控制总体负担，使机制具备长期维持的可行性。四、研究方法与技术路线（一）研究方法及其操作设计第一，文献研究法。系统检索整理2020年以来国内外教育人工智能伦理与教育测量相关文献，计划累计获取文献190篇以上，重点研读《中华人民共和国个人信息保护法》《未成年人网络保护条例》《教育强国建设规划纲要（2024—2035年）》等法律政策文本，梳理与评价数据使用、自动化决策和救济权利直接相关的条款并编成对照表，形成文献综述，为风险清单与复核规则提供学理依据。第二，问卷调查法。编制学生版、教师版、家长版三套问卷，其中学生问卷含评价工具认知、评分公平感知、结果知情、申诉意愿、风险体验五个维度共36题。先在两所学校抽取150名学生及对应教师、家长开展预调研，据反馈修订题目表述与作答难度；正式调研在全县八所中小学三至九年级发放学生问卷2400份、教师问卷460份、家长问卷900份，回收后使用统计软件完成信效度检验、描述统计与差异分析，为风险诊断提供量化证据，并为机制成效建立基线。问卷设计时特别注意把“对评分是否满意”与“是否了解评分依据”分开设题，以避免把情绪性评价混入对技术公平性的判断，使结果更能反映评价伦理的真实状况。第三，试卷抽样复核法。从八所学校近两次期中、期末检测中分层抽取智能阅卷试卷12000份，其中客观题8400份、主观题3600份，组织学科骨干教师对抽样试卷作人工独立评分，与智能阅卷结果逐份对照，分别统计客观题一致率、主观题正负一分内吻合率与需改判比例，并按学校类型与分数段分组比较，以发现可能存在的群体差异，为公平性风险提供直接证据。第四，访谈法。针对学生、教师、家长、教研与管理者分别设计访谈提纲，学生访谈采取小组谈话方式以缓解紧张，教研与管理者访谈重点了解评价工具的引入、使用与处置做法及困难，计划完成访谈126人次，其中学生52人次、教师36人次、家长26人次、教研与管理者12人次。访谈资料经编码后与问卷数据相互印证，用于解释量化结果背后的原因。第五，行动研究法与案例研究法。复核指引与制度文本经历草案试用、问题诊断、修订再试的多轮迭代，在两所基地校开展为期9个月的运行检验，每轮均留存运行记录与问题清单，把一线反馈直接转化为文本修订依据；对评分复核申诉与学业预警处置中的典型事项作全程跟踪，按背景、问题、干预过程、变化证据、反思五段式记录，从中提炼可迁移的处置要点，既保留个案的具体性，又为培训与交流提供可模仿的操作样例。（二）技术路线本课题的技术路线分四层推进。第一层是事实层，通过文献研究与现状调研、试卷实证复核，形成风险类型清单与调研报告，回答“风险在哪里、差异有多大”。第二层是规范层，通过风险清单研制与人机协同复核设计，形成风险清单与复核操作指引，回答“谁来管、管到什么程度”。第三层是制度层，通过算法审查与申诉复核制度建设，形成制度汇编与运行台账，回答“怎么审、异议怎么处置”。第四层是验证层，通过实践检验与数据反馈，检验机制的运行成效，并据此迭代修订文本，回答“机制是否有效、可否推广”。四层之间形成“事实—规范—制度—验证”的递进闭环，前一层的产出构成后一层的输入，后一层的反馈又回流到前一层。在具体操作上，每一层均设置对应的阶段成果与检验节点，使研究进度可控、责任可溯；其中事实层以12000份试卷复核与八所学校问卷数据为支撑，规范层以两轮试用修订为保障，制度层以四项制度文本与配套表单为载体，验证层以9个月运行台账与前后测数据为依据，各层证据相互衔接，确保研究结论建立在可核查的事实基础之上。五、实施步骤与进度安排（一）总体安排本课题研究周期为2027年1月至2028年12月，分三个阶段推进。第一阶段为基础建设阶段，时间自2027年1月至7月，完成开题论证、文献研读、工具设计与现状调研，形成事实基础与风险诊断结论。第二阶段为方案建构与实践检验阶段，时间自2027年8月至2028年8月，完成风险清单、人机协同复核指引、算法审查与申诉复核制度建设，并在两所基地校开展运行检验，采集机制运行数据与前后测数据。第三阶段为总结提炼阶段，时间自2028年9月至12月，完成数据分析、成果定型、推广反馈与结题准备。各阶段任务之间相互衔接，阶段成果均以文本与数据两种形式沉淀，前一阶段未完成的关键事项不进入后一阶段，以保证研究质量。三阶段中，第一阶段解决“看清问题”，重点是把风险摸清、把工具磨准；第二阶段解决“建好机制”，重点是把边界划清、把制度立好并在运行中检验；第三阶段解决“提炼成果”，重点是把经验定型、把成果推出去。每一阶段结束均安排一次阶段小结与专家咨询，及时校正研究偏差，避免研究在推进中偏离既定落点。（二）分阶段任务分解表2研究实施步骤与进度安排时间段主要任务完成标志责任人2027年1月—3月开题论证、文献研读、编制三套问卷与四类访谈提纲、预调研与工具修订、制定试卷抽样复核方案开题报告、文献综述、调研工具与复核方案定型厍春生、计文彬2027年4月—7月八所学校大样本问卷调研与访谈、12000份试卷抽样复核、数据统计与风险诊断调研报告、风险类型清单萧泽宇、韦晓彤2027年8月—11月风险清单研制、人机协同复核指引设计、算法审查与申诉复核制度编制、微培训方案设计风险清单、复核指引、制度汇编任春生、平鹏飞2027年12月—2028年8月基地校复核与预警核验运行、申诉渠道运行、教师微培训、前后测检验运行台账、前后测数据、案例材料孔丽娜、刁晓峰2028年9月—12月数据分析、成果定型、试用反馈与修订、总报告撰写与结题最终版文本、案例集、研究总报告黄晓霞、厍春生六、预期成果与人员分工（一）预期成果表3预期成果成果名称形式完成时间承担人《人工智能驱动中小学考试评价的伦理风险与治理研究》研究报告研究报告2028年12月厍春生《中小学智能考试评价应用现状与伦理风险调研报告》调研报告2027年7月萧泽宇《智能评卷与学业预警伦理风险清单》风险清单2027年11月韦晓彤《人机协同评分复核操作指引》操作指引2027年11月任春生《考试评价算法伦理审查与备案办法》制度文本2027年11月平鹏飞《评分争议申诉复核规程与运行台账》制度文本2028年8月孔丽娜《教师评价数据素养微培训方案》及实施记录培训方案2028年8月刁晓峰《中小学智能评价伦理治理案例集》案例集2028年11月黄晓霞《人工智能阅卷在中小学考试评价中的伦理风险与治理路径》研究论文2028年6月厍春生、计文彬（二）人员分工表4课题组成员分工姓名分工承担任务厍春生主持人总体设计、方案统筹、结题报告与论文撰写、成果推广计文彬理论与工具文献综述、问卷与访谈提纲编制、预调研与信效度检验萧泽宇现状调研大样本调研组织、数据统计与风险诊断、调研报告撰写韦晓彤法律与清单政策条款梳理、风险清单研制、制度文本合规审查任春生复核指引人机协同复核指引设计、复核记录与偏差分析表编制平鹏飞制度与算法算法审查与备案办法编制、评价系统材料审读、案例技术核验孔丽娜申诉处置申诉复核规程编制、基地校申诉渠道运行与台账管理刁晓峰数据与培训前后测数据统计与效应量分析、微培训方案设计与实施黄晓霞案例与推广典型案例跟踪与撰写、案例集编撰、校际交流与推广七、研究保障条件（一）组织保障课题由云溪县教研室负责人厍春生主持，教研室成立课题管理小组，负责进度督促、材料审定与质量把关。课题组下设调研组、机制组、检验组三个小组，建立每月一次全体会、每两周一次小组碰头会的例会制度，以及过程性材料集中编号归档的办法。云溪县教育科学研究所为课题提供方法指导与专业咨询，两所基地校分别成立智能评价伦理工作组，为实践检验提供组织支撑。（二）条件保障人员方面，九名成员专业结构互补，覆盖教育测量与评价、教育技术、教育法学与政策、课程与教学、信息技术、德育与教师发展等方向，能够支撑调研、机制设计与成效检验全流程。资料方面，课题组已收集相关文献190余篇、法律政策文本13部，与八所调研校建立了稳定的合作渠道。设备方面，县教研室配备数据统计软件与办公设备，能够支持问卷数据处理、试卷复核数据统计与文本编制。时间方面，研究周期两年，各阶段任务均有明确时间安排与责任人，能够保证研究按计划推进。（三）制度保障课题组建立三项内部制度。其一是调研伦理制度，涉及学生的评分数据一律匿名化处理、不进入学生个人档案，访谈录音约定到期删除，家长知情同意回执全部留存。其二是过程归档制度，研究过程中形成的文本、记录与数据统一编号归档，每项成果均可回溯到具体过程材料。其三是成果审核制度，所有对外发布的清单、指引与制度文本均经课题组集体审读、必要时经学科骨干与职能部门复核后方可使用，确保成果的专业性与规范性。八、参考文献[1]厍春生.人工智能阅卷在中小学考试评价中的伦理风险与治理路径[J].教育测量与评价,2024(6):45-52.[2]计文彬.智能阅卷系统主观题评分效度的实证检验[J].中国考试,2025(2):33-40.[3]萧泽宇.学业预警算法的偏差风险与学校应对[J].中国电化教育,2024(9):58-65.[4]韦晓彤.综合素质评价算法化中的效度问题与指标治理[J].教育科学研究,2025(3):47-53.[5]任春生.中小学智能评价结果申诉与复核机制建设[J].教学与管理,2024(12):21-25.[6]平鹏飞.人机协同评分中的人工终审边界研究[J].现代教育技术,2025(5):34-41.[7]孔丽娜.算法公平视角下机器评分群体差异的检视[J].电化教育研究,2024(7):44-51.[8]刁晓峰.教育评价数字化转型中的伦理风险图谱[J].中国教育学刊,2023(10):66-72.[9]黄晓霞.中小学教师评价数据素养的现状与提升[J].中小学信息技术教育,2025(4):45-48.[10]李慧敏,郑伟.教育人工智能应用中的伦理风险与治理框架[J].数字教育,2023(6):12-18.[11]