4-上海中小学生学业质量绿色指标综合评价-纪明泽.ppt

1、上海市中小学生学业 质量绿色指标综合评价,上海市教育委员会教学研究室 上海市教委基础教育质量监测中心 2016.8.23,绿色指标综合评价操作流程,程序要点,指标内容,工具研发,报告撰写,阅卷评分,结果应用,考务工作,指标依据,数据处理,上海基础教育的转型发展 教育价值取向：过度追求现实功利 教育对人的发展 教育质量评价：注重学科知识成绩全面发展的评价 学生培养模式：统一的标准化模式 需求为导向的培养 教师专业成长：学科知识教学技能教育境界专业能力 教育管理方式：单纯依靠行政手段思想领导专业引领,指标依据,指标依据,1、上海基础教育亟待解决的问题 上海15岁学生参加PISA2009、2012测

2、试，在阅读、数学、科学三个方面均取得了第一名的成绩。2009上海学生每周课内外上课时间的总量（34.8小时）位居参与国（地区）第12位。2012上海学生每周作业时间11.8小时。,2、学业质量的上海理解 学业水平：考试的结果、达标的程度； 学业质量：学业水平+结果的品质； 水平结果+取得水平结果的路径、代价； 学业质量概念的构成性、关联性与发展性。,指标依据,3、国际大规模评价的关注点 如PISA、TIMSS和NAEP等都采用背景问卷的方式来了解影响学生学业成就的因素。这些因素一般分为学习者、课程教学、学校及教育制度四个维度。学习者层面主要包括性别、家庭社会经济背景、自我认知、学习动机以及教育

3、期望等；课程教学层面包括教学策略、课堂气氛、教师支持等。,指标依据,4、历年学业质量调查的实证数据基础 自2006起，积累了“建立中小学生学业质量分析、反馈与指导系统”项目的大量数据，从中提炼出与学业水平密切相关的因素，如睡眠时间、作业时间、师生关系、教师教学方式等。,指标依据,质量观：高水平+低成本+可持续 基于（促进）问题解决的归纳的思维方式； 问题的重要性、紧迫性、可能性； 问题的对立面-指标,绿色指标的形成：,绿色指标：以学生健康快乐成长为核心,综合评价改革绿色指标,测试工具的种类：学业测试+调查问卷+身心健康测试。 测试工具的框架：学业测试+调查问卷。 测试工具的开发：学业测试+调查

4、问卷。 测试工具的分析：信度+效度。 学业测试成绩的解释：合格、良好、优秀的标准。 测试结果的分析与解释：学业表现+问卷信息； 相关分析+绿色指标。,工具研发,1. 测试工具的种类,综合评价测试工具种类,工具研发进度：以2014为例,测试框架的结构,一、测试说明（测试的定位） 二、测试的内容或能力框架（测试内容或能力的内涵界定） 三、比例结构（内容、题量、题型等的比例） 四、试卷双向细目表（内容维度、能力维度、具体描述、试题难度） 五、测试样例及评分规则 六、表现水平描述,命题组卷 基于课程标准 试题注重考查学生对学科核心知识、技能的理解和掌握，重视学生综合运用所学知识解决实际问题的能力、收集

5、与分析信息的能力以及对重要学科思想方法的理解与掌握。 严格控制试卷的总体难度。 组卷以体现课程标准对学生基本要求的题目为主，有难度的题目主要考查学生的高层次认知能力。 试题形式为客观性试题和主观性试题相结合。 试题多使用真实的情境和任务，注重通过客观性试题考察学生高层次认知能力。,工具研发,试题审议 学科试卷审议标准： 试题是否存在科学性错误 题干与选项的阐述是否清晰或有歧义 选项设置是否合理 试题属性标定是否正确 考查能力要求与上海课程标准的一致性 试题难度估计 评分标准是否合理 背景问卷审议标准： 试题内容是否指向测量的指标 试题的阐述是否清晰或有歧义 选项设置是否合理 试题是否必要,工具

6、研发,学生问卷：学生基本情况；学习自信心；学习动机；学习压力；学生对学校的认同度；学业负担（睡眠时间、做作业时间、补课时间）；师生关系；对教师教学方式的评价；品德行为（理想信念、公民素质和健全人格） 教师问卷：教师基本情况；教师对课程的看法；对学校管理的看法；面临的困难；教学观和教师专业发展；教师教学方式（因材施教、互动教学和探究与发展能力） 校长问卷：学校基本情况；校长办学理念和教育观；校长的学校管理方法；课程领导力（课程决策与计划、课程组织与实施、课程管理与评价）。,工具研发测试框架,测试工具的框架调查问卷,2014年度“绿色指标”测试材料的梳理 样本学校考场信息的编排 样本学校校测试材料

7、清单编排 测试材料袋封面的信息的编排 学生准考证的编排 样本学校学生名单的编排,考务工作,阅卷工作,1、制定主观题评分标准，形成评分手册 2、组织阅卷教师，并对阅卷教师进行评分标准的培训 3、商讨题组分工，并确定阅卷评分模式，即是单评还是三评，以及评分误差的阈值。,数据处理,指向评价指标结果,有何原始数据,指向评价指标过程,评价系统框架设计,各个指标的指数,学业水平指数,学业负担指数,师生关系指数,影响评价指标结果的因素,评价工具质量,有哪些因素起作用？每个因素的作用大小？ 某个因素是如何起作用的？作用的路径与机制是什么？,数据处理技术,（1）学科分数估计 （2）等值设计处理 （3）学业水平标

8、准设定 （4）指数等级运算 （5）效度计算 （6）多水平模型 （7）多元线性回归、中介效应、调节效应分析,数据处理的背后： 做什么？-研究的问题 怎么做？-具体的统计分析方法,报告撰写,报告类型,基础数据报告 （主要是详细呈现各个指标的统计数据） 结果解读报告 （分学科呈现主要调查结果、分析原因、提出教学改进建议） 政策分析报告 （就行政关注点呈现主要数据，并做出判断。通常是将结论作为小标题）,报告撰写,报告层次,市级报告 （可以提供三种类型的报告） 区县报告 （基础数据报告） 学校报告 （基础数据报告）,市级报告人工撰写、区县、学校报告根据市级报告框架，通过计算机程序自动生成。,绿色指标的不

9、懈追求,“绿色指标”评价：全面了解教育教学状况的手段、发现和诊断教学问题的方法、改进教学行为的依据； 形成“检测依靠技术、结论源自证据、分析产生行动”的实践状态；建立基于证据驱动的“标准检测分析改进”循环。 追求：正确引导、合理分析、科学改进，“让数据说话，让数据驱动”，让教学管理、教学指导、教学行为架构到科学的评价信息上来。,绿色指标评价改革是个系统： 一、不仅仅是技术工作，是进一步推动改革、牵一发而动全身的重要机遇；区县、学校、教师，转变观念、读懂报告、深度分析、剖析问题、形成共识、基于项目、改进完善； 二、是指挥棒的改革，对教育质量的评价要集中到绿色指标上来；学校教育教学改进的机制要架构

10、到报告结果上来； 三、绿色指标的实践推进，应保持原有工作的连续性，使得绿色指标在区域、学校的实践更有价值。,黄浦区区域推进落实绿色指标行动要求（摘录）,绿色指标的区校实践,学业质量评价基本模型,闵行区义务教育教学质量综合评价机制,区县和学校在分析区情、校情的基础上，对指标、过程和技术进行再创造、再丰富和再完善，有针对性地选择相关指标展开实践、研究，探索区本、校本的质量评价体系。,绿色指标的区县实践,金山区：学科基础素养综合评估 长宁区：“三个指数” 闸北区：初中教学质量综向发展性评价 杨浦区：中小学生学业中创新素养发展性评价 松江区：高层次思维评价研究 虹口区：学生学习动力指数 ,第一，引导学

11、校追求“高水平+低成本+可持续”的质量观 第二，在实践中高度关注：“目标-过程-评价”、“标准-教学-评价”的一致性；“为了评价的教学”-“为了教学的评价”的转型。突出评价对于教育教学的体检诊断、促进发展的功能；切实减轻学生的负担，给予学校更多的是对教学改革的支持。 第三，展开立足实证、基于证据的校本化改进。在改进中优化各项工作的过程、提升各种活动的品质；在实实在在的进步中，办学生喜欢的学校，让社会、家长、学生、教师得到实实在在的获得感，增强各界对学校教育的满意度、认同感。 第四，在实践中完善绿色指标本身，包括它的内容、结构、精度、技术； 在实践中，纠缠于绿色指标“体系”的严谨、完整，远不如在

12、实践中完善、改进来的重要。,绿色指标的学校实践价值,绿色指标的实践价值：如何实现？ 第一，分析10个指标的结构、相互的关系 过程性指标、结果性指标、影响性因素指标； 表现性指标、影响性指标、时间性指标； 教育教学状态、学生感受、教育结果、发展变化；,绿色指标的实践价值：如何实现？ 第二，展开理性的报告解读、深度的数据发掘。如横向、 纵向的比较；不同学科、不同时间、不同侧面的分析；静 教附校可提供很好的范例。,优秀水平学生所占的人数比例-男生与女生,3年级,8年级,8年级,3年级,奉贤区教师进修学院附属小学,压力调查,学生,访谈,问卷,课业,自己,老师,考试,伙伴,父母,亲戚朋友,压力,奉教院附

13、小减轻学生过重压力九大举措,1、把好基准教案，实行基准教学 2、每月进行作业情况调研，严格控制作业量和难度 3、研究基准命题，实现基准评价 4、不公开学生学业成绩、不公开班级学业排名 5、完善丰富符合学生需求、适合学生发展的课程 6、完善绿色档案袋，实行等第制、过程性评价 7、每天做心理减压操，每周上心理辅导课 8、创新学校教师评价机制，促进教师多元发展 9、建立家长咨询制度，教育家长、协同家长关注学生的心理健康,绿色指标的实践价值：如何实现？ 第三，保持原有工作的连续性，使绿色指标的改进实践融 入学校的整体工作中。 学校快乐活动日中的过程性评价； 学校课程实施中的真实性评价； 学科教学中基于

14、标准的评价；,39,基础 让所有的学生有必备的学科素养,课程：让每一个学生有机会发现、发挥 自己的兴趣、个性、专长、潜能,多层次 让学生有多水平的课程定位,多方向 让学生有多维度的课程选择,绿色指标的实践价值：如何实现？ 第四，紧紧抓住事物发展链条的“中间要素”。如教学理 念-策略-方式-方法-手段，中间要素是教学方式；如学习 领域-模块-主题-单元-章节-课时，中间要素是单元。,绿色指标区本化校本化改进实践,运用绿色指标综合评价的思想、方法、程序，影响并改进区校的日常考试、测验，学科测试+背景问卷； 探索、构建以校为本质量保障体系；项目推进与队伍建设相结合； 教育教学改进实践： 从经验-经验+证据； 从理论验证-问题导向； 从校长的权威领导-改进共同体的建设； 从单方面的改进研究-学校整体的改进实践； 对改进实践的过程、效果，建立自我评估的机制；,改变社会教育学校学校人学校人的思维行为方式 绿色指标的方向引领+区县学校的实践创新相结合 让绿色指标引领，用绿色指标引领，以绿色指标引领,为了健康快乐的成长！ 为了适应未来社会的综合素养！,39,NO1： 综合素质评价