上海中小学生学业质量绿色指标综合评价-纪明泽

上海市中小学生学业质量绿色指标综合评价,上海市教育委员会教学研究室上海市教委基础教育质量监测中心2016.8.23,绿色指标综合评价操作流程,程序要点,指标内容,工具研发,报告撰写,阅卷评分,结果应用,考务工作,指标依据,数据处理,上海基础教育的转型发展教育价值取向：过度追求现实功利教育对人的发展教育质量评价：注重学科知识成绩全面发展的评价学生培养模式：统一的标准化模式需求为导向的培养教师专业成长：学科知识教学技能教育境界专业能力教育管理方式：单纯依靠行政手段思想领导专业引领,指标依据,指标依据,1、上海基础教育亟待解决的问题上海15岁学生参加PISA2009、2012测试，在阅读、数学、科学三个方面均取得了第一名的成绩。2009上海学生每周课内外上课时间的总量（34.8小时）位居参与国（地区）第12位。2012上海学生每周作业时间11.8小时。,2、学业质量的上海理解学业水平：考试的结果、达标的程度；学业质量：学业水平+结果的品质；水平结果+取得水平结果的路径、代价；学业质量概念的构成性、关联性与发展性。,指标依据,3、国际大规模评价的关注点如PISA、TIMSS和NAEP等都采用背景问卷的方式来了解影响学生学业成就的因素。这些因素一般分为学习者、课程教学、学校及教育制度四个维度。学习者层面主要包括性别、家庭社会经济背景、自我认知、学习动机以及教育期望等；课程教学层面包括教学策略、课堂气氛、教师支持等。,指标依据,4、历年学业质量调查的实证数据基础自2006起，积累了“建立中小学生学业质量分析、反馈与指导系统”项目的大量数据，从中提炼出与学业水平密切相关的因素，如睡眠时间、作业时间、师生关系、教师教学方式等。,指标依据,质量观：高水平+低成本+可持续基于（促进）问题解决的归纳的思维方式；问题的重要性、紧迫性、可能性；问题的对立面-指标,绿色指标的形成：,绿色指标：以学生健康快乐成长为核心,综合评价改革绿色指标,测试工具的种类：学业测试+调查问卷+身心健康测试。测试工具的框架：学业测试+调查问卷。测试工具的开发：学业测试+调查问卷。测试工具的分析：信度+效度。学业测试成绩的解释：合格、良好、优秀的标准。测试结果的分析与解释：学业表现+问卷信息；相关分析+绿色指标。,工具研发,1.测试工具的种类,综合评价测试工具种类,工具研发进度：以2014为例,测试框架的结构,一、测试说明（测试的定位）二、测试的内容或能力框架（测试内容或能力的内涵界定）三、比例结构（内容、题量、题型等的比例）四、试卷双向细目表（内容维度、能力维度、具体描述、试题难度）五、测试样例及评分规则六、表现水平描述,命题组卷基于课程标准试题注重考查学生对学科核心知识、技能的理解和掌握，重视学生综合运用所学知识解决实际问题的能力、收集与分析信息的能力以及对重要学科思想方法的理解与掌握。严格控制试卷的总体难度。组卷以体现课程标准对学生基本要求的题目为主，有难度的题目主要考查学生的高层次认知能力。试题形式为客观性试题和主观性试题相结合。试题多使用真实的情境和任务，注重通过客观性试题考察学生高层次认知能力。,工具研发,试题审议学科试卷审议标准：试题是否存在科学性错误题干与选项的阐述是否清晰或有歧义选项设置是否合理试题属性标定是否正确考查能力要求与上海课程标准的一致性试题难度估计评分标准是否合理背景问卷审议标准：试题内容是否指向测量的指标试题的阐述是否清晰或有歧义选项设置是否合理试题是否必要,工具研发,学生问卷：学生基本情况；学习自信心；学习动机；学习压力；学生对学校的认同度；学业负担（睡眠时间、做作业时间、补课时间）；师生关系；对教师教学方式的评价；品德行为（理想信念、公民素质和健全人格）教师问卷：教师基本情况；教师对课程的看法；对学校管理的看法；面临的困难；教学观和教师专业发展；教师教学方式（因材施教、互动教学和探究与发展能力）校长问卷：学校基本情况；校长办学理念和教育观；校长的学校管理方法；课程领导力（课程决策与计划、课程组织与实施、课程管理与评价）。,工具研发测试框架,测试工具的框架调查问卷,2014年度“绿色指标”测试材料的梳理样本学校考场信息的编排样本学校校测试材料清单编排测试材料袋封面的信息的编排学生准考证的编排样本学校学生名单的编排,考务工作,阅卷工作,1、制定主观题评分标准，形成评分手册2、组织阅卷教师，并对阅卷教师进行评分标准的培训3、商讨题组分工，并确定阅卷评分模式，即是单评还是三评，以及评分误差的阈值。,数据处理,指向评价指标结果,有何原始数据,指向评价指标过程,评价系统框架设计,各个指标的指数,学业水平指数,学业负担指数,师生关系指数,影响评价指标结果的因素,评价工具质量,有哪些因素起作用？每个因素的作用大小？某个因素是如何起作用的？作用的路径与机制是什么？,数据处理技术,（1）学科分数估计（2）等值设计处理（3）学业水平标准设定（4）指数等级运算（5）效度计算（6）多水平模型（7）多元线性回归、中介效应、调节效应分析,数据处理的背后：做什么？-研究的问题怎么做？-具体的统计分析方法,报告撰写,报告类型,基础数据报告（主要是详细呈现各个指标的统计数据）结果解读报告（分学科呈现主要调查结果、分析原因、提出教学改进建议）政策分析报告（就行政关注点呈现主要数据，并做出判断。通常是将结论作为小标题）,报告撰写,报告层次,市级报告（可以提供三种类型的报告）区县报告（基础数据报告）学校报告（基础数据报告）,市级报告人工撰写、区县、学校报告根据市级报告框架，通过计算机程序自动生成。,绿色指标的不懈追求,“绿色指标”评价：全面了解教育教学状况的手段、发现和诊断教学问题的方法、改进教学行为的依据；形成“检测依靠技术、结论源自证据、分析产生行动”的实践状态；建立基于证据驱动的“标准检测分析改进”循环。追求：正确引导、合理分析、科学改进，“让数据说话，让数据驱动”，让教学管理、教学指导、教学行为架构到科学的评价信息上来。,绿色指标评价改革是个系统：一、不仅仅是技术工作，是进一步推动改革、牵一发而动全身的重要机遇；区县、学校、教师，转变观念、读懂报告、深度分析、剖析问题、形成共识、基于项目、改进完善；二、是指挥棒的改革，对教育质量的评价要集中到绿色指标上来；学校教育教学改进的机制要架构到报告结果上来；三、绿色指标的实践推进，应保持原有工作的连续性，使得绿色指标在区域、学校的实践更有价值。,黄浦区区域推进落实绿色指标行动要求（摘录）,绿色指标的区校实践,学业质量评价基本模型,闵行区义务教育教学质量综合评价机制,区县和学校在分析区情、校情的基础上，对指标、过程和技术进行再创造、再丰富和再完善，有针对性地选择相关指标展开实践、研究，探索区本、校本的质量评价体系。,绿色指标的区县实践,金山区：学科基础素养综合评估长宁区：“三个指数”闸北区：初中教学质量综向发展性评价杨浦区：中小学生学业中创新素养发展性评价松江区：高层次思维评价研究虹口区：学生学习动力指数,第一，引导学校追求“高水平+低成本+可持续”的质量观第二，在实践中高度关注：“目标-过程-评价”、“标准-教学-评价”的一致性；“为了评价的教学”-“为了教学的评价”的转型。突出评价对于教育教学的体检诊断、促进发展的功能；切实减轻学生的负担，给予学校更多的是对教学改革的支持。第三，展开立足实证、基于证据的校本化改进。在改进中优化各项工作的过程、提升各种活动的品质；在实实在在的进步中，办学生喜欢的学校，让社会、家长、学生、教师得到实实在在的获得感，增强各界对学校教育的满意度、认同感。第四，在实践中完善绿色指标本身，包括它的内容、结构、精度、技术；在实践中，纠缠于绿色指标“体系”的严谨、完整，远不如在实践中完善、改进来的重要。,绿色指标的学校实践价值,绿色指标的实践价值：如何实现？第一，分析10个指标的结构、相互的关系过程性指标、结果性指标、影响性因素指标；表现性指标、影响性指标、时间性指标；教育教学状态、学生感受、教育结果、发展变化；,绿色指标的实践价值：如何实现？第二，展开理性的报告解读、深度的数据发掘。如横向、纵向的比较；不同学科、不同时间、不同侧面的分析；静教附校可提供很好的范例。,优秀水平学生所占的人数比例-男生与女生,3年级,8年级,8年级,3年级,奉贤区教师进修学院附属小学,压力调查,学生,访谈,问卷,课业,自己,老师,考试,伙伴,父母,亲戚朋友,压力,奉教院附小减轻学生过重压力九大举措,1、把好基准教案，实行基准教学2、每月进行作业情况调研，严格控制作业量和难度3、研究基准命题，实现基准评价4、不公开学生学业成绩、不公开班级学业排名5、完善丰富符合学生需求、适合学生发展的课程6、完善绿色档案袋，实行等第制、过程性评价7、每天做心理减压操，每周上心理辅导课8、创新学校教师评价机制，促进教师多元发展9、建立家长咨询制度，教育家长、协同家长关注学生的心理健康,绿色指标的实践价值：如何实现？第三，保持原有工作的连续性，使绿色指标的改进实践融入学校的整体工作中。学校快乐活动日中的过程性评价；学校课程实施中的真实性评价；学科教学中基于标准的评价；,39,基础让所有的学生有必备的学科素养,课程：让每一个学生有机会发现、发挥自己的兴趣、个性、专长、潜能,多层次让学生有多水平的课程定位,多方向让学生有多维度的课程选择,绿色指标的实践价值：如何实现？第四，紧紧抓住事物发展链条的“中间要素”。如教学理念-策略-方式-方法-手段，中间要素是教学方式；如学习领域-模块-主题-单元-章节-课时，中间要素是单元。,绿色指标区本化校本化改进实践,运用绿色指标综合评价的思想、方法、程序，影响并改进区校的日常考试、测验，学科测试+背景问卷；探索、构建以校为本质量保障体系；项目推进与队伍建设相结合；教育教学改进实践：从经验-经验+证据；从理论验证-问题导向；从校长的权威领导-改进共同体的建设；从单方面的改进研究-学校整体的改进实践；对改进实践的过程、效果，建立自我评估的机制；,改变社会教育学校学校人学校人的思维行为方式绿色指标的方向引领+区县学校的实践创新相结合让绿色指标引领，用绿色指标引领，以绿色指标引领,为了健康快乐的成长！为了适应未来社会的综合素养！,39,NO1：