如何做考试质量分析.ppt

一 为什么要做试卷质量分析 一 测验质量有助于测验科学化的实现1 有助于编制测验的技能 技巧的提高 2 能为进一步修改试题提供依据 3 有助于提高测验的信度 效度 4 有助于题库的建立 二 测验质量分析有助于提高教学质量1 有助于教学的改进 2 有助于测验结果的合理解释 1 二 试卷质量分析分析什么 一 考试信度 二 考试效度 三 考试难度 四 考试区分度 五 考试分数分布图 2 一 信度 1 含义 信度是指测量结果的稳定性或可靠性的程度 一般是指实测值和真值相差的程度 3 2 信度系数以多大为宜 信度系数究竟以多大为宜 没有明确的标准 要看测验的目的和类型 对于学科测验 信度系数要求达到0 9以上智力测验要求达到0 8以上品德测验能达到0 6以上一般的教师自编测验的信度要低 4 3 提高测验信度的方法 1 适当增加测验题目的数量 2 测验的难度要适中 3 测验的内容应尽量同质 4 评分要尽量做到客观化 减少评分误差 5 二 效度的概念 1 效度的含义测量结果的准确性和有效性的程度 测量是否达到了预期的目的 对任何一种测量来说 效度都比信度更为重要 6 7 2 效度系数以多大为宜 内容效度越大越好 越大说明考试内容和大纲相符合程度高 内容效度通过逻辑分析等方法得到 8 3 提高测量效度的方法 1 精心编制量表首先 测验内容要确实能反映测验目的 其次 题目表述必须清楚 简明 再次 题目难度合适 有足够的区分度 最后 试卷印制清楚 无错误和遗漏 并力求精美 2 评分时务必遵循评分标准 仔细登记 避免错误 3 适当增加测验的长度 9 三 难度的概念 1 含义在教育测量中 难度一般用正确回答试题人数与参加测验总人数之比值作为指标 即通过率 10 2 测验的适宜难度 难度值的取值范围为 0 1 在常模参照性测验中要求试题难度适中 即大多数题目的难度在0 3 0 7之间整个试卷的平均难度为0 5左右 0 45 0 55之间 11 3 控制题目难度的基本方法 1 考查知识点的多少 2 考查能力的复杂程度或层次的高低 3 命题的技巧性 12 四 区分度 1 含义 区分度是指测验对被试实际水平的区分程度 13 2 区分度的评价标准 区分度评价0 40以上非常良好0 30 0 39良好 如能改进更好0 20 0 29尚可 用时需做改进0 19以下差 必须淘汰或改进以提高区分度后方可使用 14 3 提高区分度的方法 1 使题目的难度适中 使整个考试难度适中 2 着重考察复杂的学习结果 15 五 考试分数分布图 16 1 考试分数分布的决定因素 1 不同功能的测验形态不同选拔性测验期望学生的测验分数呈现正态分布合格水平测验希望学生成绩的分布呈现负偏态分布 17 2 学生整体水平不同形态不同 整体水平比较接近 根据测验难度呈偏态分布 测验难度一定时 如整体水平较高 则测验成绩的分布多呈负偏态分布 整体水平较低 则多呈正偏态分布 18 3 教师和学生的积极能动性 师生双方都积极努力测验成绩可能会出现负偏态如果教师只关注优秀生 忽视中等生或学生缺乏努力 那么学生成绩可能会出现严重离散的正态分布 甚至会出现正偏态分布 19 4 学生群体规模的大小 群体内学生人数足够多 且具有一定的异质性和随机性 那么他们的测验成绩可能会出现正态分布 群体规模较小 那么会因为学生人数少而使测验成绩可能出现偏态分布 而非正态分布 20 5 学生的学习时间和学习效率 如果给予学生充足的学习时间 提高全体学生的学习效率 能使测验成绩呈负偏态分布 学生学习时间紧张 中下等学生的学习效率不高 那么测验成绩则可能形成正态或正偏态分布 21 2 如何利用参数进行考试分数控制 1 原始分数的平均分数的控制平均分数应该控制在73 80之间考前命题 应参考上次考试成绩的平均分数 适当作出调整 22 2 标准差的控制 标准差又称离散率 它反映了被考群体中高分与低分之间的差距 标准差应该控制在8 15之间 如果高出这个范围 说明试卷中的难题太难了 大部分被考无法作答低于这个范围 说明考题太容易了 试卷的分数无法拉开距离 同样在考前命题时 应参考上次考试成绩的标准差 适当作出调整 23 三 考试质量怎么分析 一 试卷质量的定性分析1 分析测验目的的适宜性2 核检双向细目表3 评价试题编制质量4 检查试题编排 试卷印刷和测验实施的质量 24 二 试卷质量的定量分析 1 对测验质量进行项目分析分析测验项目的难度 区分度以及对多重选择题各选择项质量的分析等 并提出相应的改进策略 25 2 对整个试卷质量作综合分析 分析测验平均分数 标准差 分数分布曲线 效度 信度系数等 其中最重要的是对效度 信度的分析并提出相应的改进策略 26 教育系本科考试质量分析报告 学年第1学期教学单位 教育系任课教师 开课教研室 教育学教研室一 考试基本信息课程名称 教育测量与评价课程代码 1402108课程性质 专业必修课考试班级 07级教育学专业总学时 56学时学分 2学分考试日期 2008年1月16日考试人数 40人卷面总分 100分考试类型方式 闭卷 27 二 考试成绩分析 一 基本数据统计 标准差 9 6 28 二 成绩分布情况分析 学生人数 及格人数 优秀人数 不及格人数 最高分 最低分 平均分 标准差 从成绩分布图分析 主要原因 29 三 项目分析 一 项目基本情况 30 二 项目质量分析 1 单项选择题 满分 平均分 最高分 最低分 难度 区分度较低 原因 31 四 试卷的质量分析 一 试卷