测评的结果和质量分析

1、w 可靠性分析可靠性分析信度的含义、分类、估算信度的含义、分类、估算影响信度的因素影响信度的因素w 有效性分析有效性分析效度的含义、分类、估算效度的含义、分类、估算影响效度的因素影响效度的因素w 质量分析质量分析适合度、区分度适合度、区分度项目的独立性项目的独立性w 结果的转化结果的转化标准分数、常模标准分数、常模w 误差是指在测量中与目的无关的因素所产误差是指在测量中与目的无关的因素所产生的不准确或不一致的结果。生的不准确或不一致的结果。w 误差的种类误差的种类随机误差、系统误差随机误差、系统误差w 误差的原因误差的原因测验自身、施测过程、被试测验自身、施测过程、被试w 1.1 1.1 信度

2、的含义信度的含义：信度指测评与选拔结果的信度指测评与选拔结果的准确性准确性或或一致性一致性程度。程度。w 1.2 1.2 信度的分类信度的分类：再测信度再测信度复本信度复本信度内在一致性信度内在一致性信度w 含义：含义：指同一测验在间隔一段时间先后两次测试同指同一测验在间隔一段时间先后两次测试同一组被试所得两次分数的一致性程度。一组被试所得两次分数的一致性程度。w 估算方法：估算方法：稳定系数稳定系数w 含义含义同一测验的不同版本（副本）对同一组被同一测验的不同版本（副本）对同一组被试测验结果的一致性程度。试测验结果的一致性程度。w 估算方法：估算方法：等值系数等值系数w 含义含义指所测素质相

3、同的各测评项目分数间的一致性。指所测素质相同的各测评项目分数间的一致性。w 估算方法：估算方法：内在一致性系数内在一致性系数w项目折半分析项目折半分析wa a 系数系数w 含义含义多个测评者对同一组被测样组进行评分的一致性多个测评者对同一组被测样组进行评分的一致性程度。程度。w 估算方法：估算方法：肯德尔和谐系数肯德尔和谐系数w 1.3 1.3 影响信度的因素影响信度的因素：测评者测评者被测者被测者测评工具测评工具测评环境测评环境w 2.1 2.1 效度的效度的含义含义效度是测验有效测量测量目标的程度。效度是测验有效测量测量目标的程度。w 2.2 2.2 效度的分类效度的分类内容效度内容效度结

4、构效度结构效度关联效度关联效度w 指测题选择的恰当性，也就是测验题目对指测题选择的恰当性，也就是测验题目对整个测量内容的代表性。整个测量内容的代表性。w 内容效度高指测题对整个测量内容的覆盖内容效度高指测题对整个测量内容的覆盖面广，测题是测量内容中的重点、要点和面广，测题是测量内容中的重点、要点和主要的实质性内容。主要的实质性内容。w 内容效度一般由专家通过资料研究和逻辑内容效度一般由专家通过资料研究和逻辑分析而作出判断分析而作出判断。w 指测验结果与理论构想的一致性。指测验结果与理论构想的一致性。w 测验内的方法：通过研究测验内部结构来测验内的方法：通过研究测验内部结构来评估测验的结构效度，

5、如搜集内容效度资评估测验的结构效度，如搜集内容效度资料、统治信度资料、项目相关资料等。料、统治信度资料、项目相关资料等。w 测验间的方法：通过与其它测验的比较来测验间的方法：通过与其它测验的比较来评估新测验的结构效度评估新测验的结构效度。w 含义：效标资料与测验结果的一致性。含义：效标资料与测验结果的一致性。w 根据效标与测验分数是否可以同时获得，根据效标与测验分数是否可以同时获得，分为同时效度和预测效度。分为同时效度和预测效度。w 同时效度：效标资料与测验分数同时获得，同时效度：效标资料与测验分数同时获得，预测后马上可以估计效度。预测后马上可以估计效度。w 预测效度：效标资料要在测验以后较长

6、一预测效度：效标资料要在测验以后较长一段时间后才能获得。段时间后才能获得。w 2.3 2.3 影响效度的因素影响效度的因素：测评者测评者被测者被测者测评工具测评工具效标因素效标因素信度因素信度因素w 3.1 3.1 项目的适合度项目的适合度指测验项目的难易程度指测验项目的难易程度w 3.2 3.2 项目的区分度项目的区分度反映测评工具区分应试人心理特征差异性的反映测评工具区分应试人心理特征差异性的指标。指标。w 3.3 3.3 项目的独立性项目的独立性指测验项目之间不相关或者低度相关。指测验项目之间不相关或者低度相关。w 影响项目适合度的因素影响项目适合度的因素内容本身的难易程度内容本身的难易

7、程度测验的编制技术测验的编制技术被试的知识经验有关被试的知识经验有关测验的适合度具有相对性测验的适合度具有相对性。正因为如此，必。正因为如此，必须进行试测。须进行试测。（1 1） 是非题、选择题，用通过率来表示适合度是非题、选择题，用通过率来表示适合度w P=R/NP=R/NR R 试题答对或通过该项目的人数试题答对或通过该项目的人数N N 全体考生人数全体考生人数（2 2）多项选择）多项选择w CP=(KP-1)/(K-1)CP=(KP-1)/(K-1)CP CP 校正后的试题适合度校正后的试题适合度P P 校正前的试题适合度校正前的试题适合度K K 选择项的数量选择项的数量校正后的适合度值

8、要低于校正前的适合度值。校正后的适合度值要低于校正前的适合度值。一般认为适合度在一般认为适合度在0.30.70.30.7比较合适，整份比较合适，整份试卷的适合度指最好把握在试卷的适合度指最好把握在0.50.5左右。左右。（3 3）论述题）论述题w P=X/XP=X/XmaxmaxX X 全体被试在某一项目上的平均分全体被试在某一项目上的平均分X Xmaxmax 该项目的满分该项目的满分w 难度的大小是否合适还取决于测试目的；难度的大小是否合适还取决于测试目的；w 同时，与测试分数的分布有关。同时，与测试分数的分布有关。分数分数分数分数人次人次人次人次w P=(PP=(PH H+P+PL L)/

9、2)/2P PH H 高分组的通过率高分组的通过率P PL L 低分组的通过率低分组的通过率w D=D=P PH HP PL LD D 区分度指数区分度指数w区分度指数高，区分能力越强区分度指数高，区分能力越强PDw 区分度与难度的关系区分度与难度的关系w 指测验的编制、实施、计分和解释程序的一指测验的编制、实施、计分和解释程序的一致性。致性。w 测验计分和解释的标准化，只要有详细同意测验计分和解释的标准化，只要有详细同意的标准，并且测验分数只能与一个确定的参的标准，并且测验分数只能与一个确定的参照标准相比较。照标准相比较。w 参照标准有参照标准有标准参照标准参照、常模参照常模参照。w 名次名次w 百分位法：百分位法：P PR R=100-(100R-50)/N=100-(100R-50)/Nw Z Z分数：分数：Z=(X-X)/SZ=(X-X)/S . . S S为原始分数的标准差为原始分数的标准差w T T分数：分数：T=100Z+50T=100Z+50w 标准九分：标准九分：4% 7% 12% 17% 20% 4% 7% 12% 17% 20% w C C量表分数：量表分数：1% 3% 7% 12% 17% 20% 1% 3% 7% 12% 17% 20% w 斯坦分数：斯坦分数：% % % % % 1% 1%