项目功能差异及其检测方法.doc

项目功能差异及其检测方法项目功能差异及其检测方法更新日期：2010-06-26 点击： 曾秀芹孟庆茂 摘要对项目功能差异的分析是保证测验公平性和有效性的重要环节，国外在这方面已作了大量研究并取得了许多成果。对项目功能差异的介绍和引进，将有助于我国考试，如高考的公平性。该文将简单介绍：与项目功能差异有关的概念及概念之间的联系，检验项目功能差异的方法以及影响方法检测效率的因素，以及国外DIF研究进展。 关健词 项目功能差异（DIF），项目偏差，匹配变量，参照组，目标组 分类号 59.805 人们进行教育和心理测量时，其目的是尽可能准确、公平地了解被试在成就、能力和人格等各种心理特质上的差异。为达到这个目的，信度和效度的分析成为关健。但是测量学家发现还有一个问题困扰着我们，那就是测验偏差。这一现象指测验中的大多数项目对于所有被试团体都是测量同一维度的心理特质，但是在测验过程中会不可避免地受到各种无关因素的影响。如果没有这些因素的影响，则测验的结果将是完全公平而有效的。因此，关健问题是对于某个全域中的各个子总体，这些无关因素的影响是否完全一致。在测验的编制过程中，测验专家也许会控制一些干扰因素，使得测验对不同团体相对公平些，但是测验编制者用什么证据来证明他们所编制的测验是公平而有效的，并且怎样预防新测验不再受到无关因素的影响？ 从60年代起，美国教育界就开始对性别与种族在测验结果上的差异特别感兴趣，一些人认为传统的教育和职业测验偏向白人阶级文化，不能反映少数民族的能力。如今美国的心理测量界有两个趋势：一是计算机在测验上的应用越来越广泛和深入；二是政治和法律的介入越来越明显，为了测验的公正与否而诉诸公堂的案子屡屡发生，与此同时美国的州和国家也曾多次为公民的不被歧视的权益通过了有关的法律条文。因些，对于测量界的专家们来说，研究出一些方法来保证测验的公平性成了至关重要的问题。 项目偏差和项目功能差异的研究正是适应以上的形势和要求而发展起来的。1986年夏开始，美国教育测验服务公司（ETS）在测验的编制过程中规定，必须对试题进行项目功能差异的分析，对试题的常规分析过程中加入了一个项目功能差异指数。 项目功能差异的分析成为测验公平性和有效性的依据，同时对项目功能差异的原因探究可为新测验的公平性打好基础。 我国的许多著名的考试如高考、研究生入学考试都实行全国统一考试。我国幅员辽阔，民族众多，各地区之间经济文化发展很不平衡，城乡差别很大，在大范围内实行统一考试，必然会造成许多因素影响考试的公平性和有效性。因此对项目功能差异研究的介绍及其方法的引用，成为我国心理测量界刻不容缓的任务。 1 概念的简介 项目功能差异最早始于60年代对跨文化团体的项目偏差研究，这些研究的目的在于寻找一套方法以区分出对少数民族团体不利的项目。随着女权运动和种族平等运动的兴起和高涨，人们越来越关注测验对不同性别、种族或民族考生是否公平。现在国外学者研究出一系列检验项目功能差异的方法，并对重大的测验进行项目功能差异分析，最终确定对某个团体不利的项目，即有偏差的项目。 1.1 项目偏差与项目功能差异 什么叫做“项目偏差”呢？比较普遍的定义是：如果来自不同团体的具有相同能力或熟练（proficiency）的个体对某题正确回答的概率不同，则这道题就是有偏差的1。例如，某个测验项目要求学生计算关于地铁的速度和距离问题，测验编制者的目的是了解学生的计算能力，但由于大城市的学生和边远农村的学生对于“地铁”的了解程度不一样，因而大城市学生在这题上的得分比具有相同计算能力的边远农村学生高，这题对农村学生不利，即有偏差。用这个测验分数作推论时，就会产生不公平现象。 “项目偏差”这个概念首次在60年代应用于心理测量中，用于描述少数民族学生在测验上得低分的原因，即项目所测的知识与技能是白人中产阶级文化的一部分，它不属于少数民族文化。“项目偏差”常用于社会学中，且带有判断和评价含义，把“偏差”这词语应用于统计学中不适合。有人建议统计学中采用“项目功能差异”（differetial item functioning，DIF）,以区别“偏差”的判断与评价含义。 项目功能差异简称DIF。DIF指的是在控制团体能力之后，一个项目在不同团体中显示的不同统计特性。 如果一个项目在统计分析中得出有显著的DIF，并不能说这项目就有偏差。因为我们在作统计分析中，会犯(类和(类错误，另外匹配变量是否真的代表了测验所测的能力还待考证，这些都会让一些本没有偏差的项目也表现出显著DIF，而有些有偏差项目却没被检验出来。因而对具有DIF的项目还得进一步分析。对具有DIF项目的分析从两个方面展开：一方面是专家小组对项目的内容和形式进行分析，从主观上确定项目的内容和形式是否造成偏差；另一方面是分析专家提出的种种有关项目存在DIF的原因或干扰项目功能差异的分析结果，对项目存在DIF原因进行逻辑论证2，3。 1.2 项目偏差和项目影响 项目偏差是指目标组和参照组在所测的能力相同的前提下，两组在某题上的正确率有差异， 并且目标组和参照组在试题上的差异不是由于测验所测的能力差异引起的，而是与测验所测能力无关的因素引起的。而项目影响（item impact）是指目标组与参照组在某题上的差异真的是由于两者在测验所测的能力上有差异。 1.3 参照组和目标组 大多数DIF方法只能对两组被试进行DIF分析，一般对两种性别、种族以及其它特征的被试进行分析，看具有相同能力的男女生或黑人白人对某个项目正确率是否相同。我们一般把在项目上可能不利的那组被试当作目标组（如女生和黑人学生），把作为对照的那组被试称为参照组（如男生和白人学生）。 1.4 匹配变量 我们在对项目进行DIF分析时，比较的是具有相同能力的两组被试在某个项目上的正确率之差。衡量两组被试能力的变量就称为匹配变量。匹配变量