




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
心理与教育测量理论与技术的新发展第一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展项目反应理论简介第一节
概化理论简介
第二节新一代测量理论与认知诊断测验发展第三节第二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展项目反应理论简介第一节第三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介一、经典测验理论回顾巨大贡献、重要地位、继续发挥作用历史原因、先天不足、四个方面局限第四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心一、经典测验理论回顾(一)测验对被试的评价依赖于测验项目的具体组合和项目数量评价指标:测验原始总分局限:分数的解释依赖于测验的具体内容。对被试的比较被迫限制在同一份试卷上第五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心一、经典测验理论回顾(二)测验性能指标的估计依赖于被试样本项目难度估计值会随被试水平的变化而变化。区分度、信度和效度,本质上是相关系数,也都依赖于被试样本。同一测验在不同被试样本上施测所估性能指标不一样。第六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心一、经典测验理论回顾(三)被试能力与项目难度两指标的不一致性测验总分的参照系是测验项目全体。项目难度的参照系是被试全体例。两个指标的参照系不相同,被试能力分数与项目难度两指标不匹配。第七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心一、经典测验理论回顾(四)测验误差估计的不精确性经典理论中测验的信度估值是不精确的、笼统的。信度不是按定义公式求取而是借助于“平行测验”假设估计得到的。经典理论以同一误差估计值评价所有被试测值非常笼统,很不精确。第八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心一、经典测验理论回顾结论:经典测量理论的这些局限性限制了测量在实践中的应用。项目反应理论(IRT)是在这背景上发展起来的一种全新的现代测验理论。第九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介二、项目反应理论基础(一)潜在特质理论(LatentTraitTheory)测量学研究“潜在特质”目的:探清结构和性质,将其数量化,测量个体特质变量值,预测个体行为。第十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)潜在特质理论
潜在特质空间定义:对于人的某种任务行为起制约作用的若干潜在特质的集合称为潜在特质空间,相互独立的潜在特质的个数称为空间的维度。。第十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)潜在特质理论
K维潜在特质空间表示:
其中的每一个称为一个潜在分量。第十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)潜在特质理论完备的潜在特质空间定义:如果一个K维潜在特质空间包含了制约人某种任务行为的所有潜在特质,称其为一个完备的潜在特质空间,简称全特质空间。第十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)潜在特质理论测量单维性定义:如果制约某种任务行为的空间既是一维的,又是完备的,则称这一任务行为的测量具有单维性。单维IRT模型是最为人们熟悉的。第十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介(二)项目特征曲线(ItemCharacteristicCurve,ICC)项目特征曲线原理:编制质量良好的试题,随着被试水平的提高,其正确作答的概率会越来越大。第十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)项目特征曲线
经典测量理论项目特征曲线实质:被试正确作答概率对测验总分的回归曲线项目反应理论项目特征曲线实质:被试在项目上正确作答概率对被试潜在特质的回归曲线。第十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)项目特征曲线项目特征曲线在正常情况下与渐变式的S形中心对称曲线拟合。项目特征曲线的解析式被称为项目特征函数,也即通常所说模型。第十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)项目特征曲线
图
项目特征曲线
第十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介(三)项目反应理论的基础模型1.双参数正态肩形曲线模型(1952年洛德给出)(NormalOgiveModel)
第十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心1.双参数正态肩形曲线模型b的意义:将代入模型,即可得:b是对称曲线的中心与拐点,是曲线的定位参数。IRT难度定义:在项目上恰有0.5正确作答概率的那些个体的能力值b为该项目难度值。第二十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心1.双参数正态肩形曲线模型a的意义:将模型对求导,将代入,可得。a是曲线拐点(难度点)的斜率。曲线越陡峭,难度点附近不同被试正确作答概率的差异越大
a定义为区分度
第二十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心1、双参数项目特征曲线
1
1/2
0
b
图双参数模型的项目特征曲线
第二十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(三)项目反应理论的基础模型(续)2.Rasch模型丹麦学者拉希建Rasch模型Rasch模型的最大特点是它的项目参数只有难度。第二十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(三)项目反应理论的基础模型(续)3.Logistic模型伯恩鲍姆(Birnbaum,1958)双参数Logistic模型:
其中D一般取1.7令a=1,成单参数Logistic模型。第二十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(三)项目反应理论的基础模型(续)增加一个参数c成为三参数Logistic模型:
参数c是S曲线的下渐近线,称为“伪机遇参数”
第二十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心三参数项目特征曲线
P()1(1+c)/2
c
三参数模型的项目特征曲线第二十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介(四)项目反应理论的优良性质1.被试能力估计独立于测验项目的选择项目反应理论生成独立于项目内容的被试水平测量。这一优点为发展自适应测验提供了理论基础。
第二十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)项目反应理论的优良性质2.项目参数估计独立于被试样本项目特征曲线的本质:被试作答正确率对能力的回归。刻画回归曲线形态的参数,即a、b、c与被试分布无关。这一性质为建设大型题库提供了保证。
第二十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)项目反应理论的优良性质3.被试能力参数量表与项目难度参数量表的一致性1、可准确预估被试的正确作答概率。2、可针对被试能力选择试题,是进行自适应测验的技术保证。
第二十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)项目反应理论的优良性质4.可以精确估计每一测试项目以及测验针对每一个被试施测的测量误差项目信息函数:
测验信息函数:
第三十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)项目反应理论的优良性质4.可以精确估计每一测试项目以及测验针对每一个被试施测的测量误差(续)针对每一个被试施测的测量标准误:第三十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心二、项目反应理论基础(续)(五)项目反应理论模型的参数估计和模型—数据资料拟合检验1、根据测试数据估计出所有的参数应用软件如:BILOG、PASCAL、MULTILOG,ANOTE2、通过模型—数据资料拟合检验,证明模型可用商业软件中同时提供拟合检验程序。
第三十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第一节项目反应理论简介三、项目反应理论的部分特色应用简介(一)用信息函数评价项目和测验质量第三十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)用信息函数评价项目和测验质量
项目信息函数是项目质量综合指标。
某项目信息函数图(a=1.0064b=-1.6972c=0.2526)这是一个中上质量项目第三十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)用信息函数评价项目和测验质量根据测验信息函数从总体上评价测验质量。
图某测验信息函数图这是一个质量较高的测验。
第三十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心三、项目反应理论的部分特色应用简介(二)实现大型题库项目参数等值项目反应理论证明,两个不同样本所估同一项目两套参数之间存在如下关系:,,采用锚测验-非等组设计,计算参数转换系数A和B,完成参数转换。第三十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心三、项目反应理论的部分特色应用简介(三)测验编制中用目标信息函数控制测验精度1、确定目标信息函数:对不同能力被试提出不同精度要求,转换成不同信息量要求。2、编写或选择项目,累积测验信息函数达到或超过目标信息函数。第三十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心三、项目反应理论的部分特色应用简介(四)提高标准参照测验合格分数线的划分质量合格分数线的质量:准确、稳定、精度高第三十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)提高合格分数线的划分质量项目反应理论划合格分数线的方法:1、确定一个题库,所有题目参数已知,题目总数N。2、请专家判断合格者在题库上应有的最低正确作答比例。第三十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)提高合格分数线的划分质量项目反应理论划合格分数线的方法(续):3、估计与对应的能力值,是能力合格分数分界点
4、试卷合格分数由下式确定:第四十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)提高合格分数线的划分质量方法优点:每一试卷合格线与同一能力合格线对应,因此标准是相同的、稳定的。是由专家在全题库基础上确定的合格比例求得的,因此是准确的。测试精度可以通过控制合格分数线上信息函数达到预设要求。第四十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心三、项目反应理论的部分特色应用简介(五)指导计算机化自适应测验(CAT)编制传统测验用是千人一面的测验理想的测验应是因人而异的第四十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(五)指导计算机化自适应测验编制编制CAT需满足条件:1、能力估计独立于实际施测的试题。2、要有一个大型题库3、要及时估计被试能力,找到匹配试题迅速进入下一轮测试。结论:在项目反应理论指导下,应用计算机实现CAT。第四十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展
概化理论简介第二节第四十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
一、概化理论的发展(一)概化理论的发展思路概化理论(GeneralizabilityTheory,GT)是经典理论宏观发展,重在研究误差控制、研究测验整体设计。第四十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的发展思路1、测验分数方差的测量学意义测验分数方差有目标分数方差和误差分数方差之区别。如:被试真正能力水平间的分数方差是目标分数方差。同一被试不同次测验分数间的方差是误差方差。同一作品多个评分间的方差也是误差方差。第四十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的发展思路2、误差来源的多样性与总分方差结构的复杂性测量误差的原因多方面,误差方差的种类多种。总分方差结构复杂:不同来源的误差方差与目标分数方差共存。第四十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的发展思路3、经典测验理论处理分数方差的办法假定X=T+E,然后有:再定义信度为:
第四十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的发展思路3、经典测验理论处理分数方差的办法优点:定义了随机误差,可设法估计其大小。缺点:没有能告诉我们误差由哪些原因造成,各种原因造成的误差各有多大。第四十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的发展思路
4、概化理论的研究目的探清总分方差结构、区分误差原因,明确各种误差大小,找到最优设计方案。第五十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
(二)概化理论发展的理论与技术基础1、经典测验理论概化理论与经典测验理论相比,不同之处多于相同之处。2、方差分量分析依靠方差分量分析将总分方差分解、定性。第五十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
(三)概化理论发展史用方差分量分析研究测量误差的历史可以追溯到20世纪上半叶。公认的GT正式诞生的标志物是克朗巴赫等的专著《行为测量的可靠性》的正式出版。第五十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介二、概化理论基本框架(一)概化理论的测验情境关系说为了探清测验误差的来源、类型、大小,必须建立一个理论模型。第五十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介二、概化理论基本框架(一)概化理论的测验情境关系说(续)概化理论模型的建立依赖于对测验情境关系的详细调查。测验情境关系是指测量目标与各测量侧面所组成的一种关系结构。
第五十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的测验情境关系说1、测量目标测量目标:测量者希望通过测量用测量值描绘的心理品质。确定测量目标的方法:问“测谁”和“测什么”。一般一场测量目标只能一个研究同一测量问题测量目标一经确定不能改变。第五十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的测验情境关系说2、测量侧面测量侧面:测量的条件。测量侧面水平:测量条件的不同水平。测量侧面类型:随机侧面固定侧面第五十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的测验情境关系说2、测量侧面(续)固定侧面的优点:测量的误差会减小,测量的信度会提高。固定侧面的缺点:固定侧面成目标的一部分,测量结果拓广受限。第五十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的测验情境关系说3、概化理论下的真分数概念经典测验理论认为个体真分数只能有一个。概化理论认为在不同测量条件下会有不同的真分数。第五十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(一)概化理论的测验情境关系说测验情境关系说结论:情境关系中的测量目标、测量侧面、侧面的水平变化,会引起测验误差的来源,误差的大小、真分数的种类以及测验信度的变化,进而引起测验分数的解释范围发生变化。第五十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
(二)测验设计的模型与种类 测验设计的任务(两个方面):(1)界定测量目标和测量侧面的个数及名称、意义,确定各侧面的水平数。(2)设计数据采集方法。第六十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)测验设计的模型与种类数据采集方法类型:以侧面数分:
单侧面设计、双侧面设计、多侧面设计第六十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)测验设计的模型与种类数据采集方法类型(续):以数据结构分:交叉设计:测量目标在所有侧面的各个水平上被测量。如p×I、p×i×r
第六十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)测验设计的模型与种类数据采集方法类型(续):嵌套设计:测量目标在一个或多个侧面的部分水平以下被测量。如p:r、p:r:s混合设计:既有交叉,又有嵌套的测验设计。如i×(p:r)
第六十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(二)测验设计的模型与种类数据采集设计原则:数据充分体现测量目标与各个测量侧面及各侧面相互之间关系侧面数、水平数的设置要符合客观的测验情境;能获得充分的数据信息;简化模型、节约投入。施测时要控制设计之外的各种无关变量。第六十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心二、概化理论基本框架(三)G研究G研究目的:用方差分量分析,定量估计观察领域中测量目标方差和各个测量侧面方差,以及其间的交互作用的方差。第六十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(三)G研究方差分量分析(二步):1、分解总体方差为测量目标主效应方差、各测量侧面主效应方差和各种交互效应方差。2、应用样本方差估计各种效应的期望均方差。第六十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(三)G研究各种期望均方差性质:测量目标效应期望均方差:测量目标个体差异的描写量;各测量侧面效应期望均方差:各侧面对目标干扰程度描写量,就是误差;各交互效应期望均方差:各侧面对目标的交互干扰程度描写量,也是误差。第六十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心二、概化理论基本框架(四)D研究D研究的目的:在G研究的基础上,在原设计的测验情境关系范围之内,分析比较各种可能的测验方案,由研究者结合实际,优选实施方案。第六十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)D研究D研究调整原方案获取新方案的方法:1、固定原测验情境关系中的某一个或某几个侧面。2、改变原测验情境关系中的一个或某几个测量侧面的水平数。3、改变原测验情境关系中某些测量侧面的结构关系。第六十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)D研究D研究的统计分析步骤(两步)1、估计拓广领域(新测验方案)下各种效应期望方差。2、估计新方案下测验误差的总体指标和测验质量指标,以提供比较依据。第七十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)D研究测验误差指标:1、相对误差指标:所有与测量目标有关的交互效应方差之和,2、绝对误差指标:除目标主效应方差之外的所有效应方差之和。第七十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)D研究测验质量综合指标:1、概化系数G;目标效应方差与目标效应方差加相对误差方差之和的比。2、相依系数:目标效应方差与目标效应方差加绝对误差方差之和的比。第七十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心(四)D研究D研究的最后工作:根据综合指标,找出最优测验设计方案。第七十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
概化理论分析常用软件:GENOVA或mGENOVA。第七十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
三、概化理论评价优点:1、概化理论是一套全新的测验误差分析方法,而且非常精细。2、概化理论引进了测验设计的思想和方法。3、概化理论具有严谨的科学理论体系。第七十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第二节概化理论简介
三、概化理论评价缺点:1、概化理论本质上还是抽样,研究本身会有误差。2、计算方法相对复杂,给应用带来一定困难。第七十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展新一代测量理论与认知诊断测验发展第三节第七十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节一、新一代测量理论基本特征第一,测量将自觉的以实质心理学为基础,并在此指导下,突显测验设计,同时全面考察反应过程和结果。第二,传统测验将测量对象视为“统计结构”,而新一代测验试图将这一“统计结构”进行分解,更深入探测个体内部心理过程及心理特质;第七十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三,传统测验假设不同水平的技能连续性变化,所测量的能力在一个连续性的量尺上变化,测验目的是为了将所测能力在连续性量尺上定位。而在新一代测验中,所测量的特定特质(如技能、策略等),可能会呈现有或无的离散状态。第三节第七十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节第四,传统测验中技能是单维的或多维的,新一代测验中技能的组成部分可以以任何模式联系起来。不同的被试或在不同的情境下可用不同的策略,技能的组成部分存在时间的或逻辑的相依。第八十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第五,传统测验应用项目一致性的几何模型,新一代测验中项目一致性的离散性特征模型是合适的。新一代测验所测量的特质之间不仅存在量的差异,更存在质的差异,因此,需用上离散性特征模型。第三节第八十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心二、认知诊断基本理论与方法1、认知诊断基本概念
在测量学中,人们通常把对个体认知过程、加工技能或知识结构的诊断评估称为认知诊断评估或认知诊断(cognitivediagnosisassessment)。第三节第八十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节Leighton&Gierl(2007)在其编著的专著中指出,认知诊断评估是用于测量个体特定的知识结构(knowledgestructure)和加工技能(processingskills)。第八十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心Yang&Embretson(2007)认为心理或教育中的认知诊断测验至少应测量三方面的认知特性(cognitivecharacteristics):一是特定认知领域较重要的技能或知识。而这些技能或知识又是更高层能力构建的基础;二是知识结构。知识结构不仅表明知识、技能的数量或多少,而且还表明人们是如何对这些知识、技能进行组织;三是认知过程。
第三节第八十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节总之认知诊断理论建立在传统测验理论基础之上,但它更为强调测验/测量要深入考察被试内部的心理加工过程。第八十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心2、认知诊断理论基础
第一,现代认知心理学的发展。第二,心理计量学的发展,尤其是以现代项目反应理论为基础的计量心理学的发展。第三,现代统计数学和计算机科学的发展。第三节第八十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心三、认知诊断测验的编制1、认知诊断测验与传统测验区别(1)测验目的、功能不同(2)测验编制的理论基础不同(3)测验项目质量的评价标准不同。第三节第八十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节(1)测验目的、功能不同。认知诊断测验更多强调对个体认知优势和认知弱势的细致诊断,并对个体当前发展状况进行反馈和提供补救建议及措施,从而有针对性地促进个体认知发展。传统测验则更多强调对个体的整体评价或筛选,较少关注个体具体的认知结构、加工技能及策略等信息的诊断。第八十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心(2)测验编制的理论基础不同。
认知诊断测验的编制更多强调心理学理论尤其是认知心理学理论对测验编制的指导作用。具体体现在以下两点:第三节第八十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节第一,更多的心理实验和理论证据资料被用于指导认知诊断测验的编制。第二,传统大规模统一测验所测量的内容和技能较广,因此在单个测验中想要较好地测量被试的认知成分(Cognitivecomponent)将会非常耗时。第九十页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心(3)测验项目质量的评价标准不同。认知诊断测验的项目质量不能仅根据心理测量学标准(如难度、区分度等)和考核内容标准(项目考核内容是否符合测验蓝图或测验双向细目表所界定的内容)来评价,还必须要考察项目是否能充分测量认知模型中的知识结构和加工技能等。第三节第九十一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心(二)认知诊断测验的编制(1)诊断目标的确定。比如在教育诊断中,应确定是哪个学科诊断,是该学科的单元诊断还是期末终结性诊断,同时还必须明确需诊断的具体内容等。如英语学科的语法诊断、阅读理解诊断、听力理解诊断等等。第三节第九十二页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心(2)确定诊断目标所涉及的认知属性及属性间的阶层关系。属性阶层(attributehierarchy)关系,主要是指属性间的逻辑关系或心理顺序。四种基本类型:线性型、收敛型、分支型和无结构型第三节第九十三页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节第九十四页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心(3)认知诊断测验的正式编制Q矩阵的获取第三节第九十五页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心根据Q矩阵可以确定认知诊断测验项目考核模式,但同时要考虑以下两个基本原则:第一、测验应能实现对每个认知属性的诊断第二、测验应能实现对每个属性的多次观察第三节第九十六页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心第三节(4)诊断结果报告的制作诊断结果应体现定量报告与定性报告相结合的原则,以及为促进个体有效学习及开展因材施教提供信息的原则。诊断报告可分为个体报告和团体报告。第九十七页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展本章小结:项目反应理论建立起了关联人、题品质的项目模型,对人、题的分析更为精准。概化理论借助实验设计和方差分量分析,分析误差来源和大小,寻找最优方案。认知诊断深入到被试认知过程、成分、技能、策略层面对被试做更精细评估。第九十八页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心第十四章心理与教育测量理论与技术的新发展讨论题:心理与教育测量新理论的迷人之处在哪里?我们应该为和能为心理与教育测量的发展做些什么?第九十九页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心参考文献:Mislevy,R.J.,(1993).Foundationsofanewtesttheory.InN.Frederiksenetal.(Eds),Testtheoryforanewgenerationoftests,Hillsdale,HJ:LEA(P19-39)刘声涛、戴海琦等.新一代测验理论—认知诊断理论的源起与特征.心理学探新,2006年第4期第十四章心理与教育测量理论与技术的新发展第一百页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心漆书青,戴海崎,丁树良著.现代教育与心理测量学原理.江西师大心理与教育统计测量中心,2002LeightonJ.P.&GierlM.(2007).Verbalreportsasdataforcognitivediagnosticassessment.InJ.P.Leighton&M.Gierl(Eds.),Cognitivediagnosticassessmentforeducation:TheoryandApplications(pp.146-172).Cambridge,UK:Cambridgeuniversitypress.第十四章心理与教育测量理论与技术的新发展第一百零一页,共一百零六页,编辑于2023年,星期六心理测量学江西师大心理与教育统计测量中心心理与教育测量学江西师大心理与教育统计测量中心Mislevy,R.J.(1996).Testtheoryreconceived.Journalofeducationalmeasurement,33:379-416YangX.D.&EmbretsonS.E.(2007).Constructvalidityandcognitivediagnosticassessment.InJ.P.Leighton&M.Gierl(Eds.),Cognitivediagnosticassessmentforeducation:TheoryandApplications(pp.119-14
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026届山东省武城县第二中学高三上化学期中质量检测模拟试题含解析
- (预习部分)第03讲Unit3(知识全梳理考点精准练)
- Unit2单元重点词汇背诵习题译林版九年级英语上册
- 物业基金面试题目及答案
- 化妆品知识培训费用课件
- 新解读《GB-T 36166-2018液压元件用铜合金棒、型材》
- 新解读《GB-T 35990-2018压力管道用金属波纹管膨胀节》
- 平江中学期末数学试卷
- 南昌09年高考数学试卷
- 逆变器生产线项目投资测算方案
- 《构网型储能变流器技术规范》
- 2023-2024学年江苏省南京市高三上学期学情调研物理试题
- 屋面工程技术规范
- 新概念第一册双课听力文本全(英文翻译)
- 货物流程管理制度
- 人教版九年级单词默写汉译英打印版
- 基于5G通信技术的无人机立体覆盖网络白皮书
- 《学习国旗法》课件
- 中智人力测评题库答案
- 演员培训课程课件
- 医疗设备采购 投标技术方案 (技术方案)
评论
0/150
提交评论