量表的信度与效度分析.ppt

量表的信度与效度分析之 理论与操作 2 1 项目分析与信度估计 ItemAnalysisandReliabilityEstimation 3 心理测验的量化分析 预试分析 pre test 目的在确认量表题目的堪用程度 适切性评估 最重要的工作为项目分析 并进行试探性的信度分析 以作为题目改善的依据信效度检验提供各项客观指标 作为测验与量表良窳程度的具体证据 4 项目分析的策略 遗漏值的数量评估法检验受测者是否抗拒或难以回答某一个题目 导致遗漏情形的发生 过多的遗漏情形表示该题目不宜采用 描述统计评估法利用各题目的描述统计量来诊断题目的优劣 如题目平均数评估法 各题目之平均数应趋于中间值 过于极端值平均数代表偏态或不良试题 无法反应题目之集中趋势 题目变异数评估法 一题目之变异量若太小 代表者达题情形趋于一致 题目之鉴别度低 属于不良的题目 偏态与峰度评估法 5 项目分析的策略 题目总分相关法 相关分析技术 计算每一个项目与总分的简单积差相关系数 一般要求在0 3以上 且达统计之显著水平 SPSS软件为项目分析提供了一项校正项目总分相关系数 correcteditem totalcorrelation 的相关系数 使研究者清楚辨别某题目与其他题目之相对关联性 内部一致性效标法 小样本分析 又称为极端组检验法 系将预测样本在该量表总分之高低 取极端的27 分为高低两组 并计算两极端组的得分平均数 具有鉴别度的题目在两极端组的得分 应具有显著的差异 因素分析法以因素负荷量来判断个别项目与相对因素的关系 6 项目分析范例 采用 组织创新气氛知觉量表 邱浩政 1999 量表用以测量组织环境对于创意行为有利的程度 数据搜集方式 访谈 自由反应问卷预测样本 217位来自制造业 军公教人员 与服务业之受访者经进行项目分析与因素分析后 由50题题目保留其中31题 完成正式题本建立 项目分析实际范例 7 项目分析操作程序 选取分析 报表 观察值摘要选取所欲分析的题目移至变量列表中进入统计量对话框 选取平均数 标准偏差 偏态 峰态等各种描述统计选项 移至列表中按确定执行 8 项目分析输出结果 这些高遗漏值倾向于优先删除 但仍须与其他指标合并考虑 9 描述统计评估法 平均数评估法 过高或过低之平均数代表偏离 通常以项目平均数超过全量平均数之正负1 5个标准偏差为检验标准 10 描述统计评估法 题目变异数评估法 变异量若太小 代表低变异量通常以标准偏差 0 75为检验标准 偏态与峰度评估法 偏态明显 通常以偏态系数接近正负1为基准 11 同构型检验 信度功能 步骤一选取量尺法中的信度分析 步骤二选取所预分析的变项移至清单中 点选统计量 12 同构型检验 信度功能 步骤三选取删除项目后之量尺摘要 13 1 项目与总分相关 Method1 spacesaver willbeusedforthisanalysis RELIABILITYANALYSIS SCALE ALPHA Item totalStatisticsScaleScaleCorrectedMeanVarianceItem AlphaifItemifItemTotalifItemDeletedDeletedCorrelationDeletedQ1132 9119483 3593 6351 9425Q2132 8176484 3906 6275 9425Q18132 7987486 0225 5953 9427Q20132 9874503 3290 1262 9456 略 Q45132 6855485 9511 6308 9426Q47133 1195493 8147 3840 9440Q48133 1006487 8632 4837 9434Q49132 5723487 7020 5801 9429Q50132 5660492 9687 5208 9433NofCases 159 0NofItems 50全量表之信度系数Alpha 9444 Alpha 9444 14 测验发展资料分析 项目分析 15 信度分析的步骤 步骤一 选取统计分析中的量尺法中的信度分析步骤二 选取所预分析的变项移至清单中 选择所需的信度估计模式步骤三 进入统计量对话框 选择适当的统计量 16 信度分析之量表统计摘要 17 信度分析 共变与相关矩阵 共变矩阵 CovarianceMatrix 列出题目两两共变数 对角线所列出为各题的变异数 相关矩阵 CorrelationMatrix 列出题目两两相关系数 18 信度分析结果 项目与总分相关 项目与总量表的统计数 包括 1 项目删除后量表总分2 项目删除后变异数大小3 项目与总分相关4 相关系数的平方5 当该题删除后所能提高的信度系数 19 信度分析结果 CronBach sAlpha 20 信度分析重点 判断问卷量表之符合性由相关系数矩阵判断 若相关系数高 则表示试题同构型相近 可以考虑合并删除试题后 此试题与整体问卷结果之相关性判断 若信度系数太低 表示此试题与整体问卷较不一致 可以考虑删除此试题 删除此一试题后之Cronbach s 系数可与整体问卷之Cronbach s 系数比较 以判断是否删除该试题 问卷整体信度系数 以Cronbach s 系数最具代表 此系数值介于0与1之间 其意义如下 21 项目分析结果 22 上机练习 1 问卷实例说明 陈景堂着课本第十一章 问题1 第十一章课本信度分析范例 seep 11 33 p 11 54 23 2 因素分析 Factoranalysis 24 因素分析基本概念 为了要证实研究者所设计的测验的确在测某一潜在特质 并厘清潜在特质的内在结构 能够将一群具有共同特性的测量分数 抽离出背后潜在构念的统计分析技术 即为因素分析 factoranalysis 25 因素分析主要的功能 能协助进行效度的验证 利用一组题目与心理构念间关系的讨论 研究者得以提出计量的证据 探讨潜在特质的因素结构与存在的形式 建立量表的因素效度 factorialvalidity 能协助简化测量的内容 因素分析法之主要概念即是将复杂的共变结构予以简化 研究者可以根据每一个因素的主要概念 选用最具有代表性的题目来测量特质 以最少的题项 进行最直接适切的测量 减少受测者作答时间 减少疲劳效果与填答抗拒 用来协助测验编制 进行项目分析 检验试题的优劣好坏 同时可以针对每一个题目的独特性进行精密的测量 比较相对的重要性 26 因素与共变结构 因素分析之基本假设 是构念或 因素 factor 隐含在许多现实可观察的事物背后 虽然难以直接测量 但是可以从复杂的外在现象中计算 估计 或抽取得到 其数学原理是共变 covariance 的抽取 也就是说 受到同一个构念影响的测量分数 共同相关的部份 就是构念所在的部份 构念则是由被称为 因素 的共同相关的部份的得分来表示 27 因素分析运算的过程 与同样采用共变为计算基础的回归分析类似 如果自尊以Y来表示 其他十个题目分数以X1到X10表示 自尊的得分 可以从下列数学模性预测得到 Y b1X1 b2X2 b3X3 b10X10 U此一方程式与回归方程式的不同 1 X1到X10十个变项并非相互独立的自变项 而是具有高度相似性 高度相关 具有共同特质的十个自变项 2 他们背后的共同特质Y 是 理论 上存在 由十个自变项当中抽离出来 相对的 回归分析中的Y 指的是另一个具体的 与自变项无本质上相似之处的依变项 28 探索性因素分析 探索性因素分析 ExploratoryFactoranalysis EFA 对于观察变项因素结构 如因素之抽取 因素之数目 因素之内容以及变项之分类等 的找寻 并未有任何事前的预设假定 而径由因素分析的程序去决定 29 探索性因素分析 步骤 1 研究者经由共变关系的分解 找出最低限度的主要成份 principalcomponent 或共同因素 commonfactor 2 探讨这些主成份或共同因素与个别的变项的关系 找出观察变项与其相对应因素之间的强度 即因素负荷值 factorloading 以说明因素与所属的观察变项的关系与强度 3 决定因素的内容 为因素取一个合适的名字 为因素fi解释变量Xi变异的比例 30 因素分析的条件 因素分析的变项都必须是连续变项 符合线性关系的假设 顺序与类别变项不得使用因素分析简化结构 抽样的过程必须具有随机性 并具有一定的规模 如果研究的母群据有相当的同构型 如学生样本 变项数目不多 样本数可以介于100到200之间 Gorsuch 1983 建议样本数最少为变项数的五倍 且大于100 变量之间需具有一定程度的相关 一群相关太高或太低的变项 皆会造成执行因素分析的困难 相关太低的变项 难以抽取一组稳定的因素 不适于进行因素分析 通常相关系数绝对值小于0 3不适于进行因素分析 相关太高的变项 多重共线性 multi collinearity 明显 有区辨效度不足的疑虑 所获得的因素结构价值不高 可透过球形检定与KMO检定来检验上述问题 31 因素分析的数学原理 相关矩阵 因素分析的基础是变项之间的相关 因此应先计算数个题目 如X1 X10 的两两相关 详细检视该相关矩阵所代表的意义 32 检验相关系数是否适当的方法 1 Bartlett stestofsphericity 球形检定 一般相关矩阵中的相关系数必须显著的高于0 某一群题目两两之间有高相关 显示可能存有一个因素 多个群落代表多个因素 如果相关系数都偏低且接近 则因素的抽取越不容易 Bartlett stestofsphericity 球形考验 即可用来检验是否这些相关系数不同且大于0 33 2 净相关矩阵 变项之间是否具有高度关联 可以从偏低的净相关 partialcorrelation 来判断 因素分析计算过程中 可以得到一个反映像矩阵 呈现出净相关的大小 该矩阵中 若有多数系数偏高 则应放弃使用因素分析 除了此反映像矩阵之对角线系数以外 该系数称为取样适切性系数 KMO Kaiser Meyer Olkinmeasureofsamplingadequacy 代表与该变项的有关的所有相关系数与净相关系数之比较值 该系数值越大 代表相关情形良好 其判断原理如下 检验相关系数是否适当的方法 34 因素的抽取 factorextraction 主成份分析法 principlecomponentanalysis 以线性方程式将所有变项加以合并 linearcombination 计算所有变项共同解释的变异量 该线性组合称为主要成份 第一次线性组合建立后 计算出的第一个主成份估计 可以解释全体变异量的最大一部份 其所解释的变异量即属第一个主成份所有 分离后所剩余的变异量 经第二个的方程式的线性合并 再抽离出第二个主成份 依此类推 所剩余的共同变异越来越小 每一成份的解释量依次递减 直到无法抽取共同变异量为止 通常只保留解释量较大的几个成份来代表所有的变项 主成份分析法适用状况于单纯为简化大量变项为较少数的成份时 以及作为因素分析的预备工作 因素抽取之目的在于决定测量变项中 存在着多少个潜在的成分或因素 35 主轴因素法 principalaxisfactors 与主成份分析法的不同 在于主轴因素法是分析变项间的共同变异量而非全体变异量 其计算方式是将相关矩阵中的对角线 由原来的1 00改用共同性 communalities 来取代 目的在抽出一系列互相独立的因素 第一个因素解释最多的原来变项间共同变异量 第二个因素解释除去第一个因素解释后 剩余共同变异量的最大变异 其余因素依序解释剩余的变异量中最大部分 直到所有的共同变异被分割完毕为止 因素的抽取 factorextraction 36 最小平方法 leastsquaresmethod 利用最小差距原理 针对特定个数的因素 计算出一个因素型态矩阵 factorpatternmatrix 后 使原始相关矩阵与新的因素负荷量矩阵系数相减平方后数值最小 称为未加权最小平方法 unweightedleastsquaresmethod 表示所抽离的因素与原始相关模式最接近 最大概率法 maximum likelihoodmethod 相关系数经变项的残差 uniqueness 加权后 利用参数估计 parameterestimation 原理 估计出最可能出现的相关矩阵的方法 因素的抽取 factorextraction 37 因素个数的决定 主要依据的原则是特征值 eigenvalue 的大小 特征值代某一因素可解释的总变异量 特征值越大 代表该因素的解释力越强 一般而言 特征值需大于1 才可被视为一个因素 低于1的特征值 代表该因素的变异数少于单一一个变项的变异数1 无法以因素的形式存在 另一种方法则是以陡坡检定 screetest 其方法是将每一个因素依其特征值递减排列特征值逐渐当因素的特征值逐渐接近 没有变化之时 代表特殊的因素已无法被抽离出来 当特征值急遽增加之时 即代表有重要因素出现 也就是特征值曲线变陡之时 即是决定因素个数之时 38 因素转轴 factorrotation 转轴的目的 将所抽取的因素 经过数学转换 使因素或成份具有清楚的区隔 能够反映出特定的意义 称为转轴 目的是在厘清因素与因素之间的关系 以确立因素间最简单的结构 转轴的进行 系使用三角函数的概念 将因素之间的相对关系 以转轴矩阵 transformationmatrix 所计算出的因素负荷矩阵的参数 将原来的共变结构所抽离出来的项目系数进行数学转换 形成新的转轴后因素负荷矩阵 经正交转轴 或结构矩阵 经斜交转轴 使结果更易解释 进一步的协助研究者进行因素的命名 39 1 直交转轴 orthogonalrotation 指转轴过程当中 因素之间的轴线夹角为90度 即因素之间的相关设定为0 如最大变异法 varimax 四方最大法 quartimax 均等变异法 equimaxrotation 2 斜交转轴 obliquerotation 容许因素与因素之间 具有一定的共变 在转轴的过程当中 同时对于因素的关连情形进行估计 例如最小斜交法 obliminroation 最大斜交法 oblimaxrotation 四方最小法 quartimin 等 转轴的方式 40 直交与斜交转轴的优点 直交转轴的优点 以直交转轴转换得到的新参数 是基于因素间是相互独立的前提 在数学原理上 是将所有的变项在同一个因素或成份的负荷量平方的变异量达到最大 如此最能够达到简单因素结构的目的 且对于因素结构的解释较为容易 概念较为清晰 斜交转轴的优点 直交转轴将因素之间进行最大的区隔 往往会扭曲了潜在特质在现实生活中的真实关系 容易造成偏误 因此一般进行实征研究的验证时 除非研究者有其特定的理论做为支持 或有强而有力的实证证据 否则为了精确的估计变项与因素关系 使用斜交转轴是较贴近真实的一种作法 41 因素分析操作程序 选取分析 数据缩减 因子 进入因素分析对话框点选所欲分析的量表题目 移至变量列表中点选 描述性统计量 选取所需