不错的调查问卷的信度与效度.ppt

调查技术是国际通用的科学研究的主要方法之一。在我国利用调查技术进行科学研究是一种很普遍的现象。调查设计数据相对容易得到，样本大小可以得到非常科学和有意的结论。有效性？可靠性？Whatsreliability？Whatsvalidity？问卷的有效性、可靠性，researchcenterofepidemiologyandhealthstatistics，capitaluiversityofmedicalscience Guo xiuhua教授，2008年5月24日误差公理、误差是特定属性的测量值偏离实际值的部分，如测量值和实际值之间的差异、示例统计值和整体参数之间的差异。任何研究推论都达不到100%的真实。Nostudenyisfreeoferrors，theinferencesareneverperfmectlyvalid。误差公理：实验结果有误差，误差自始至终存在于所有科学实验过程中。2 .错误类型(typesoferror)、(1)随机误差(randomerror)随机误差是由不确定性引起的，不可避免地被消除。它的整体方向不能确定。包括随机测量误差和取样误差。随机测量错误：没有使多个观测结果变大和变小的固定倾向。样品错误：样品引起的样品指标与整体指标之间的差异。(2)系统错误(systematicerror)是偏见(研究结果在一个方向上整体，bias)导致的错误结果，可以纠正和消除。(3)过失错误(grosserror)是科研设计错误或实验者主观片面、粗心造成的错误。我们必须避开，消除！调查表测试的测量错误通常来自两个方面。一种是调查表测试过程中出现的错误，也称为度量错误和随机错误。第二个是由于称为系统错误的问卷的结构质量导致的错误。measurements error relability systemerrorvalidity，一，问卷有效性，thevalidatityofaquestionnaire，thevalidatityofmeares“有效性”(validity)通常表示问卷的有效性和准确性，即问卷希望测量的特性的程度。对于标准测试，有效性比可靠性更重要。有效性分析的重要性，可行性是问卷调查研究的最重要特征。问卷调查的目的是获得高水平的测量和结论。可行性越高，相应的问卷调查结果表明可以测试的行为的真假，越能达到问卷调查目的，就越准确，越有效。问卷的准确性或有效性压印在问卷的可行性上，反映了对问卷的系统误差的控制程度。2，有效性的定义，有效性是指调查表测试的准确性，即能够反映通过测试测量的特性的程度。包含两个意思。一个是调查表测试的目的。二是问卷对测量目标的测量准确度和真实性。有效性是相对性、连续性和间接性的概念。在测量理论中，有效性表示与测量目的相关的实际变异(即有效变异)与总变异的比率：r2xy表示测量的有效性系数，Sv2表示有效变异，Sx2表示总变异。3 .常用的有效性指标，确定一份问卷有效性的方法通常将应答者的问卷调查分数与其他有效性标准相关联，以其相关系数的大小表示可行性。相关系数高，问卷的可行性高。常用的有效性指标是内容有效性，结构可行性。，(1)内容有效性(contentvalidity)、内容有效性(content effe ctivity)是问卷内容的“合格”(relevance)和“代表”(representativeness)。也就是说，调查表内容是否可以对应测量的特性，是否可以达到测试目的，是否可以更好地表示要测量的内容以及引起预期反应的程度。内容的可行性通常被认为是主题分布的合理性，并且属于命题的逻辑分析，因此内容的可行性也称为“逻辑有效性”(logicalvalidity)、“内部有效性”(intrinsicValidity)和“循环有效性”(circularvalidity)。内容有效性评估主要是通过实证判断进行的，一般考虑三个问题。一个是项目是否真的属于需要测量的领域；第二种是包含要测试区域的各个方面的主题的测试。第三，考试题的构成比例是否适当。评价常用内容有效性的方法有两种。一个是专家法，即对相关专家进行分析，判断问卷标题和原始内容的范围是否正确，判断问卷是否更好地表示原始内容。第二是统计分析。也就是说，可以从整个相同内容中提取两个问卷，分别测试相同的应答者组，并使用这两个问卷的相关系数估计调查表内容的可行性。删除问题后，计算问题与总分的相关性，分析是否应该删除(敏感度分析)。(2)“结构有效性”(ConstructValidity)也称为“结构可行性”，它表示问卷对特定理论概念或特性的测量程度，即描述特定特性的实际分数程度。如果我们根据理论的假设结构，通过问卷调查，得到答卷的实际分数，通过统计考试，表明问卷可以有效地解释应答者的这一特性，那么这个问卷的结构可行性就很好了。确定常用结构可行性的方法是，(1)根据文献、以前的研究结果、实际经验等，建立假设理论建设。(2)分析问卷主题。主要通过分析问卷内容、对答题卡主题的反应、问卷标题的同质性、项目间关系来判断问卷的结构可行性。(3)根据构成的假设理论，填写相应的问卷。(四)与类似权威问卷相关的计算；(5)用统计测试的实证方法，检验问卷能否有效地解释所需的特性。3 .基于有效性的有效性(CriterionValidity)、基于有效性的有效性(Criterion-RelatedValidity)、经验有效性(EmpiricalValidity)、统计有效性有效性标准有效性是对问卷得分与特定外部标准(基于效果)之间的相关性程度的说明，以问卷调查评级得分与有效性标准之间的相关系数表示。典型的估计效果标准有效性主要方法如下：(1)相关方法，即找出问卷分数与效果标准之间的相关性的结果，即效果标准有效性。(2)看看区分法，即问卷分数是否能区分按效果指标划分的团体。可以用t检验对两次问卷结果的平均分数进行差异测试。如果差异是统计意义的话，说明问卷是有效的。如果差异在统计上不重要，问卷无效。(4)标识有效性(DiscriminantValidity)，也称为标识效果标记，标识效果是使用同一问卷测量不同的特性和意义，测量结果之间不应有太大的关联。(5)“收敛有效性”(ConvergentValidity)，“收敛有效性”(convergent validity)也称为“收敛有效性”，表示使用不同的测量方法测量相同特性结果的相似性。也就是说，同一特性的两种或多种测量方法之间必须存在高度相关性。6.有效性评估，Spitzer认为，如果(1)问卷满足认为内容有效性和结构可行性的5个条件，则问卷有效。(2)问卷的编制阶段，为了修改和改善内容有效性，需要征求相关人士的意见。(3)问卷通过重用证明了可靠性。(4)黄金标准存在的话，必须以黄金标准为准。(5)非黄金标准定时可以用判别有效性代替。7 .如何提高提问的可行性，(1)理论正确，说明清楚。调查表内容要适合调查表测试的目的，题目要明确易懂，调查表的排列要从容易到难，问题的难度和区分要适当。(2)减少误差的操作规范；(3)控制系统故障。它主要包括不允许仪表、标题和指导暗示、不适当的回答安排(可以推测)等，如果控制这些因素，可以减少系统错误，提高有效性；(4)样品合适，应防止损失。重视问卷调查的回收率。样品容量一般应小于30。(5)适当增加问卷的长度。增加调查表的长度可以提高调查表的可靠性，提高调查表的有效性，但是增加调查表的长度对可靠性的影响大于对有效性的影响。(六)排除武官干涉。识别和排除不相关的干扰变量，以混淆或威胁结论。第二，有效性分析示例(example)，示例2是示例1中调查表测试结果的有效性分析，1 .调查表的敏感度(可靠性)分析，(1)在工作流程菜单中，analyzescalerelability analysis.item(输入调查表中的每个项目或每个元素包含的项目)单击Statistics按钮。跃现式可靠性分析统计对话方块descript Ives for :scale fitem deletedok，scalefitemdeleted :移除目前主题完整问卷的说明性统计资料，包括：ScaleMeanifItemDeleted:排除当前调查表合计：Scalvarianceifitemdelete:删除当前调查表合计之间的分布。corrected item-total correlation :当前标题得分与删除当前调查表总得分的Pearson相关系数相关。Squardmultipleorrelation :使用当前标题作为变量，所有其他标题作为参数获取的确定系数R2；AlphaifItemDeleted:问卷的Cronbach系数，当前标题除外。(2)输出结果，SCL90每个项目的敏感度分析结果： itemscalecalecorrectedmeanincites-alphanitemifitemtotalifitemdeletedeletecorrelationdes.e 8631 . 17501272 . 81470 . 37640 . 9742 I 873 1 . 9250277 . 14810 . 62310 . 9736 I 832 . 0505050501282 . 97180 . 6070AlphaifItemDeleted的值越大，应考虑调整的标题就越大。从此次问卷调查结果的灵敏度分析可以看出，规模各标题的“AlphaifItemDeleted”值在0.97左右发生了变化，波动幅度较小。因此，AlphaifItemDeleted值可以在不调整指标每个主题的情况下保持。这一结果可能与研究者使用的SCL-90台标准尺度有关。摘要目的：探讨问卷的可靠性。方法：以武警15个部队201名战士为对象，对90个问卷调查资料进行心理卫生评价，利用SAS软件进行编程，计算alpha可信度系数，进行了可靠性分析。结果：6个已删除且达到要求时，=0.973569；使用标准化数据时，=0.974102。结论：利用可靠性分析，可以从问卷调查表的数据中提取真实可靠的成分。2 .问卷的结构有效性分析、问卷的结构有效性评价比较复杂，可以用各题目和规模各银的相关分析及因素分析方法反映。(1)利用相关分析评估问卷的结构可行性，从菜单中选择analyzescalereliability analysisitem(输入调查表中的每个项目或每个元素包含的项目)Statistics弹出式可信度分析统计信息对话框inter-结构有效性分析与探索因素分析相比，最好使用更能说明问题的确认因素分析。Analyze data reduction factor.执行。FactorAnalysis对话框：弹出菜单单击descriptivesstatisticsinitial solutioncorrelation matrixkmoandbartlett stestoft可信度主要表示问卷的准确性(precision)。可靠性分析以控制和减少随机误差的方法为目的，包括问卷结果的一致性和稳定性。thereliabsilityofmeasures，thequestionofrelialitistowtextentdoesandicatearsurethesamethingconsisten