研究的设计PPT精品文档

1、2021/4/2512021/4/2522021/4/2532021/4/254 2021/4/255n外在信度外在信度涉及的是研究者能否在相同或涉及的是研究者能否在相同或相似的背景下重复同样的研究，如果能相似的背景下重复同样的研究，如果能的话，那么结果是否总能够保持一致？的话，那么结果是否总能够保持一致？如果研究者在相同方法、相同条件下可如果研究者在相同方法、相同条件下可以多次得到与先前研究相同的结果，则以多次得到与先前研究相同的结果，则该研究是可信的。如果反之，则说明外该研究是可信的。如果反之，则说明外在信度差。在信度差。 2021/4/256n3、判定研究工具或研究结果信度的方法、判定研

2、究工具或研究结果信度的方法n（1）重复法）重复法n 采用相同条件、相同方法进行重复测量、重采用相同条件、相同方法进行重复测量、重复研究（两次以上）的方法。复研究（两次以上）的方法。n 考察研究能否被自己和他人重复进行？若能考察研究能否被自己和他人重复进行？若能被重复进行，每次研究结果的一致性程度如何，被重复进行，每次研究结果的一致性程度如何，能否取得相同结果？可以对研究过程、研究工能否取得相同结果？可以对研究过程、研究工具、研究结果的信度水平做出直观的判定。因具、研究结果的信度水平做出直观的判定。因此，它是判定研究信度的基本方法。此，它是判定研究信度的基本方法。2021/4/257n（2）相似

3、法）相似法n 选择同质的、类似的或同类的研究活动，然后对这选择同质的、类似的或同类的研究活动，然后对这些活动的研究工作和研究结果进行分析比较，考察判些活动的研究工作和研究结果进行分析比较，考察判断它们的一致性程度，以判定研究工具、研究过程和断它们的一致性程度，以判定研究工具、研究过程和研究结果的可靠性的方法。实际上，由于种种原因，研究结果的可靠性的方法。实际上，由于种种原因，许多教育科学领域的具体研究活动没有被人们重复进许多教育科学领域的具体研究活动没有被人们重复进行，在这种情况下，相似法（例如，将某一特定研究行，在这种情况下，相似法（例如，将某一特定研究的结果与国内外同类研究的结果进行比较）

4、被作为判的结果与国内外同类研究的结果进行比较）被作为判定研究信度的一种常用方法。定研究信度的一种常用方法。2021/4/258n（3）独立评判法：这是对研究的操作者之间一致性的）独立评判法：这是对研究的操作者之间一致性的判定方法。判定方法。n 让参与研究活动的多名研究者同时对某一研究工具让参与研究活动的多名研究者同时对某一研究工具或研究内容（例如，一组被试的行为、操作水平等各或研究内容（例如，一组被试的行为、操作水平等各种表现）进行独立判断或评价，然后对评价结果的一种表现）进行独立判断或评价，然后对评价结果的一致性程度进行分析比较，从而判定研究者之间是否一致性程度进行分析比较，从而判定研究者之

5、间是否一致性的方法。在观察法、问卷法、访谈法、测验法、致性的方法。在观察法、问卷法、访谈法、测验法、实验法等研究方法进行的研究中，都可以使用此种方实验法等研究方法进行的研究中，都可以使用此种方法评判观察者、评定者、或记分者之间的信度。法评判观察者、评定者、或记分者之间的信度。2021/4/259n（二）研究效度（二）研究效度n1、研究效度的概念、研究效度的概念n研究效度是指研究的有效性和真实程度，研究效度是指研究的有效性和真实程度，是指研究结果的可靠性和普遍性，通俗的是指研究结果的可靠性和普遍性，通俗的说就是一个测验如果能测出预期想要测量说就是一个测验如果能测出预期想要测量的能力或特质时，这个

6、测验就是有效的，的能力或特质时，这个测验就是有效的，否则就是无效的。否则就是无效的。 2021/4/2510n2、分类：内在效度与外在效度、分类：内在效度与外在效度 内在效度是指研究人员控制外部变量的程度，是指内在效度是指研究人员控制外部变量的程度，是指研究结果能否被明确解释的程度。研究结果能否被明确解释的程度。内在效度通常要回内在效度通常要回答的问题是：研究结果是否真实可信？研究结果是否答的问题是：研究结果是否真实可信？研究结果是否是由所操纵的自变量引起？是由所操纵的自变量引起？ 外在效度是指研究结果的代表性和可推广程度，即研外在效度是指研究结果的代表性和可推广程度，即研究结果能否被推广到更

7、大范围的程度。究结果能否被推广到更大范围的程度。外在效度通常外在效度通常要回答的问题是：研究结果是否具有代表性并能解释要回答的问题是：研究结果是否具有代表性并能解释一般的情形？研究结果有多大的概括性？在类似情境一般的情形？研究结果有多大的概括性？在类似情境中能否验证研究结果？中能否验证研究结果？2021/4/2511n3、影响内在效度的因素、影响内在效度的因素n（1）偶然事件（）偶然事件（History）：偶然事件也）：偶然事件也有人译为有人译为“历史历史”，指研究过程中发生的，指研究过程中发生的，没有预料到的，会影响研究结果的因素。没有预料到的，会影响研究结果的因素。 n控制方法：设置一个对

8、照组加以控制，使控制方法：设置一个对照组加以控制，使偶然事件的效力对两个组的影响均等。偶然事件的效力对两个组的影响均等。 2021/4/2512n（2）成熟的过程）成熟的过程 (Maturation)n成熟是指在研究过程中被试生理或心理成熟是指在研究过程中被试生理或心理方面发生的变化。方面发生的变化。n控制的方法可以设置对照组，或缩短研控制的方法可以设置对照组，或缩短研究时间的周期。究时间的周期。 2021/4/2513n（3）前测效应）前测效应(Testing)n前测效应是指有前测的经历会对后测的效果前测效应是指有前测的经历会对后测的效果造成影响，有人称之为练习效应或热身效应。造成影响，有人

9、称之为练习效应或热身效应。 n一般来说，当研究者有理由怀疑前测会对研一般来说，当研究者有理由怀疑前测会对研究结果造成影响，或者前测很花费时间和经究结果造成影响，或者前测很花费时间和经费，那么最好避免采用前后测设计，仅采用费，那么最好避免采用前后测设计，仅采用后测设计。后测设计。2021/4/2514n（4）测量工具）测量工具 (Instrumentation)n指测量手段不统一产生的负面效果。如指测量手段不统一产生的负面效果。如果用来测量研究结果的工具，在前测与果用来测量研究结果的工具，在前测与后测中所用的内容、难度都不一样，就后测中所用的内容、难度都不一样，就难以确定研究结果的最终效果。难以

10、确定研究结果的最终效果。 2021/4/2515n（5）统计回归）统计回归 (Statistical regression)n统计回归是指多次测量研究对象时出现的一统计回归是指多次测量研究对象时出现的一种倾向，即对一个变量进行测试时，他们的种倾向，即对一个变量进行测试时，他们的分数出现两极分化，但当再次进行同样的测分数出现两极分化，但当再次进行同样的测试时，他们的分数更接近于平均数。试时，他们的分数更接近于平均数。n因此，实验设计中要避免选择测试特别好的因此，实验设计中要避免选择测试特别好的或特别差的被试，因此选择被试要随机化，或特别差的被试，因此选择被试要随机化，要有代表性。要有代表性。20

11、21/4/2516n（6）被试选择的偏差）被试选择的偏差 (Selection biases)n当必须采用两组被试进行比较研究，如果这当必须采用两组被试进行比较研究，如果这两组被试的能力、特质、条件、背景等因素两组被试的能力、特质、条件、背景等因素不相同，那么就会导致测验结果的差异，从不相同，那么就会导致测验结果的差异，从而混淆研究的效果。而混淆研究的效果。n控制样本偏差的措施是随机抽样，随机分组、控制样本偏差的措施是随机抽样，随机分组、随机分配实验处理，尽可能使实验组和对照随机分配实验处理，尽可能使实验组和对照组除了在实验处理上的不同外，在其他各种组除了在实验处理上的不同外，在其他各种条件上

12、做到均等、相似。条件上做到均等、相似。 2021/4/2517（7）实验样本的流失）实验样本的流失 (Experimental mortality)n实验样本的流失有的翻译为实验的偶然减员，实验样本的流失有的翻译为实验的偶然减员，是指在研究期间有些被试缺席或中途退出，是指在研究期间有些被试缺席或中途退出，以致前测与后测人数不符，样本失去代表性，以致前测与后测人数不符，样本失去代表性，而影响统计分析的结论。而影响统计分析的结论。n一般，流失的被试是在前测中成绩较差者，一般，流失的被试是在前测中成绩较差者，则样本后测的平均成绩会提高；反之，流失则样本后测的平均成绩会提高；反之，流失的被试是在前测中

13、成绩较好者，则样本后测的被试是在前测中成绩较好者，则样本后测的平均成绩会降低。的平均成绩会降低。 2021/4/2518n（8）选择与成熟的交互作用）选择与成熟的交互作用 (Interactions of selection and maturation)n研究中最忌讳的是变量的混淆，各种因素互研究中最忌讳的是变量的混淆，各种因素互相干扰，互相作用，以至于无法确切解释自相干扰，互相作用，以至于无法确切解释自变量和因变量之间的关系。在研究设计中，变量和因变量之间的关系。在研究设计中，由于被选取的两组被试具有不同的能力、特由于被选取的两组被试具有不同的能力、特质、条件，导致对以上各个因素产生不同的

14、质、条件，导致对以上各个因素产生不同的作用，从而影响研究结果。作用，从而影响研究结果。 2021/4/2519n（9）因果方向不明）因果方向不明 (Ambiguity about the direction of causal inference)n 在研究中分不清自变量和因变量的研究不多见，在研究中分不清自变量和因变量的研究不多见，但有时由于研究设计的不确切，导致在两个变量之但有时由于研究设计的不确切，导致在两个变量之间很难确定谁是因，谁是果，这种现象在相关性研间很难确定谁是因，谁是果，这种现象在相关性研究中尤为普遍。一旦因果关系不明，对研究结论的究中尤为普遍。一旦因果关系不明，对研究结论的

15、解释就会受到挑战。解释就会受到挑战。n 方法：做进一步的因果研究设计来探讨其中的方方法：做进一步的因果研究设计来探讨其中的方向关系。有较高的相关不一定具有因果关系，但具向关系。有较高的相关不一定具有因果关系，但具有因果关系必定有很高的相关。有因果关系必定有很高的相关。2021/4/2520n（10）实验处理的扩散）实验处理的扩散 (Diffusion of treatments)n 有时在实验研究中，实验组与对照组互相沟通，导有时在实验研究中，实验组与对照组互相沟通，导致主试或被试有可能把实验处理传递给对照组，对照致主试或被试有可能把实验处理传递给对照组，对照组可能会有意无意的模仿、运用、吸收

16、，产生与实验组可能会有意无意的模仿、运用、吸收，产生与实验处理相符的行为和活动，产生与实验组相同的结果。处理相符的行为和活动，产生与实验组相同的结果。n 这种实验处理扩散的结果就是：实验处理的效果会这种实验处理扩散的结果就是：实验处理的效果会被抵消。为了避免实验处理的扩散，应尽量将实验组被抵消。为了避免实验处理的扩散，应尽量将实验组与对照组的接触降到最低限度。与对照组的接触降到最低限度。2021/4/2521n（11）补偿性均等）补偿性均等 (Compensatory equalization of treatments)n在现场的教学实验研究中，实验处理往往是向在现场的教学实验研究中，实验处

17、理往往是向实验组被试提供较好的学习机会，提供具有吸实验组被试提供较好的学习机会，提供具有吸引力的材料（如采用多媒体教学，或试验新教引力的材料（如采用多媒体教学，或试验新教材），而对照组被试经常要被剥夺某种好的学材），而对照组被试经常要被剥夺某种好的学习机会或被认为有价值的东西，以配合实验组。习机会或被认为有价值的东西，以配合实验组。但是从教育伦理角度考虑，这样做对某些学生但是从教育伦理角度考虑，这样做对某些学生不公平，学生的学习和发展机会应该均等。因不公平，学生的学习和发展机会应该均等。因此，有时校方或行政管理人员会为他们提供有此，有时校方或行政管理人员会为他们提供有益于学习的活动或资源，作为

18、某种补偿，以示益于学习的活动或资源，作为某种补偿，以示均等。这种做法，将使对照组被试也有良好的均等。这种做法，将使对照组被试也有良好的学习表现，从而导致实验效果的混淆。学习表现，从而导致实验效果的混淆。 2021/4/2522n（12）补偿性的竞争（）补偿性的竞争（Compensatory rivalry）n补偿性的竞争指对照组被试在与实验组竞争时，表现补偿性的竞争指对照组被试在与实验组竞争时，表现出超常努力的现象。出超常努力的现象。 n补偿性的竞争这种现象在教育研究情景中常会发生。补偿性的竞争这种现象在教育研究情景中常会发生。如在新的教学方法与旧的教学方法比较研究中，对照如在新的教学方法与旧

19、的教学方法比较研究中，对照组被试往往会把实验情景看作一种竞争或威胁，或者组被试往往会把实验情景看作一种竞争或威胁，或者由于没有作为实验组心里不服气，从而加倍努力，以由于没有作为实验组心里不服气，从而加倍努力，以证明自己能力不亚于实验组。结果造成无法确定教学证明自己能力不亚于实验组。结果造成无法确定教学实验效果。实验效果。2021/4/2523n（13）自暴自弃（）自暴自弃（Demoralization）n自暴自弃是指被试由于得知未被选为实自暴自弃是指被试由于得知未被选为实验组产生的怨恨，并且故意怠工，失去验组产生的怨恨，并且故意怠工，失去自信心，表现比平时差，自甘堕落的现自信心，表现比平时差，

20、自甘堕落的现象。这样会导致实验处理效果突显，但象。这样会导致实验处理效果突显，但这种实验效果未必真实可靠。这种实验效果未必真实可靠。2021/4/25244、影响外在效度的因素、影响外在效度的因素n外在效度外在效度(external validity)是指研究是指研究结果的代表性或普遍性。具体说来，就结果的代表性或普遍性。具体说来，就是指研究结果是否可以推广到类似情景是指研究结果是否可以推广到类似情景中去的程度。中去的程度。 2021/4/2525n（1）取样的偏差）取样的偏差n由于抽样范围的限制，样本不具有代表由于抽样范围的限制，样本不具有代表性，无法将研究结果类推到样本以外的性，无法将研究

21、结果类推到样本以外的人群，从而影响研究的外在效度。人群，从而影响研究的外在效度。 2021/4/2526n（2）被试与实验处理的交互作用）被试与实验处理的交互作用n只要研究对象是人，就会具有个别差异。只要研究对象是人，就会具有个别差异。由于每个人的特质不同，对于实验处理由于每个人的特质不同，对于实验处理的反应也会不一样。交互作用就是不同的反应也会不一样。交互作用就是不同变量之间的影响相互不一致。变量之间的影响相互不一致。2021/4/2527n（3）研究变量与情景的叙述不清）研究变量与情景的叙述不清n外在效度关心的一个问题是：研究结果会不会因环外在效度关心的一个问题是：研究结果会不会因环境的不

22、同而变化，在研究情景中表现出的效果是否境的不同而变化，在研究情景中表现出的效果是否会在一般情景中再现，换句话说，就是能否会在一般情景中再现，换句话说，就是能否“复复制制”。任何研究均需界定研究变量，并说明研究情。任何研究均需界定研究变量，并说明研究情景，给人以操作的程序和测量的标准。如果研究变景，给人以操作的程序和测量的标准。如果研究变量没有明确界定，研究情景也不交代清楚，他人便量没有明确界定，研究情景也不交代清楚，他人便无法知晓研究的程序和方法，也无法了解研究结果无法知晓研究的程序和方法，也无法了解研究结果的真实性和适用范围，研究的推广解释就会受到限的真实性和适用范围，研究的推广解释就会受到

23、限制。因此，研究设计过程中，必须界定研究变量，制。因此，研究设计过程中，必须界定研究变量，下操作性定义，规定研究的情景和条件。下操作性定义，规定研究的情景和条件。2021/4/2528n（4）重复测验的干扰）重复测验的干扰n重复测验的干扰是指前测对后测的影响重复测验的干扰是指前测对后测的影响或交互作用，前测的内容或程序可能会或交互作用，前测的内容或程序可能会引起被试的对某些论题或事物的注意和引起被试的对某些论题或事物的注意和敏感，往往会影响后测的成绩。敏感，往往会影响后测的成绩。2021/4/2529n（5）实验安排的反作用）实验安排的反作用n实验安排的反作用是指由于实验情境的安排，实验安排的

24、反作用是指由于实验情境的安排，被试知道自己正在被观察或正在接受实验处被试知道自己正在被观察或正在接受实验处理而产生的一种实验效应（霍桑效应）。被理而产生的一种实验效应（霍桑效应）。被试往往会投实验者之所好，改变自己原来的试往往会投实验者之所好，改变自己原来的常态行为，表现更积极，更努力，提供实验常态行为，表现更积极，更努力，提供实验者所期望的行为。这样往往会对实验效果的者所期望的行为。这样往往会对实验效果的推论造成影响。推论造成影响。 2021/4/2530n（6）新颖的干扰）新颖的干扰n由于实验情景是经过特别安排的，其内由于实验情景是经过特别安排的，其内容、程序、步骤、环境等都可能给被试容、

25、程序、步骤、环境等都可能给被试带来新奇感，由此会激发被试的参与热带来新奇感，由此会激发被试的参与热情，进而促使实验效果的提高。情，进而促使实验效果的提高。 2021/4/2531n（7）实验者效应）实验者效应n实验者效应指在实验情景中，实验者或主试实验者效应指在实验情景中，实验者或主试的行为、外表对被试行为的影响。实验者或的行为、外表对被试行为的影响。实验者或主试的仪表容貌、言语风格、性格特征、行主试的仪表容貌、言语风格、性格特征、行为习惯等，会潜移默化、无意间影响被试的为习惯等，会潜移默化、无意间影响被试的行为表现，这种影响会导致研究结果不能推行为表现，这种影响会导致研究结果不能推广到不同实

26、验者的其他同类研究中去。广到不同实验者的其他同类研究中去。 2021/4/2532n（8）特殊事件的影响）特殊事件的影响n在研究期间可能会发生许多意想不到的在研究期间可能会发生许多意想不到的事，这些事是事先无法估计到，但是却事，这些事是事先无法估计到，但是却会影响研究的结果。如果将这样的研究会影响研究的结果。如果将这样的研究结果去推论解释一般情况下，无类似特结果去推论解释一般情况下，无类似特殊事件时，则类推结果就会受到一定的殊事件时，则类推结果就会受到一定的限制。限制。 2021/4/2533n（9）因变量的测量）因变量的测量n因变量的测量是研究结果的依据，因此因变量的测量是研究结果的依据，因

27、此因变量的操作性定义和测量工具成了决因变量的操作性定义和测量工具成了决定研究结果的关键因素。定研究结果的关键因素。2021/4/2534n（10）时间效应（）时间效应（the effect of time）n任何实验必须要有后测，研究结果只有通过后测才任何实验必须要有后测，研究结果只有通过后测才能显现。但是有些实验处理的效果是隐晦或不完整能显现。但是有些实验处理的效果是隐晦或不完整的，有些结果具有即时性，只有在实验后立即实施的，有些结果具有即时性，只有在实验后立即实施后测才能显示效果。通常实验研究均在实验处理之后测才能显示效果。通常实验研究均在实验处理之后立即测量实验效果，但此时所测得的效果，

28、有时后立即测量实验效果，但此时所测得的效果，有时因变量还没有来得及发生变化。另一方面，也有这因变量还没有来得及发生变化。另一方面，也有这样的可能性，实验效果产生很快，即刻效应明显。样的可能性，实验效果产生很快，即刻效应明显。较长时间后，效应未必存在或保持不变。较长时间后，效应未必存在或保持不变。 2021/4/25352021/4/25363、抽样的基本步骤、抽样的基本步骤n1）界定总体）界定总体n2）确定样本容量）确定样本容量n3）选择抽样方法并选取样本）选择抽样方法并选取样本n4）统计推论）统计推论2021/4/25374、抽样的基本方法、抽样的基本方法n1）简单随机抽样）简单随机抽样:简

29、单随机取样法就是按照随机原则直接从总体简单随机取样法就是按照随机原则直接从总体N个单位中，抽取出若干个单位作为样本的方法。主要有抽签法、个单位中，抽取出若干个单位作为样本的方法。主要有抽签法、随机数字表抽样法随机数字表抽样法n缺点：缺点：P117n2）分层随机取样法是先将总体按一定标准分为若干类型（统计）分层随机取样法是先将总体按一定标准分为若干类型（统计上称为层），再根据类型的数量在总体数量中所占的比例（或比上称为层），再根据类型的数量在总体数量中所占的比例（或比率），确定从各类型中抽取样本的数量，然后按随机原则和所确率），确定从各类型中抽取样本的数量，然后按随机原则和所确定的各层抽取样本的

30、数量，从类型中抽取样本。定的各层抽取样本的数量，从类型中抽取样本。n优点：代表性和推论的精确性较好。优点：代表性和推论的精确性较好。n局限性：要求对总体各单位的情况有较多了解，否则就难以作出局限性：要求对总体各单位的情况有较多了解，否则就难以作出科学的分类。科学的分类。 2021/4/2538n（3）等距随机抽样法是根据事先已有的总体中各个体）等距随机抽样法是根据事先已有的总体中各个体的排列顺序编号，用总体的排列顺序编号，用总体N除以样本容量除以样本容量n，求得抽样，求得抽样间隔，然后再按抽样间隔，随机抽取样本。间隔，然后再按抽样间隔，随机抽取样本。n优点：比简单随机抽样更简便，其样本代表性更

31、好，优点：比简单随机抽样更简便，其样本代表性更好，抽样误差较小；抽样误差较小；n缺点：如果总体中个体的排列存在周期性的波动或变缺点：如果总体中个体的排列存在周期性的波动或变化，系统取样所得的样本就可能出现系统偏差。化，系统取样所得的样本就可能出现系统偏差。n（4）整群随机抽样法又称团体小组取样，是先将总体）整群随机抽样法又称团体小组取样，是先将总体单位按一定的标准分成许多群（小组），然后按随机单位按一定的标准分成许多群（小组），然后按随机原则从这些群中抽取若干群作为样本。原则从这些群中抽取若干群作为样本。n优点：样本比较集中，易于组织，可节省人力、物力优点：样本比较集中，易于组织，可节省人力、

32、物力和时间；和时间；n缺点：样本分布不均匀，代表性较差，抽样误差较大。缺点：样本分布不均匀，代表性较差，抽样误差较大。 2021/4/2539n（5）多段随机取样又称系统取样、阶段取样，）多段随机取样又称系统取样、阶段取样，是先将研究总体各单位按一定标准分成若干个是先将研究总体各单位按一定标准分成若干个群，作为抽样的第一级单位，然后再根据一定群，作为抽样的第一级单位，然后再根据一定标准把第一级单位分成若干个子群，作为抽样标准把第一级单位分成若干个子群，作为抽样的第二级单位。如此类推，在各级单位中依照的第二级单位。如此类推，在各级单位中依照随机原则抽取样本。随机原则抽取样本。n优点：可综合运用各

33、种抽样方法，简便易行，优点：可综合运用各种抽样方法，简便易行，节省经费，对研究总体范围大、单位多、情况节省经费，对研究总体范围大、单位多、情况复杂的情况十分有效；复杂的情况十分有效；n缺点：抽样误差相对于简单随机取样大。缺点：抽样误差相对于简单随机取样大。2021/4/25405、影响样本容量的因素、影响样本容量的因素n1）研究目的）研究目的n2）研究经费与时间的限制）研究经费与时间的限制n3）研究问题的特点）研究问题的特点n4）抽样方法）抽样方法n5）研究对象总体的同质性）研究对象总体的同质性n6）研究实施过程中的具体情况）研究实施过程中的具体情况2021/4/2541n7）研究所使用的测量工具的可靠性）研究所使用的测量工具的可靠性n8）研究所使用的统计方法）研究所使用的统计方法n9）研究结果精确程度的要求）研究结果精确程度的要求2021/4/25426、样本大小的经验性确定、样本大小的经验性确定n描述研究、调查研究中，样本应占总体的描述研究、调查研究中，样本应占总