实验心理学和心理学研究方法.doc

.Experimental Psychology & Research Methods1. What is science?1.1 Method of Acquiring KnowledgeTenacity: based on superstition or habit Intuition: not based on reasoning or inferring,the problem is that it doesnt provide a mechanism for separating accurate from inaccurate knowledge.Authority: the information stated by the authority may be inaccurate.Rationalism/Reasoning: it doesnt necessarily reflect reality and frequently doesnt provide accurate information.Empiricism: based on experience, our perceptions are affected by a number of variables and they may be not necessarily true.1.2 Scientific Method1. Identifying a problem明确操作定义，建立研究假设2. Designing the experiment选择研究设计3. Conducting the experiment and collecting the data实施实验，收集数据4. Analyzing the data & Testing hypothesis分析数据并呈现结果和得出结论5. Communicating the research results报告/发表研究成果科学心理学的逻辑 假设演绎范式是左右心理学发展的主要科学模型。e.g., (a) if两周大的婴儿寻找一对变化的视觉刺激，then他们会花更多的时间注视更复杂的那一个。(b)婴儿的确花更多的时间注视更复杂的视觉刺激。(c)因此，婴儿偏向于视觉变化性的理论得到支持。在这里，不能说成理论被证明为真。科学理论不能被证实，但必须可证伪。理论是被证据支持的，而不是被证明为真的。正面的结果仅仅表示它们对理论的支持。1.3 Characteristics of Scientific Approachl 客观性/实证性：强调用直接观察和实验的方法来研究问题。l Control: control the unrelated variables l Operationism: operational definition l Replication: the reproduction of the results of a study, that is, the data must be reliable.l 价值性：l 创新性：创新是在前人研究基础上的创新，需要站在巨人的肩膀上。朱滢(2006)认为，只要能在Roediger & Meade (2002)记忆实验的四面体模型(See Fig.1)四个维度中的任何一个方面有所创新，实验结果就会有新意。l 证伪性：心理和行为是复杂的，研究者可能没有考虑到影响某一现象的所有因素。而且，研究结果正确与否是概率性的。l 伦理性：Fig. 1 记忆实验的四面体模型1.4 Objectives of ScienceDescription描述(现象)描述研究：描述事件及事件间的关系，通常使用分析与综合、比较与分类、归纳与演绎等逻辑分析方法对事件进行详细、准确和系统的说明。主要使用科学观察法来全面准确地描述行为。为了达到这个目的，需要在不同情境和时间里对代表性的行为样本进行观察。个案研究属于描述研究，其弱点是不能重复，结论也不具有概括性，但这不是其主要目的，它可能是为了反驳一种观点。 Prediction预测(行为)相关研究：确定变量间的共变关系，从而提示可能存在的因果关系，但纵向研究的交叉滞后设计(cross-lagged design)可以得出近似的因果关系，实例见Eron et al. (1972), Lefkowitz et al. (1977) & Huesman et al. (2003)的研究。Explanation解释(原因)实验研究：主要用来确定因果关系，但也可考察相关关系。确定原因的三个条件-事件之间具有共变和时序关系以及排除了事件发生的其他可能性。Applacation应用(结果)：1.5 Basic Assumptions Underlying Sciencel Reality in Nature:l Rationality:l Regularity:l Discoverability:1.6 Ethics & Ethical Guidelines1.6.1以人为被试的研究 对被试个人信息保密confidentiality and anonymity1.6.2以动物为被试的研究1.6.3 Ethics Dilemma科学研究的伦理与悖论问题l 被试需要知情同意与自愿informed consent 欺骗deception(debriefing)l 被试可以随时退出no coercion and freedom to decline participation 样本的代表性l 保证被试安全，不受身心伤害beneficence 有价值的研究2.研究设计类型2.1 Nonexperimental Research Approaches2.1.1 Nonexperimental Research Correlational Study Ex Post Facto Study Cross-Sectional Study, Longitudinal Study & Sequential Study横断设计：同时从总体中抽取多个样本，重点是描述总体特征或者多个总体间的差异，适合旨在进行描述与预测的研究。追踪设计：在一段时间内多次使用同一问卷调查同一样本。可以确定个体态度与行为变化的方向和程度。序列设计/聚合交叉设计：同一总体中不同样本在不同时间完成同一套问卷。评估随着时间变化，人们态度或行为的改变。 Meta Analysis2.1.2 Qualitative Research1. Phenomenonology: the description of an individual or group of individuals conscious experience of a phenomenon2. Ethnography: that is participant observation 3. Case Study: 是在自然情境中对一个或几个单一样组被试的行为进行详细地描述和分析。它在本质上是探索性的，有利于研究者提出新的假设，为新的治疗和罕见现象的研究提供机会。它可以通过提供反例的方式促使我们对有关科学问题进行思考，是对群体研究的一个补充。但是，由于它很少对无关变量进行控制，因而难以进行有效的因果推论。其结果能否推广到更大的群体取决于个案所来自的总体的变异情况。研究结果很难再现，因此并不被大多数社会科学家所使用。2.2 The Experimental Research Approach2.2.1 Basic Questionsl Cause Relationship: Mill(1874)s four methods: 1. Method of agreement：如果有X就有Y，则X是Y的充分条件。2. Method of difference：如果没有X就没有Y，则X是Y的必要条件。3. Joint methods of agreement and difference：如果有X就有Y，没有X就没有Y，则X是Y的充要条件。这是心理学实验组间设计的逻辑。4. Method of concomitant variation:Psychological experiment is objective observation of phenomena that are made to occur in a strictly controlled situation in which one or more factors are varied and the others are kept constant.l Advantages & Disadvantages of the Experimental Approach:1. Advantages: Casual inference; Casual explanation; Control-eliminating noise and extraneous variables; Ability to manipulate variables.2. Disadvantages: Doesnt Test Effects of Nonmanipulated Variables; Artificiality; Inadequate Method of Scientific Inquiryl Experimental Research Settings: Field or Laboratory Experimentation?l Problem Identification & Hypothesis Formation:1. Sources of Research Ideas: Everyday Life, Practical Issues, Past Research and Theory. 研究问题的选择标准：个人兴趣与社会需要相结合、创造性与科学性相统一、可行性与节约性相结合。2. Review of Literature: A review of the literature will tell you whether the problem you have identified has already been researched; may give you ideas as to how to proceed in designing the study; can point out methodological problems specific to your research question; will provide needed information for preparing the research report (why to write a literature review). Write a brief historical literature review: Find a specific question or topic you are interested in (Pick a topical area of interest question), then use the precise terms or phrases to try to research all the relevant literature; Organize the relevant information that is going into your paper; Write a final draft and outline that follow product guidelines (How to write a literature review). Select an interesting/valuable research problem and define/narrow your topic area. For example, you may be interested in depression. However, the topic of depression is very broad and would be unmanageable because it includes everything about depression from causes to treatment. If you narrow this topic to something like relapse of depression, you have a more manageable topic.3. Feasibility of the Study4. Formulating the Research Problem and the Hypothesis:Specify the question：what relation exists between 2 or more variable? A good problem must meet 3 criteria：(a) The variables in the problem should express a relationship. (b) The problem should be stated in question form: “ What is the effect of.? ” (c) The problem should be such as to imply possibilities of empirical testing. After identifying a question, make predictions of possible relationships among variables.The hypothesis must meet 1 criterion：A hypothesis must be stated so that it is capable of being either refuted or confirmed.2.2.2变量(Types of Variables)l Discrete and Continuous Variables: l Qualitative and Quantitative Variables: Qualitative Variable is a variable that varies in kind, while the latter is a variable that varies in amount.l Variables Used in Experimentation: Independent Variables(IV), Dependent Variables(DV), Confounding Variables(CV)IV (包括刺激变量和被试变量) has been defined as the variable manipulated by the experimenter. IV must be presented in at least two forms (presence vs. absence). How many IVs should be used in an experiment？Unfortunately, no rule can be stated to answer this question. Generally speaking, the number is favored from 1 to 3. Watch out for subject variable & classification variable.DV has been defined as the behavioral variable designed to measure the effect of the variation of the IV. The DV should be sensitivity to the effect of the IV. Indexes of DVs should be used by several different techniques. 良好DV指标的标准：有效性和精确性、可靠性和稳定性、敏感性和区分性(否则容易造成天花板或地板效应)、适宜性(是否适用于被试和所测量的对象)。DV指标及其获取方法：1. 生理指标：皮电、心血管指标(心率、血压、血流量)、呼吸率、脑电波.2. 行为指标：频率、反应时和正确率、面积、强度.3. 心理指标：等级评定、分数.观察法和访谈法主要获取行为指标；仪器法主要获取生理指标和部分行为指标；问卷法和测验法可以获得心理指标。NOTICE:低相关的原因：全局限制：DV变化范围较小；不满足使用的相关前提假设。CV is uncontrolled variables that change along with (covary with) our IV. 典型的CV是实验者效应(罗森塔尔效应，使用双盲程序；通过计算机呈现；将CV作为自变量或控制变量)和要求特征(霍桑和安慰剂效应)。Control Techniques: CV可通过消除法Elimination、抵消平衡法Counterbalancing (order effect)、恒定法、随机化法Randomization Random selection: selecting people at random from a defined population to assure your sample is representative of the total population. Random assignment: randomly assigning a sample of individuals to a specific number of comparison groups in order to keep participants same in all groups.和匹配法Matching (Each participant is matched with another participant on selected extraneous variables.)、纳入自变量法、统计控制法进行控制。NOTICE: 零结果的原因：IV水平间变化太小；DV不敏感，测量范围较小容易造成天花板或地板效应；CV没有得到控制，污染了结果；可能IV与DV本身就无关。2.2.3实验设计l Between-participants design：虽然能够排除练习、遗留和顺序效应，但不能完全排除个体差异对实验结果的影响，此时可以通过随机分配或匹配被试尽可能减少个体差异。 NOTICE: 个体差异的重要性显而易见。因而，人们可能会猜想，在他们的研究中，大多数心理学家会包括对个体差异的系统调查。事实上，情况并非如此。大多数研究者比较参与者所在组的差异，而忽略个体差异。忽视个体差异的一个理由是，行为更依赖于情境而非人格。撒拉逊等人(Sarason et al.，1975)对这个问题进行了研究。他们对138个实验研究进行了分析，探讨人格和情境在决定行为上的作用。这些研究由不同的研究者完成，研究的问题也各种各样。平均起来，人格和情境对行为的影响非常接近，情境的影响较人格只是略强一些。按照这个发现，那种认为行为很少取决于人格个体差异的观点就是错误的。1. 随机组设计Simple randomized participants design：2. 匹配组设计Matched participants design：所谓回归假象是指向平均数的回归，当我们从总体中挑选出极端分数组进行重测时，第二次测得的分数更接近于整个总体的平均数。我们在研究中经常会使用匹配技术，这时就可能有回归假象效应存在。如果在第一次测验的基础上对两组进行匹配，倘若研究者从通常做得很差的组中挑出高分者，从通常做得很好的组中挑出低分者，即使没有给予两组不同的实验处理，研究者仍可以预期他们在第二次测验中得分会很不同，其原因仅仅是因为向平均数回归。比如，将一组黑人儿童和一组白人儿童在诸如年龄、性别以及最重要的最初阅读成绩等几个维度上进行了匹配。对两组儿童都实施阅读提高计划，计划实施完之后再次测查阅读分数。我们发现，出乎我们意料的是，非洲裔美国儿童在接受阅读计划之后比以往更差，而白人儿童则有所提由于非洲裔美国儿童的分数要比白人儿童低。为了对这样两个样本进行匹配，必须选择比平均数水平要高的黑人儿童和比平均数低的白人儿童。选择了这两个极端组，由于向平均数回归，在重测时，黑人儿童的得分更低，而白人儿童则更高，即使在阅读提高计划没有任何作用的情况下。特殊的高分组非洲裔美国儿童和低分组白人儿童都向组平均数回归了。即使在没有任何计划，儿童只是被简单地重复测验的情况下，此类情形也会发生。l Within-participants design：虽然排除了个体差异对实验结果的影响，但难以排除遗留效应(组间设计)。此外，还要避免练习效应(包括疲劳效应，可抵消平衡)和顺序效应(抵消平衡、随机化)。数据分析时，要比较Premeasure-Postmeasure Difference (Y1-Y2)。小样本设计(ABAB设计和多基线设计)是被试内设计的一种变式。Time series Design：ABA、ABAB, but failure to rule out a history effect.ABAB Design 研究者使用此设计来观察行为是否在处理变量引入后马上发生变化(B)，当处理撤除后，行为是否返回到基线水平(A)。当处理变量再次引入后，行为是否仍会发生变化(第二个B)。如果行为随着处理变量的引入与撤除而相应地发生变化，那么就可以下结论说是处理导致了行为改变。当处理撤除后，行为未返回到基线时，也不能肯定地说是处理导致了行为改变。这种情况可能是实验处理产生了持久的积极作用。此时，只能放弃使用这种设计。还有可能是，无关变量是导致行为变化的原因。比如，个体在接受处理后获得了社会支持，导致变化的行为很持久。此外，使用这种设计还可能面临伦理问题。比如，撤除一个对患者有效的治疗可能是不道德的。Multiple-Baseline Design 不要求撤除实验处理，但需要建立多条基线。 在不同时间里，对不同情境或行为引入同一实验处理，如果行为相继在多条基线上都发生改变，那么就可以说明处理的有效性。例子：在不同情境下对个体的行为施加处理。1. 在行为通常发生的各种情境中分别记录行为发生的频率。2. 在某一情境中引入实验处理，继续观察所有情境下的行为频率。关键特征是：每次引入的处理只施加某一情境的基线条件。在接受处理的情境下，行为应有所改善，而在其他未接受处理的情境下，行为不会有较大改变。下一步是在第二个情境中施加处理(第一个情境下的处理继续施加)，记录行为频率。依此类推，直到最后一个情境(See Fig. 2)。多基线设计有几种变式，多基线可以是不同个体(跨个体多基线设计)、同一个体的不同行为(跨行为多基线设计)、同一个体处在不同的情境(跨情境多基线设计)。基线通常是三四条，两条通常不够。当基线阶段的行为波动较大时，很难判断实验处理的效应。一种解决的方法是找出情境中可能导致变异的因素，将其清除。 Fig. 2 多基线示意图l Mixed design：一个变量作为被试间变量，另一变量作为被试内变量。多自变量设计可以检验交互效应，而交互效应在解决矛盾的结果时起到了重要作用。l Quasi-experimental design：Participants are not randomly assigned or all extraneous variables are not controlled. 这种设计未对IV进行操纵，但使用实验的方法搜集、整理和分析数据。常见的是，选择某个特征不同(比如年龄、性别、种族)的被试，然后比较其行为。由于是Nonequivalent comparison group design，因此统计分析时要比较Postmeasure-Premeasure Difference。包括横断设计(Kohlberg, 1969; Meilman, 1979)、纵向设计(Lefkowitz et al., 1977)和聚合交叉设计。由于是选择个体差异变量而非操纵变量，因此难以进行因果推论。然而，如果在其他无关变量上进行控制或匹配，就能较为自信地得出因果推论。但是，匹配可能不成功。也可能出现回归假象。2.2.4实验研究的信度与效度(Reliability & Validity)1. 实验效度是指实验方法能达到实验目的的程度，也就是实验结果的准确性和有效性程度。实验效度包括内部效度和外部效度。Internal Validity refers to the extent to which we can accurately infer that the IV caused the effect observed on the DV, that is, IV and DV are causally related. l Threats to internal validity:Experimenter effects: the experimenters attributes, expectancies and bias influence the responses made by the research participants. The physical and psychological characteristics (e.g., looks, expression, speech) of an experimenter that may create differential responses in participants. Being held onstant & 指导语必须标准化。实验者的期望又叫罗森塔尔或皮革马利翁效应，是实验者对被试的影响。如果我们给某人贴上标签，则其他人会对此标签作出反应，并在此人身上看到一些实际上不存在的特征，以至于被贴标签的人由此真的发展了那些特征。使用双盲法可以解决这个问题。实验者的偏见决定了选择哪些行为进行观察，这会导致系统误差。为了消除这种影响，可以使用自动化装置、单盲法(不让观察者知道研究目的)。Participant effect/demand characteristics: 被试期望，典型的例子是霍桑效应和安慰剂效应 前者是由于个体知道自己正在被研究而引起的效应。当人们知道自己正被观察时，经常会改变行为，这种变化的行为将不再代表观察者不在场时的一般行为。可以使用自然观察和参与观察使观察者的角色被掩藏起来，从而使被观察者不知情。使用安慰剂控制组、单盲或双盲程序。后者是被试也经常试图以他们想象中研究者所期望的方式做出反应，以此来取悦研究者。为了消除这种影响，使用单盲法隐蔽测量；不让被试了解研究的细节。(placebo effect)，其他的还有social desirability、response set 社会赞许性是被试以社会期许、接纳的方式作出虚假反应。加入测谎项目(EPQ)，用谚语度量想要测量的东西(Kline, 1993)。反应定势是被试倾向于在一个方向上做出反应，比如，倾向于折中反应、答是倾向。检测反应定势的技巧是，包含相互对立反向的项目。疲劳和新奇效应(novelty effect)通过抵消平衡来排除。Regression artifact: The tendency for extreme scores to become less extreme on a second assessment.Attrition: Some people dont show up for the study or dont complete it.Maturation: Changes in biological & psychological conditions that occur with the passage of time.Testing: Changes in a persons score on the second administration of a test as a result of previously having taken the test. 练习效应：后测分数会因为前测对测验的熟悉性得以提高；也可能是被试记住了前测的答案。Statistical Conclusion Validity: 涉及数据分析方法的准确性。Instrumentation: Changes in the assessment of the DV.Selection: The choice of participants for the various treatment groups is based on different criteria.Additive & interactive: The combined effect of several threats to internal validity.History: Any event occurring after the treatment is introduced that could produce the observed outcome. Intratreatment interaction:recording errors:l Resolution: Assign participants to conditions randomly; Hold many extraneous variables constant across conditions; Standardize your procedures and materials.External Validity is the generalizability of the findings/the extent to which the result can be generalized across variations in people, settings/environment, treatments, outcomes, and times. 研究结果推广到不同总体、时间、情境和条件中的程度。l Threats to external validity:实验环境的人为性：One threat comes from the conditions that you imposed on the time, setting and task for the purposes of control.被试样本缺乏代表性：Another potential limit stems from your participants.The findings of studies based on samples of undergraduate cant be generalized to other populations.测量工具的局限性l Resolution: 可以通过情境抽样、自然观察等方法来提高观察结果的外部效度。Relationship Between Internal and External Validity: There tends to be an inverse relationship between internal and external validity. When external validity is increased, internal validity tends to be sacrificed or suffer (Kazdin, 1980). 不能逻辑地认为完全人为化的实验结果不可以被用于真实情境中。在心理学中，我们经常希望概括支持假设的理论(即强调内部效度)，而不是概括研究结果(Leary, 1995)。Stanorich (19 92)认为，“但这不是真实生活”的抱怨不是对实验研究的有效批评。2. Reliability refers to consistency, stability, or the repeatability of results. Measurement error makes reliability decreases.l Threats to external validity: 样本特征：样本容量大，信度就高；样本团体异质性越大，分数分布范围就越广，则实测分数的方差就越大，从而信度就越高。测验本身：所用测验是否具有较高的信度和效度。实验信度其实就是实验的可验证性问题。要保证实验信度，就应鼓励研究者进行验证性实验，这样即使推断统计显示仍存在犯错误的可能，但实验结果也是可信的。有三种类型的实验验证：直接验证、系统验证和概念验证 直接验证指在尽可能保持原实验方法的情况下在实际中重复实验。系统验证：指实验者试图变化那种先前被认为与实验结果不相关的因素，若原始实验中发现的某种现象是真的，那么尽管重做时其中一些因素发生了变化，原来的实验结果应该仍然会出现。若重做时原始实验的结果不再产生，那么研究者就在他的实验中发现了重要的边界条件。概念验证指研究者试图验证一个现象，但在某种程度上又与原先的实验有很大的不同，其目的也在于描述某一心理现象的边界条件。3.数据收集的方法 数据可以通过观察和调查的方法来获得。观察常常借助于仪器，调查或者通过访谈的形式，或者通过问卷的形式。3.1观察法3.1.1观察的基本问题观察什么？选择与研究课题相关的行为进行观察。行为取样和事件取样。在哪观察？自然情境or实验情境？什么时间观察？时间取样观察方式？结构化观察or自由观察？观察结果记录在预定的框架中还是以某种开放、定性形式收集资料？直接观察or间接观察？被试是否意识到自己正被观察？3.1.2观察的种类按照观察者干预的程度，可以分为自然观察和干预观察。自然观察Naturalistic Observation 是在自然情境下观察行为，研究者没有任何干预。其主要目的是描述正常发生的行为并且调查行为所涉及的变量间的关系。出于伦理道德的考虑，某些行为难以或者不能控制，此时使用自然观察来获取数据。干预观察 是由于某些事件不易发生，因此需要干预使其出现。常见的方法有：参与性观察(如果被试知道自己正被观察，他们的表现就可能会与平时不同；如果观察者被同化，那么结果也不会客观)、结构化观察和现场实验。l 无干扰观察和无干扰测量是预防被试反应性的两个方法。无干扰观察通常是借助于仪器(比如特殊的摄像机)记录被试自然情况下的行为，以防止被试意识到自己正被观察而做出不自然或虚假的反应。另外，当主试融入观察对象成为其中的一员时，这种参与性观察也属于无干扰观察，因为被试不会意识到正被观察，其反应是自然的。无干扰测量是由对行为的间接观察构成的，它测量的是行为的结果，而不是行为本身。比如，不是与大猩猩一起生活，而是观察它们的活动对环境造成的影响。它与无干扰观察最关键的区别在于被试与主试是否同时处在同一地点。若在同一地点，主试就试图无干扰观察被试；反之，主试间接测量被试的行为结果。3.1.2观察者信度称名数据的信度r =观察者一致次数/总观察次数*100% r83%较好，等距数据的信度r0.85较好。3.2 The Survey3.2.1调查的基本问题调查途径：访谈or问卷？问卷主要用于评估个体的偏好与态度，需要抽取一个具有代表性的样本。调查方式：直接or间接？face-to-face method or telephone/ mail/method调查内容：结构性/封闭or非结构性/开放？调查人数：个别or群体？3.2.2 QuestionnaireQuestionanaire Form: electronic survey or paper survey?Questionanaire Construction: open or closed-ended question? Question Wording: each question only include a issueOrdering of the QuestionsQuestionanaire LengthQuestionanaire Reliability & Validity Kline(1993)提议，最好的自评量表是是采用整数计分点，一般是7点，以图例显示，并附有文字说明。Guilford(1956)的研究表明，一个量表的信度随计分点的增加而提高，在7点量表上达到最高，以后逐渐下降。Assessment of Questionanaire Reliability：Test-retest reliability, Split-half, Euivalent formsQuestionanaire Validity refers to the correctness or truth of an inference, involing content validity, criterion- related validity, construct validity. 表面效度：在受测者看来，测验题目表面上是否可以测出想要的测量的东西？内容效度：是否在深度和广度上包含了该领域专家所认为的合适的内容？效标效度：是否存在验证测验的外在标准？与其他同类测验是否一致？结构效度：产生测验的理论假想结构是否得到了证实？3.2.3 Interview优点：能在短时间内搜集到大量数据；能够探讨相关关系。缺点：难以确定因果关系，但可以采用路径分析统计技术对相关研究做出因果性解释(Valentiner, Holahan, & Moos, 1994; Holmbeck, 1997)。报告行为与实际行为不一致：由于调查对象知道自己的反应会被记录，迫于社会压力，会表现出不真实回答的行为。4.如何阅读和撰写研究报告4.1如何检索和获取文献4.1.1 Search for Literature (Word wide web)l or l PsycINFO and Psychological Abstracts(APA)4.1.2 Obtaining Resourcesl Download the literature(PDF) directly from the web page(googles web and authors personal web).l Search your library and download or copy.l Send an e-mail to the author(s) to get/request.4.2论文的组成部分4.2.1研究综述的构成l Introduction of the basic problem or questionl Development of the discussion of the probleml Conclusion4.2.2研究报告的构成(Sections or Outline of the Research Report)l Title：l Abstract：l Introduction：What you did & Why you did itl Metnod：How you did itl Results：What you found (including details of how you analysed the data)l Discussion：What you think it showsl References：Provide who found or claimed something and when. l Appendices (if any)See APA format： /faculty/ddegelman/index.cfm?doc_id=796 4.3研究综述和报告的撰写4.3.1综述的写作l Introduction of the basic problem or question:a. Purpose in writing the paperb. How the problem is to be discussed in the paperc. Definition of relevant termsl Development of the discussion of the problem:a. Specific evidence for an idea, position or claimb. Specific evidence against an idea, position, or claiml Conclusion:a. Review and summary of main points of the discussionb. Evaluation of the evidence or main points of the discussion and conclusion about the question4.3.2报告的写作 The purpose of a research report is