第十二章健康促进规划的评价

1、评价评价( (evaluation)evaluation)：是把客观实际与可接受标是把客观实际与可接受标准进行比较。准进行比较。规划评价：是全面检测、控制、保证规划方规划评价：是全面检测、控制、保证规划方案设计先进性、是否实施成功并取得应有案设计先进性、是否实施成功并取得应有效果的关键性措施，贯穿于规划设计、实效果的关键性措施，贯穿于规划设计、实施和评价的始终。施和评价的始终。l提高规划设计与评价水平提高规划设计与评价水平l增加社会学家、行为学家和生物医学家的增加社会学家、行为学家和生物医学家的合作合作l提高与改善政策分析提高与改善政策分析l规划目标的定量化规划目标的定量化l制定实践标准制定实

2、践标准l改善测量指标改善测量指标1、规划设计者没有把评价设计列入总体规划，在、规划设计者没有把评价设计列入总体规划，在规划中没有明确的目标和目的，没有进行基线调规划中没有明确的目标和目的，没有进行基线调查，使评价工作无法实施；查，使评价工作无法实施；2、认为评价工作是耗时、耗费的工作，由于项目、认为评价工作是耗时、耗费的工作，由于项目资金有限，而忽视了评价工作；资金有限，而忽视了评价工作；3、认为行为与环境的干预需要很长的、认为行为与环境的干预需要很长的“潜伏期潜伏期”方可发生改变，或一经改变也不持久，难以评价；方可发生改变，或一经改变也不持久，难以评价；4、自行设计的评价标准与专业标准不统一

3、；、自行设计的评价标准与专业标准不统一；5、在实际工作中难以确定因、在实际工作中难以确定因-果关系，效果难以确果关系，效果难以确定；定；6、缺少评价专业人员或专业人员中途离去；、缺少评价专业人员或专业人员中途离去；7、领导者为了节约开支，增加项目效益而对规划、领导者为了节约开支，增加项目效益而对规划评价不予考虑。评价不予考虑。1、确定健康促进规划的先进性与合理性。、确定健康促进规划的先进性与合理性。2、明确健康促进活动的数量与质量，确保、明确健康促进活动的数量与质量，确保健康促进是否适合目标人群，各项活动是否健康促进是否适合目标人群，各项活动是否按规划进行及资源的利用情况。按规划进行及资源的利

4、用情况。3、确定健康促进规划达到预期目标的程度、确定健康促进规划达到预期目标的程度及其影响因素。及其影响因素。4、总结健康促进项目的成功与不足之处，提出、总结健康促进项目的成功与不足之处，提出进一步的研究假设。进一步的研究假设。5、介绍项目结果，扩大项目影响，改善公共关、介绍项目结果，扩大项目影响，改善公共关系，取得更多的支持与合作。系，取得更多的支持与合作。6、向项目资金提供者说明项目结果，完成合同、向项目资金提供者说明项目结果，完成合同的要求。的要求。 阐明当地实施规划活动的质量和效率、阐明当地实施规划活动的质量和效率、规划中设定的目标是否达到以及达到的程规划中设定的目标是否达到以及达到的

5、程度，也为领导和群众提供有价值的反馈信度，也为领导和群众提供有价值的反馈信息。息。用以改善现有的规划；用以改善现有的规划；决定是否终止现有规划或扩大规划；决定是否终止现有规划或扩大规划；为设计新的规划提供科学依据。为设计新的规划提供科学依据。评价的目的评价的目的内部评价、外部评价内部评价、外部评价所应用的投入、过程、输出指标是否合适、可行、所应用的投入、过程、输出指标是否合适、可行、贴切？贴切？如何保证评价的正确性和可靠性？是否匿名？如何保证评价的正确性和可靠性？是否匿名？邀请谁评估结论的正确性和可靠性？邀请谁评估结论的正确性和可靠性？评价的结果送给谁？评价的结果送给谁？评价结果以什么方式发布

6、？评价结果以什么方式发布？评价策略评价策略健康文化的评价健康文化的评价社会行动和影响的评价社会行动和影响的评价健康公共政策和组织改革健康公共政策和组织改革健康生活方式和条件的评价健康生活方式和条件的评价有效的健康服务评价有效的健康服务评价评价内容评价内容6 6、健康环境的评价健康环境的评价7 7、社会结果的评价社会结果的评价8 8、健康结果的评价健康结果的评价9 9、能力建设结果评价能力建设结果评价评价内容评价内容形成评价形成评价过程评价过程评价效果评价效果评价总结评价总结评价 指在规划执行前或执行早期对规划内容所指在规划执行前或执行早期对规划内容所作的评价，包括为制定干预规划所作的需求作的评

7、价，包括为制定干预规划所作的需求评估及为规划设计和执行提供所需的基础资评估及为规划设计和执行提供所需的基础资料。料。目的目的 1、通过需求评估以了解所制定的规划目、通过需求评估以了解所制定的规划目标和干预措施是否合适；标和干预措施是否合适； 2、规划实施前对靶人群的了解，以决定、规划实施前对靶人群的了解，以决定适用于该人群的最佳干预方法；适用于该人群的最佳干预方法； 3、产生新观念，探索新策略。、产生新观念，探索新策略。 目的目的 1、通过需求评估以了解所制定的规划目、通过需求评估以了解所制定的规划目标和干预措施是否合适；标和干预措施是否合适； 2、规划实施前对靶人群的了解，以决定、规划实施前

8、对靶人群的了解，以决定适用于该人群的最佳干预方法；适用于该人群的最佳干预方法； 3、产生新观念，探索新策略。、产生新观念，探索新策略。 1、了解目标人群对各种措施的看法了解目标人群对各种措施的看法2、选择教育信息作预试验选择教育信息作预试验3、了解教育资料发放系统了解教育资料发放系统4、通过调查获得有价值的信息通过调查获得有价值的信息5、通过预调查修改问卷项目通过预调查修改问卷项目6、提供定性资料为定量资料作解释或说明提供定性资料为定量资料作解释或说明7、发现实施早期阶段可能出现的问题发现实施早期阶段可能出现的问题1 1、测评的是投入、活动和产出过程。测评的是投入、活动和产出过程。2 2、包括

9、对规划的设计、组成、实施过程、管理、包括对规划的设计、组成、实施过程、管理、工作人员情况等进行评价。工作人员情况等进行评价。3 3、是评估项目活动的质量与效率，而不是评估规是评估项目活动的质量与效率，而不是评估规划的效果和行为效应，目的在于控制规划质量，划的效果和行为效应，目的在于控制规划质量，因此又称为质量控制或规划质量保证审查因此又称为质量控制或规划质量保证审查（quality assurance reviewquality assurance review， QARQAR）1 1、评估规划实施情况并随时了解现场反应。评估规划实施情况并随时了解现场反应。2 2、评估工作人员工作情况。评估工

10、作人员工作情况。3 3、项目预试验。项目预试验。1 1、直接观察各项干预活动。直接观察各项干预活动。2 2、专题讨论法。专题讨论法。3 3、抽出少量目标人群，了解他们是否得到有抽出少量目标人群，了解他们是否得到有关信息。关信息。4 4、记录各项活动，提供动态变化。、记录各项活动，提供动态变化。效果评价内容效果评价内容规划评价的目的是确定干预的效果，规划规划评价的目的是确定干预的效果，规划效果评价有：效果评价有： 近期和中期效果评价近期和中期效果评价 结局评价结局评价 又称效应评价，是规划评价的重要内容。评价又称效应评价，是规划评价的重要内容。评价的重点在于规划或规划的某方面对参与者的知识、的重

11、点在于规划或规划的某方面对参与者的知识、态度、行为的直接影响。主要评估：态度、行为的直接影响。主要评估：有关健康行为的倾向、促成、强化因素改变的程度。有关健康行为的倾向、促成、强化因素改变的程度。 相关行为改变的情况相关行为改变的情况 政策、法规制定情况政策、法规制定情况 也称远期效果评价，指评价健康促进规也称远期效果评价，指评价健康促进规划的最终目的是否实现。包括：划的最终目的是否实现。包括：l效果：即规划对目标人群健康的影响。效果：即规划对目标人群健康的影响。l效益：指规划改变人群健康状况所带来的远期效益：指规划改变人群健康状况所带来的远期社会效益和经济效益。社会效益和经济效益。成本效益和

12、成本效果。成本效益和成本效果。效果评价方法效果评价方法1、在干预组或社区中重复横断面调查，提供基线、在干预组或社区中重复横断面调查，提供基线与随访资料，以评估在某特定时期内行为改变情况。与随访资料，以评估在某特定时期内行为改变情况。2、在靶人群中建立哨点监测发病情况，干预前后、在靶人群中建立哨点监测发病情况，干预前后作对比，最好设对照组。作对比，最好设对照组。资料收集方法资料收集方法可采用可采用 是指综合形成评价、过程评价、效果评价以是指综合形成评价、过程评价、效果评价以及各方面资料作出总结性的概括。及各方面资料作出总结性的概括。 总结评价从规划的成本总结评价从规划的成本-效益、各项活动的效益

13、、各项活动的完成情况作出判断，以期作出该规划是否有必完成情况作出判断，以期作出该规划是否有必要重复或扩大或终止的决定。要重复或扩大或终止的决定。 即以研究为核心目的的健康规划，目的即以研究为核心目的的健康规划，目的在于验证研究假设，揭示教育干预和结局在于验证研究假设，揭示教育干预和结局之间的因果关系，从中获取可推广到其他之间的因果关系，从中获取可推广到其他场所或相似人群的理论知识和方法。场所或相似人群的理论知识和方法。研究者要充分考虑内外两方面的效力：研究者要充分考虑内外两方面的效力： 内在效力内在效力：规划效果直接归因于教育措：规划效果直接归因于教育措 施的程度；施的程度； 外在效力外在效力

14、：归因于干预的效果能推广到：归因于干预的效果能推广到 相似人群或场所的程度，并力求得出相似人群或场所的程度，并力求得出 有说服力的结论。有说服力的结论。使用随机、对照、盲法的设计原则。使用随机、对照、盲法的设计原则。 一、实验设计一、实验设计（experimental designexperimental design） 结果的说服力较强，难以实施结果的说服力较强，难以实施实验对象实验对象实验组实验组对照组对照组随机分组随机分组干预前干预前干预后干预后干预前干预前干预后干预后1、非随机比较组、非随机比较组 干预组和对照组非随机确定，对照组除干预干预组和对照组非随机确定，对照组除干预因素外，其他

15、特征与干预组可比，从而控制混杂因素外，其他特征与干预组可比，从而控制混杂因素，减少外部误差来源。因素，减少外部误差来源。 2、复合时间系列比较、复合时间系列比较 比较干预组和对照组在不同时间点的变化结比较干预组和对照组在不同时间点的变化结果，需进行多次基线调查和追踪随访，因此应注果，需进行多次基线调查和追踪随访，因此应注意相同的测量技术。意相同的测量技术。 既不遵循随机化原则又不设立对照组，既不遵循随机化原则又不设立对照组，因而对实验中的影响因素控制力最低。因而对实验中的影响因素控制力最低。 单组前后比较单组前后比较 时间系列时间系列 是最简单的非实验设计方案，主要方是最简单的非实验设计方案，

16、主要方法是同一对象在接受干预前后的变化进法是同一对象在接受干预前后的变化进行比较。行比较。 观察时间越短越好，评估即时效应。观察时间越短越好，评估即时效应。 观察指标不易随时间改变，如知识和技能观察指标不易随时间改变，如知识和技能的变化。的变化。必须满足的条件：必须满足的条件：1、能建立可测量的时间周期；能建立可测量的时间周期；2、所测结果稳定；所测结果稳定；3、可顺利收集结果资料；可顺利收集结果资料；4、可在许多时候进行观察；可在许多时候进行观察；5、可在特定时间开展干预并可突然停止。可在特定时间开展干预并可突然停止。要特别注意防止偏倚因素和混杂因素要特别注意防止偏倚因素和混杂因素的影响，常

17、见的影响因素有：的影响，常见的影响因素有：历史性因素历史性因素工作人员和参与者的熟练性工作人员和参与者的熟练性测试或观测的偏倚测试或观测的偏倚 测量工具、回归因素测量工具、回归因素 选择偏倚、失访、相互影响选择偏倚、失访、相互影响 健康促进规划评价指标相对无形、潜在，健康促进规划评价指标相对无形、潜在， 明确的标准有一定困难。明确的标准有一定困难。结局评价难以做到全面实现。结局评价难以做到全面实现。评价指标较难确定特异性标准，定量性评价指标较难确定特异性标准，定量性 差，主观性较大差，主观性较大l月晕效益（月晕效益（halo effect）：其他因素对被）：其他因素对被研究因素的影响。研究因素的影响。l评定错误（评定错误（rating error）：评价者的意）：评价者的意向会影响评定