卫生项目总结评估概述讲稿.ppt

1、卫生项目总结评估中的几个问题,2007年12月,项目评估的类型,” 前评估：检查项目的相关性、必要性、可行性及预期的风险，又称“评估性评价”； 监督与监测：检查项目按计划的运行状态； 中期评估：收集项目的早期绩效，提出相应改进措施； 终末评估：全面检查项目运行结果，衡量项目目标的实现程度，又称“总结评估”； 影响评估：考察项目结束数年后的远期影响，又称“后评估”。,终末评估概念,终末评估是对项目进行客观和系统的评价，检查项目与 目标比较是否已经达到既定目标、影响力和可持续性。并鉴别项目活动的意义和项目组成部分的优缺点。,终末评估的基本要求,有用性：评估结果应该清晰有序，反映用户的需求； 公正性

2、：客观正确反映项目的真实状态和结果；外部评估要保持评估的独立性； 可信度：评估人员必须对项目有深入的了解，有能力进行社会研究并提供正确的评估信息。向利益相关者通报评估过程; 出资方的参与：在评估的每个阶段，评估方与出资方必须充分交流意见。,终末评估的主要程序,* 制定评估计划; * 组织与实施评估; * 完成评估结果报告; * 评估结果的运用与传播。,评估的计划,确定评估的问题; 选择评估的设计; 确定测量指标与测量工具; 确定数据收集方案.,评估的实施,收集相关数据； 整理数据及资料； 分析与解释数据与资料。,报告评估结果与应用,报告评估结果； 应用评估结果。,评估的计划与设计,确定项目评估

3、的问题,评估问题引导评估的方向,反映项目实施的主要结果； 评估问题的确定必须与利益相关各方协商达成一致； 确定的评估问题必须与项目目标密切相关，突出重点、十分清晰、可以测量。,卫生项目通常的评估问题,发挥政府作用： * 组织与部门间协调； * 制定规划； * 筹资与投资； * 出台相关政策； * 社区动员； * 监督与管理,提高卫生服务提供能力 * 明确各级卫生机构功能与职责； * 改善基础设施； * 建立基本规章制度与技术操作规范； * 卫生人力培训； * 加强卫生机构间的联系与协作； * 实行激励措施，提高质量与效率。,开展重点公共卫生问题的干预 * 通过调查研究确定干预重点； * 采取相

4、应行动策略； * 动员非政府组织、社区的参与； * 创新卫生干预的形式与方法。,建立基本医疗卫生保障制度 * 政府如何为公共卫生服务项目埋单； * 探索新型城乡居民医疗保障制度； * 建立城乡医疗救助； * 完善与上述制度相适当的其它相关制度。,关注弱势人群的卫生公平 * 改善卫生服务的物理可及性 （农村、偏远地区的卫生资源配置） * 改善卫生服务的经济可负担性 （贫困人口、残疾人、失地农民、进城务工人员、妇女、儿童、老人） * 改善对某些疾病患者的社会岐视 （精神病、麻风病、爱滋病、结核病等）,项目策略对提高人群健康的作用与影响 * 对提高卫生服务利用的作用 （如：住院分娩、应住院未住院等）

5、 * 对普及卫生知识的作用 （对某类卫生知识的知晓程度） * 对不健康生活行为的作用 （如：戒烟、低盐、使用避孕套） * 对健康水平的影响 （发病率、患病率、死亡率）,项目的可持续性 * 领导与组织； * 筹资与财政投入； * 技术与管理能力； * 环境与政策。,项目评估问题的来源,项目逻辑框架； 政府、出资方的协定、文件； 包含监督评价指标的项目报告； 项目受益群体的意见； 技术专家建议。,评估问题的类型,* 描述型问题： (发生了什么?) 描述项目现状，提供事件发生的概要。 如：项目期间培训多少乡镇卫生院妇幼卫生人员？ * 标准型问题：(是否实现了项目的工作指标?) 根据标准将事物的现状与

6、其理想状态进行比较。 如：2006年儿童计免接种率比1997年提高了几个百分点？ * 影响型问题：(项目是否引起了变化?) 对观念、能力、健康改善等的影响。 如：降低了孕产妇死亡率？,项目设计与评估问题的关系,实验设计：随机分组 评估影响和效果。用于影响型问题； 准实验设计：非随机分组 用于描述型、标准型问题 非实验设计： 项目前后对比 用于描述型和标准型问题,确定评估问题的注意点,逻辑关系：项目实施与项目目标之间的联系有意义； 时间顺序：项目实施在前，结果在后； * 共同变异： 项目和结果都发生变化； 其它因素的排除：确定变化是由项目引起，而不是其它因素。,项目评估的测量方法,评估项目的进展

7、或结果，需要有正确定义的指标。 选择测量指标时要明确： * 评估关心的问题是什么？ * 怎样才能找到问题的答案？ * 需要什么样的数据？,测量指标的基本条件,测量指标与评估主题相关； 测量指标对评估是重要的； 测量方法可靠、稳定； 测量结果真实、有效； 测量对准目标人群。,确定测量指标的方法,从已有的项目监测指标中选择； 新建指标的确定： * 关键词 * 范围 * 测量值 例如：全县乡镇卫生院参加培训的人次 健康教育后吸烟者对吸烟危害的知晓率,评估的具体实施,逻辑框架项目评估的重要工具,逻辑框架是对项目的简明描述，以框架形式展示项目各个组成部分之间的相互关系、活动原因与结果。 逻辑框架帮助我们

8、了解项目的设计思路，了解项目各组成部分的因果关系，为我们理解项目为什么这样做，做了什么，产出了什么，结果如何提示逻辑关系。,项目逻辑框架的内容,投入： 资源； 运行： 项目活动内容； 产出：产品和服务； 成果：目标群体受益情况； 影响：最终效果。（项目目标实现程度）,项目评估的基本手段,定量分析与定性分析相结合,数据收集与选择,利用现有数据：项目文档、常规卫生统计报表、项目监测指标、数据库、项目进度报告、会议记录、国家和省级相关统计报告等 调查表法：为项目评估需要的卫生资源、卫生需求、卫生服务调查,社会学评估,社会学评估包括： * 项目对社会影响分析； * 社会环境对项目的适应性和可接受程度分

9、析； * 项目的社会风险分析。,项目对社会影响分析,分析项目产生的正面影响（社会效益）及负面影响。主要包括对居民收入的影响，特别是否减轻贫困；对居民生活质量的影响，如消费水平、消费结构、出生率、死亡率等；对卫生基础设施和卫生服务提供的影响；对不同利益群体的影响等。,社会环境对项目的影响分析,分析当地社会环境、人文条件是否接纳、支持项目的实施，项目与当地经济社会环境的相互适应程度。包括不同利益群体对项目态度的变化；各级组织对项目的支持和配合程度；当地是否有能力使项目持续发展。,利益相关者,利益相关者是指与项目实施有切身利害关系的机构、群体和个人。 第一利益相关者。指直接受项目影响的机构、群体和个

10、人。 第二利益相关者。指与项目有次要关系的，通常是指执行和参与项目的机构、群体和个人。 政府属第二利益相关者，但是对项目成败起关键作用。,关注弱势群体对项目的感受,在利益相关者中，要关注项目对穷人、妇女、女童、残疾人、老人等社会弱势群体的受益情况。这一人群往往或居住偏远、或文化程度低、或家庭地位低、或受到社会岐视等，使其在项目中的利益可能被忽视甚至受到损害，出现事实上的不平等和不公平。,社会学评估的主要工具,现有信息的利用： 直接观察法： 关键知情人谈话、主题访谈、半结构访谈 专题小组讨论 个人描述,现有信息资料分析,年度报告、调查报告、出版物、学术论文、统计报表、地图 对可能获取的资料进行阅

11、读思考比较，形成总的印象的概念。其中对指标数据正确性的判断可与同一指标两个不同来源的数据对照，称为三角判断法。,直接观察法,与被调查对象一起 ，观察当地的地域、环境、提供卫生服务的过程、卫生价格、经济运行过程。共同参与上报数据的来源和统计方法。但是需要有一定的观察时间，使被调查对象习以为常。,半结构式访谈,确定主要对象为关键知情者。事前准备好访谈主题和提纲。按拟定的议题与受访者进行交谈。主题不一定是访谈开始的切入点，但访谈应围绕主题。在被访谈者面前，调查人员不是领导、不是智者、而是平等的朋友。一个主题的访谈人数约1015人。,专题小组讨论,指同时与几个人访谈，气氛比较宽松。但是要求被访者之间的

12、关系不能太密切，以免影响调查结果。一个主题的专题小组讨论一般为4轮以上，每轮为10人左右。,个人描述,倾听被访者讲述与调查主题关系密切的一段经历（例如：居民接受一次卫生服务、院长参与一次公开招聘过程）。,评估项目成果的注意点之一,由于项目实施时间跨度长,期间宏观政策环境和项目地区经济社会各方面都发生了较大变化。通过实施某一卫生项目的作用与影响常常是有限的。所以，对评价由某一项目实施对卫生发展影响的结论，需要非常谨慎。取得的效果一般采用“似乎”、“改善”、“促进”等用词。,评估项目成果的注意点之二,要通过不同数据收集来源，不同收集方法，不同层面收集信息资料，使信息资料相互补充，相互验证。 (如:

13、评估项目地区孕产妇死亡率的变化,不但要观察项目地区本身的趋势,还要与全国监测数据对照,同时与项目地区孕产妇死亡地点、死亡原因等进行综合分析),对评估项目效果的注意点之三,将项目效果和影响与其实施过程的活动和过程指标相联系，有利于提高对项目产生结果的可信度。 （如：将孕产妇死亡率下降与县妇幼机构和乡镇卫生院产科建设、妇幼人员培训、孕产妇系统管理率、新法接生率、住院分娩率提高相联系）,评估项目效果的注意点之四,总结项目的创新措施，显示项目对国家卫生政策与策略的贡献。如： * 政府财政支付方向、结构与形式的改革； * 卫生服务机构服务模式与内部运行机制改革； * 社区与公众参与的创新亮点 （如：恳谈

14、会、爱心家园、示范户、俱乐部等）,评估项目效果的注意点之五,运用典型案件说明效果，特别是受益者的亲身感受，具有很强感染力。 （如：贫困人口通过项目脱病致富，爱滋病人通过社会关爱重新获得生活勇气）,报告与应用评估结果,评估报告的基本组成,一、引言 二、评估的目的 。评估研究的背景 。评估项目简介 。评估的目标 三、评估的方法 。评估方法 。主要评估问题、方案、测量分析方法 四、主要发现 有选择地、清晰地介绍数据和信息 五、结论 与主要评估问题相呼应 六、建议 保证相关论据的支持 七、附录,评估报告的基本要求,* 尽可能达到可发表/出版的标准； * 清晰的逻辑和条理性； * 分析思路和数据表达易于理解； * 提出可靠而有趣的结论； * 在报告中提出合理的建议； * 明确地回答问题； * 行文简洁、版面美观； * 前后呼应。,撰写评估报告的步骤,多阅读高质量的同类报告 预先制定报告撰写计划 提出大纲（总体构架） 提出二、三级标题 在标题下列出主要观点/证据