听起来不错真的有用吗？ ——项目评估概念和方法

1、走向增权的项目评估 从实务视角出发 董欣梅 2009-08-07 西宁 阿诗玛，变成了石头 一个关于总结和评估的隐喻 想象phe项目总结 o 一项帮助所有人更好理解项目以及帮助项目 改进的工作 o 评估者：虽然找出项目的不足和缺陷非常重 要，但这个过程的结果并非让项目受到损害 和打击 o 被评估者：开诚布公、乐于合作则能够使自 己在评估中受益 o 整个过程是培力和促进自主的 去权到增权 o 历史脉络 o 基本概念内涵 o 实务问题拆解 o 项目评估、项目开发和项目实施有机结合 n 四步骤评估 n 增权评估 什么是项目？ o 一定时间内，通过系列的投入和活动，降低 或克服限制性因素的作用，达到所

2、设定的目 标。 o 发展性项目通常是以解决问题为目的，具有 特定目标人群或受益群体，在预订时间周期 内，依据适当的条件和支持，达到一定效果。 项目周期 项目螺旋模型 项目评估核心概念 o 问责/交代 accountability o 控制 control positive,negative, effectiveness, efficiency 评估的类型 o 累积性评估& 形成性评估 o 过程评估&结果评估 实务工作者眼中 项目评估是 历史脉络 o 曾经，无问责年代 o 二战后，问责性变革 o 60年代，“问责之声” o 里根政府时代，“必须证明有效性” 为什么发展项目要求评估？ o 60年代

3、，发展事业和社会服务事业的双增长 o 变化中的资助状态要求发展项目工作者证明 其工作的品质和成果。 o 是项目成功实施的重要部分，也是项目工作 的职责之一。 o 发展工作关注对象是社会和社会中的人，其 不言而喻的重要性要求严肃的对待。 当前情形 评估！ 评估！ 评估！ 异化项目评估 o 评估是必须的，因为这是资助方要求的 o 不论现实如何，评估的结果是必须证明项目 “功效一致” o 评估=提交一个书面报告 o 好的评估报告=好的项目工作 o 评估是专家和研究者负责的事情 o 我们做事的人不懂那么复杂的事情 o 别管评估了，拿到资源最重要 令人遗憾，问责之声问责之声笼罩之下 评估，成为一个对实务

4、工作的去权 走向增权 项目评估 改变 回到本源 项目评估 o 不仅仅是对问责的交代，是通过不同方法去 获取资料，能够帮助我们系统地了解自己的 工作做得怎么样，是否达到预期目标，进而 能够改善工作的实施和方法。 o 不是项目建议书或其他计划的简单附属，必 须是一项精心建构、系统设计的安排，包含 在整体工作设计当中。 项目评估 o 是一个持续不断对项目进行资料加强、问题 辨识和不断反馈的过程 o 最终目的是考察有效性 o 可运用的技术方法和手段多样 o 可以是更富有创造性 恰当的评估 o 是基于成效的问责 o 帮助我们判断“好想法是否真的有用” o 能够表明项目的重要性 o 可以增进项目有效性并提

5、高项目质量 o 提高回应质疑的能力 o 评估必须合理、清晰、系统； o 结构化与非结构化评估工具结合使用 o 过程中不断改善 现实状况 o 陷阱一：以戏剧化的轶事性解释来说明项目 有效性 o 陷阱二：仅凭简单断言“项目有效、有用、 有改善”却没有任何证据来支持。 o 解决：在严格的因果论证基础上，创建一个 评估系统。 现实状况 o 行动即全部：只要用心去做就好了，不需要 想那么多 o 信任和重要性：请相信，我们在做非常重要 的事情，那么复杂、难以记录和判断；我们 的出发点是好的善意的 评析（一）： o 问题在于：我们无法清楚看到项目发挥作用 的过程，也就无法了解到项目是否产生效果 o 充满热情

6、和希望但是缺乏实实在在的根据。 现实状况 o 过程和产出描述 典型例：去年项目开展了20次学生社团活动， 有500名学生参加，这些活动都接受贵基金 会的资助，（并附详细活动名单和开支报 告）。 评析（二） o 项目设计的预期是什么？ o 学生社团活动作为方法本身，能够发挥的作用是多 种的；简单列举无法解释如何发挥作用 o 如何确立活动与目标之间的正相关性？ o 同样，充满希望但无根据。 项目运作逻辑模型： o条件：项目要应对和解决的议题、行动过程中的问题或难点 o活动：针对待解决议题而设计的一项或多项活动 o结果：活动产生的直接结果（例如参与者知识态度的转变，社 区的改变等等）或间接结果（参与

7、者行为改变，社区关系改变） o影响：项目整体上带来的最终影响（对项目目标回应的最终相 关性） 项目开发过程 需求评估项目规划实施评估 四步项目评估模型 o 项目逻辑模型和项目开发的过程统合的是行 动逻辑，项目评估同样具有相同的内容 o 四步模型将项目评估拆分为 第一步：目标和理想结果 第二步：过程评估 第三步：结果评估 第四步：影响评估 四步骤项目评估模型 影响评估目标 过程评估结果评估 目标 四步骤项目评估模型 影响评估 过程评估结果评估 与项目设计中的 需求评估相对应） 目标决定结果 目标可以是概括 的，结果必须是 明确和可度量的 schorr, 1997 描述活动内容，回答 “项目实际在

8、做什 么？” 确保项目按计划进行， 协助资源善用，提供 有效信息回应问责， 累积资料以备深入分 析。 过程评估的核心是两 个相互关联的问题： 计划的活动和实际的 活动分别是什么？ 实施过程中，项目团 队从经历中学习到了 什么？ 评估项目直接效果， 短期， 涉及参与者和对象。 检视过程活动与理 想目标设定之间的 达到程度。 项目预期的 最终效果和 长期效果 第一步：确定目标和理想结果 o a项目的主要目标 问自己，我们要努力完成哪些目标目标？ o b你想让哪些群体参与，参与规模、数量考虑 问自己：我们为谁服务？ o c你期望的结果是什么 问自己：项目结束的时候，我们希望参与者 发生什么样的变化？

9、他们会学到什么？态度、感受 和行为会有什么变化？ 第二步：过程评估 o a.哪些活动要实施？ 问自己：为了实施项目，我们实际在做什么 1详细收集、记录和统计相关活动的信息 o b.过程经验总结 n未能按计划进行的活动，原因和情况 n未能参加的目标群体 n计划与实际情况的差异分析 n改善的反馈 第三步：结果评估 o通过设定一系列测量值来量度（项目目标） 理想结果的达到程度。 理想结果 测量值 第四步：影响评估 o 通过设定一系列测量值来量度项目的长期效 果。 理想影响 测量值 反 思 传统评估的内在障碍 o 迷信“外来评估者”的“客观性”，制约了 评估结果的善用 o 实务工作者认为自己“无力”评

10、估，是专家 的专业 o 评估仅是工作结束后的“成绩卡” o 评估结果太过复杂和理论化，没有面向使用 者 o 工具及其运用可能缺乏性别和文化敏感度 增权(empowerment)评估 o 利用评估概念、技巧和结果来促进项目进步 和培力自主 o 不排斥任何方法（定量定性） o 要求服务对象参与评估的设计和实施而不是 单纯评估对象 （fetterman,weiss,etc.） 增权评估 o 打破传统评估方法的内在障碍，倾向于体现增权和 使用者参与视角的评估 （fetterman, 1996） o 项目设计/规划者学习评估基本知识，发展项目工 作能力，从而促进获得理想效果的可能 o 项目实务者和项目参

11、与者共同设定目标和策略 o 外来评估者提供技术和支持，促进社区成员自我评 估 o 强调评估信息利用在项目持续改进过程中的重要性 o 评估成为实务团队乐于使用的工具和助手 从这样问问题开始 o为什么需要有这个项目为什么需要有这个项目（需求评估，界定问题）（需求评估，界定问题） o这个项目的目的、目标人群和理想结果是什么这个项目的目的、目标人群和理想结果是什么（确定目标（确定目标 和理想结果）和理想结果） o哪些学科的知识和好的实际经验对这个项目会有用，可以如何哪些学科的知识和好的实际经验对这个项目会有用，可以如何 利用利用（研究经验和实务经验结合）（研究经验和实务经验结合） o这个项目如何与之前

12、的项目配合这个项目如何与之前的项目配合（社区反馈和规划（社区反馈和规划） o如何推行这个项目如何推行这个项目 （规划和实施）（规划和实施） o这个项目过去推行的情况这个项目过去推行的情况（过程评估）（过程评估） o过去这个项目的效果如何过去这个项目的效果如何（结果和影响评估）（结果和影响评估） o这个项目可以从哪些方面改进这个项目可以从哪些方面改进（过程、结果和影响评估）（过程、结果和影响评估） o如何行动能够使项目的有效部分制度化如何行动能够使项目的有效部分制度化（实施策略（实施策略） cqp, wandersman,1998 不再异化的项目评估 o 检视项目是否发生作用。 o 项目评估与项目规划和实施紧密结合。 o 容许项目开发和评估之间的界限模糊化 o 从