Delphi法的应用.pdf

Delphi法简介及其应用 安徽医科大学卫生管理学院 2012 06 06 主要内容 DelphiDelphiDelphiDelphi评价法概述评价法概述1 1 1 1 DelphiDelphiDelphiDelphi法的轮回过程法的轮回过程 2 2 2 2 DelphiDelphiDelphiDelphi法的工作程序及原则法的工作程序及原则3 3 3 3 DelphiDelphiDelphiDelphi法评价中的几个关键指标法评价中的几个关键指标4 4 4 4 DelphiDelphiDelphiDelphi评价法概述评价法概述评价法概述评价法概述 德尔菲法 德尔菲法 德尔菲法 德尔菲法 Delphi MethodDelphi MethodDelphi MethodDelphi Method 是在 是在 是在 是在20202020世纪世纪世纪世纪40404040年代由年代由年代由年代由O O O O 赫尔姆和赫尔姆和赫尔姆和赫尔姆和N N N N 达尔达尔达尔达尔 克首创 经过克首创 经过克首创 经过克首创 经过T T T T J J J J 戈登和兰德公司进一步发展而成的 德尔菲法依据系戈登和兰德公司进一步发展而成的 德尔菲法依据系戈登和兰德公司进一步发展而成的 德尔菲法依据系戈登和兰德公司进一步发展而成的 德尔菲法依据系 统的程序 采用匿名发表意见的方式 即专家之间不得互相讨论 不发统的程序 采用匿名发表意见的方式 即专家之间不得互相讨论 不发统的程序 采用匿名发表意见的方式 即专家之间不得互相讨论 不发统的程序 采用匿名发表意见的方式 即专家之间不得互相讨论 不发 生横向联系 只能与调查人员发生关系 通过多轮次调查专家对问卷所生横向联系 只能与调查人员发生关系 通过多轮次调查专家对问卷所生横向联系 只能与调查人员发生关系 通过多轮次调查专家对问卷所生横向联系 只能与调查人员发生关系 通过多轮次调查专家对问卷所 提问题的看法 经过反复征询 归纳 修改 最后汇总成专家基本一致提问题的看法 经过反复征询 归纳 修改 最后汇总成专家基本一致提问题的看法 经过反复征询 归纳 修改 最后汇总成专家基本一致提问题的看法 经过反复征询 归纳 修改 最后汇总成专家基本一致 的看法 作为预测的结果 的看法 作为预测的结果 的看法 作为预测的结果 的看法 作为预测的结果 Delphi法的轮回流程 第一轮 寄发给专家征询表不带任何框框 只针对 研究主题提出问题 由参加的专家不受任何干扰 发挥专家自由联想优势 提供应评估或预测的事件 或者项目 然后由领导小组对专家填写寄回的咨询 表进行汇总整理 合并同类事件 设计一份 XX项目 专家咨询表 作为第二轮征询表及发给专家 第二轮 要求专家对第二轮的征询表中所列的各个 问题作出评价 并标明理由 领导小组根据再次返 回来的征询表 对专家们的一件进行统计分析 常规的常规的DelphiDelphiDelphiDelphi法一般分法一般分4 4 4 4轮进行轮进行 Delphi法的轮回流程 第三轮 根据第二轮修改后的专家咨询 专家再一 次进行判断并进一步提出修改意见 并充分陈述理 由 第四轮 在第三轮的基础上 专家们再次进行判 断和论证 或仍保留第三轮的意见 许多项目在第一轮就改变一张白纸的做法 并向专家们提供研究主许多项目在第一轮就改变一张白纸的做法 并向专家们提供研究主许多项目在第一轮就改变一张白纸的做法 并向专家们提供研究主许多项目在第一轮就改变一张白纸的做法 并向专家们提供研究主 题的背景资料等 题的背景资料等 题的背景资料等 题的背景资料等 多数短期评估及预测经过第二轮或三轮专家的意见多数短期评估及预测经过第二轮或三轮专家的意见多数短期评估及预测经过第二轮或三轮专家的意见多数短期评估及预测经过第二轮或三轮专家的意见 亦已相当一致 亦已相当一致 亦已相当一致 亦已相当一致 专家咨询轮回工作即可结束 专家咨询轮回工作即可结束 专家咨询轮回工作即可结束 专家咨询轮回工作即可结束 Delphi法一般程序 5 将所有专家的修改意见收集起来 汇总 再次分发给各位专家 以便做 第二次修改 逐轮收集意见并为专家反馈信息是德尔菲法的主要环节 收 集意见和信息反馈一般要经过三 四轮 在向专家进行反馈的时候 只给 出各种意见 但并不说明发表各种意见的专家的具体姓名 这一过程重复 进行 直到每一个专家不再改变自己的意见为止 3 各个专家根据他们所收到的材料 提出自己的预测意见 并说明自 己是怎样利用这些材料并提出预测值的 4 将各位专家第一次判断意见汇总 列成图表 进行对比 再分发给各位 专家 让专家比较自己同他人的不同意见 修改自己的意见和判断 也可以 把各位专家的意见加以整理 或请身份更高的其他专家加以评论 然后把这 些意见再分送给各位专家 以便他们参考后修改自己的意见 6 对专家的意见进行综合处理 2 向所有专家提出所要预测的问题及有关要求 并附上有关这个问题的所有 背景材料 同时请专家提出还需要什么材料 然后 由专家做书面答复 1 组成专家小组 按照课题所需要的知识范围 确定专家 专家人数的 多少 可根据预测课题的大小和涉及面的宽窄而定 一般不超过20人 DelphiDelphiDelphiDelphi法的工作原则法的工作原则法的工作原则法的工作原则 1 挑选的专家应有一定的代表性 权威性 2 在进行预测之前 首先应取得参加者的支持 确保他们能认真地 进行每一次预测 以提高预测的有效性 3 问题表设计应该措辞准确 不能引起歧义 征询的问题一次不宜太 多 不要问那些与预测目的无关的问题 列入征询的问题不应相互包 含 所提的问题应是所有专家都能答复的问题 而且应尽可能保证所有 专家都能从同一角度去理解 4 进行统计分析时 应该区别对待不同的问题 对于不同专 家的权威性应给予不同权数而不是一概而论 DelphiDelphiDelphiDelphi法的工作原则法的工作原则法的工作原则法的工作原则 5 提供给专家的信息应该尽可能的充分 以便其作出判断 6 只要求专家作出粗略的数字估计 而不要求十分精确 7 问题要集中 要有针对性 不要过分分散 以便使各个事件 构成一个有机整体 问题要按等级排队 先简单后复杂 先综 合后局部 这样易引起专家回答问题的兴趣 8 调查单位或领导小组意见不应强加于调查意见之中 要防止出 现诱导现象 避免专家意见向领导小组靠拢 以至得出专家迎合 领导小组观点的预测结果 9 避免组合事件 如果一个事件包括专家同意的和专家不同意的两 个方面 专家将难以做出回答 DelphiDelphiDelphiDelphi法评价中的几个关键指标法评价中的几个关键指标法评价中的几个关键指标法评价中的几个关键指标 一一 专家的积极系数专家的积极系数 即专家咨询表的回收率 其大小说明专家对该项目研究的关心程度 二 专家意见集中程度 二 专家意见集中程度 二 专家意见集中程度 二 专家意见集中程度 专家意见集中程度 包括均数 满分频率 等级总和 首专家意见集中程度 包括均数 满分频率 等级总和 首专家意见集中程度 包括均数 满分频率 等级总和 首专家意见集中程度 包括均数 满分频率 等级总和 首 先将全部专家对所有被评的项目或指标的评分值列于表中 如下先将全部专家对所有被评的项目或指标的评分值列于表中 如下先将全部专家对所有被评的项目或指标的评分值列于表中 如下先将全部专家对所有被评的项目或指标的评分值列于表中 如下 图 图 图 图 计算平均数MjMjMjMj K K K Kj作为补充指标 值越大 则说明对该指标所给满分的专家比例越大 该指 标也越重要 计算满分比K K K Kj 三 专家意见的协调程度 三 专家意见的协调程度 三 专家意见的协调程度 三 专家意见的协调程度 专家意见的协调程度是一项十分重要的指标 通过计算可以判断专家意见的协调程度是一项十分重要的指标 通过计算可以判断专家意见的协调程度是一项十分重要的指标 通过计算可以判断专家意见的协调程度是一项十分重要的指标 通过计算可以判断 专家对每项指标的评价是否存在较大分歧 或者找出高度协调的专专家对每项指标的评价是否存在较大分歧 或者找出高度协调的专专家对每项指标的评价是否存在较大分歧 或者找出高度协调的专专家对每项指标的评价是否存在较大分歧 或者找出高度协调的专 家组和持异端意见的专家 家组和持异端意见的专家 家组和持异端意见的专家 家组和持异端意见的专家 各指标评价结果的变异系数各指标评价结果的变异系数各指标评价结果的变异系数各指标评价结果的变异系数Vj Vj Vj Vj 说明专家对说明专家对说明专家对说明专家对J J J J指标的相对重要性的协指标的相对重要性的协指标的相对重要性的协指标的相对重要性的协 调程度 调程度 调程度 调程度 Vj Vj Vj Vj 越小说明意见越一致 越小说明意见越一致 越小说明意见越一致 越小说明意见越一致 专家意见协调系数及卡方检验专家意见协调系数及卡方检验专家意见协调系数及卡方检验专家意见协调系数及卡方检验 变异系数仅能说明专家对于每一个指标的协调程度 但是不能说明全部变异系数仅能说明专家对于每一个指标的协调程度 但是不能说明全部变异系数仅能说明专家对于每一个指标的协调程度 但是不能说明全部变异系数仅能说明专家对于每一个指标的协调程度 但是不能说明全部MMMM个个个个 专家对全部专家对全部专家对全部专家对全部N N N N个指标的总的协调程度 通常用个指标的总的协调程度 通常用个指标的总的协调程度 通常用个指标的总的协调程度 通常用WWWW来表示协调系数 计算过程来表示协调系数 计算过程来表示协调系数 计算过程来表示协调系数 计算过程 如下 如下 如下 如下 计算计算计算计算WWWW值 值 值 值 当所有专家就全部指标给出相同的评价时 当所有专家就全部指标给出相同的评价时 当所有专家就全部指标给出相同的评价时 当所有专家就全部指标给出相同的评价时 WWWW的计算公式为 的计算公式为 的计算公式为 的计算公式为 当专家对各指标没有给出相同的评价时 W的计算公式为 协调系数W在0 1之间 W越大 表示协调程度越好 经过2 3轮协调后 误差控制 较好 W一般会在0 5范围波动 协调程度的显著性检验协调程度的显著性检验协调程度的显著性检验协调程度的显著性检验 卡方检验卡方检验卡方检验卡方检验 根据自由度d f和显著性水平 查的卡方值 如果p 0 05则说明专家意 见不一致 评估预测的可行度较差 结果不可取 2 CsCaCr 四 专家权威程度 四 专家权威程度 四 专家权威程度 四 专家权威程度 任何一个专家都不可能对预测中每一个问题都是权威 而权威程度对评价任何一个专家都不可能对预测中每一个问题都是权威 而权威程度对评价任何一个专家都不可能对预测中每一个问题都是权威 而权威程度对评价任何一个专家都不可能对预测中每一个问题都是权威 而权威程度对评价 的可靠性有相当大的影响 专家的权威程度一般有两个因素决定 一个的可靠性有相当大的影响 专家的权威程度一般有两个因素决定 一个的可靠性有相当大的影响 专家的权威程度一般有两个因素决定 一个的可靠性有相当大的影响 专家的权威程度一般有两个因素决定 一个 是专家对方案作出判断的依据 用是专家对方案作出判断的依据 用是专家对方案作出判断的依据 用是专家对方案作出判断的依据 用CaCaCaCa表示 另一个是专家