对海事管理绩效评估指标体系的思考

1 对海事管理绩效评估指标体系的思考对海事管理绩效评估指标体系的思考 摘要 结合海事管理工作的性质和特点 应用系统分析理论 确定海事管理绩效系统及绩效评估指 标体系 应用层次分析法 AHP 确定海事管理绩效评估指标的权重 应用模糊综合评估法 对被评估 对象进行综合分析 确定绩效评估的结果 关键词 海事 绩效评估 层次分析法 模糊评价 数学模型 1 引言 2004 年 3 月 22 日 国务院印发的 全面推进依法行政实施纲要 第 23 条 明确指出 要建立公开 公平 公正的评议考核制和执法过错或者错案责任 追究制 评议考核应当听取公众的意见 要积极探索行政执法绩效评估和奖惩 办法 科学合理的行政执法评估体系是完善行政执法责任制 建设责任政府 的基础工作 是推进依法行政的重要保障措施 1 作为行使国家水上安全监督 管理 防止船舶污染等重要海事管理职能的海事部门 能否做到依法行政 规 范执法 能否做到执法为民 服务社会 直接体现海事管理的绩效 2 海事管理绩效内涵与结构分析 海事管理绩效是指海事部门在海事管理活动中的结果 效益及其执法工作 效率 效能 是海事部门在行使其职能 实现其意志过程中体现出的管理能力 2 海事管理绩效不单纯是一个政绩层面的概念 还包括行政成本 行政效率 政治稳定 社会发展 社会进步 社会影响等含义在内 笔者结合海事管理工 作的具体内容 对海事管理绩效分类如图 1 所示 船舶管理 绩效 船员管理 绩效 其他海事 管理绩效 管理潜力 绩效 社会影响 绩效 航海保障 绩效 危管防污 绩效 通航管理 绩效 海事管理 绩效 图 1 海事管理绩效内涵与结构 1 通航管理绩效 2 根据 中华人民共和国海上交通安全法 等法律法规的规定 海事部门行 使通航管理职责 通航管理绩效即评判海事部门通航管理能力的重要依据 2 船舶管理绩效 根据 中华人民共和国船舶登记条例 等法律法规的规定 海事部门行使 船舶管理职能 船舶管理绩效即评判海事部门船舶管理能力的重要依据 3 危管防污绩效 根据 中华人民共和国海洋环境保护法 等法律法规的规定 海事部门行 使危管防污职能 危管防污绩效即评判海事部门在危险品 防止水域污染方面 管理能力的重要依据 4 船员管理绩效 根据 中华人民共和国海船船员适任考试 评估和发证规则 等法律法规 的规定 海事部门行使船员管理职能 船员管理绩效即评判海事部门船员管理 能力的重要依据 5 航海保障绩效 根据 中华人民共和国航标条例 等法律法规的规定 海事部门行使航海 保障职能 航海保障绩效即评判海事部门提供航海保障能力的重要依据 6 其他海事管理绩效 本文将航运公司安全营运与防污染能力符合证明核发 设立验船机构审批 海事行政处罚 海事行政强制 规费征收等海事管理职能统称为其他海事管理 其他海事管理绩效即评判海事部门其他海事管理能力和履行法定义务情况的重 要依据 7 社会影响绩效 社会影响绩效是评判海事部门海事管理活动所取得社会效果的重要依据 船舶适航 船员适任 安全畅通 有效监管 优质服务 是海事管理工作的 目标 而通过社会影响绩效 直接考察海事管理活动对人民生命财产安全所产 生的实实在在的效果 包括以下内容 船舶发生交通事故情况 登记船舶被重 点跟踪情况 持证船员被强制培训情况 社会满意度 8 管理潜力绩效 管理潜力绩效是评判海事部门内部管理水平的重要依据 管理潜力是履行 海事管理职能的基础 是海事部门持续发展的保证 体现了海事管理廉洁 公 正 高效的政治要求 体现了海事部门在自身建设和内部管理方面的工作效果 包括执法人员培训情况 执法人员对海事法律法规的了解程度 文件管理情况 执法行为成本 信息化应用水平等内容 2海事管理绩效评估指标体系的确立 3 海事管理绩效评估就是根据海事管理的效率 能力 服务质量 公共责任 和社会公众满意度等方面的判断 对海事管理过程中投入 产出 中期成果和 最终成果所反映的绩效进行评定和划分等级 3 要正确评估海事管理绩效 必 须建立一套行之有效的评估指标体系 根据海事管理绩效的内容 通过发放调查问卷 征询专家意见 开展小组 讨论等多种形式 并对海事管理绩效评估各指标进行隶属度分析 相关性分析 鉴别力分析 信度和效度检验 得出海事管理绩效评估指标体系如表 1 所示 表 1 海事管理绩效评估指标体系 4 目标层准则层指 标 层变量标识 单位 1 通航水域岸线安全使用许可合规率X11 2 通航水域水上水下施工作业许可合规率X12 3 在港口水域内进行采掘 爆破等活动的许可合规率X13 4 通航水域内沉船沉物打捞作业审批合规率X14 5 通航水域禁航区 航道 路 交通管制区 锚地和安全 作业区划定审批合规率 X15 6 船舶进入或者穿越禁航区许可合规率X16 7 水上拖带大型设施和移动式平台许可合规率X17 8 外国籍船舶或飞机入境从事海上搜救审批合规率X18 9 航标管理机关以外的单位设置 撤除沿海航标审批合规率X19 10 巡航率X1A 11 航行警 通 告发布合规率X1B 12 水上交通事故调查处理结案率X1C X1 通航 管理 绩效 13 水上险情处置成功率X1D 14 外国籍船舶进入非对外开放水域许可合规率X21 15 船舶进出港口许可合规率X22 16 船舶国籍证书核发合规率X23 17 国际船舶保安证书核发合规率X24 18 船舶安全与防污染证书文书核发合规率X25 19 船舶登记合规率X26 X2 船舶管理绩效 20 船舶安全检查合规率X27 21 防止船舶污染港区水域作业许可合规率X31 22 船舶载运危险货物的适装许可合规率X32 23 船舶液体危险货物水上过驳作业许可合规率X33 X3 危管防污绩效 24 船舶污染事故查处率X34 25 船员适任证书核发合规率X41 26 外国籍船员在中国籍船舶上任职审批合规率X42 X4 船员管理绩效 27 海员出入境证书核发合规率X43 28 航标正常率X51 29 港口航道图优良率X52 X5 航海保障绩效 30 公共安全通信覆盖率X53 31 航运公司安全营运与防污染能力符合证明核发合规率X61 32 设立验船机构审批合规率X62 33 海事行政处罚合规率X63 34 海事行政强制合规率X64 35 错案责任追究率X65 36 规费征收合规率X66 X6 其他海事管理 绩效 37 政务公开率X67 38 船舶交通事故率X71 39 登记船舶被重点跟踪率X72 40 持证船员被强制培训率X73 X 海 事 管 理 绩 效 评 估 指 标 体 系 X 海 事 管 理 绩 效 评 估 指 标 体 系 X7 社会影响绩效 41 社会满意度X74等次 4 目标层准则层指 标 层变量标识 单位 42 执法人员培训情况X81 课时 人 43 执法人员对海事法律法规的了解程度X82等次 44 执法风纪状况X83等次 45 文件管理情况X84等次 46 执法行为成本X85元 人 X8 管理潜力绩效 47 信息化应用水平X86等次 3评估模型的建立 3 1 确定评估指标的权重 评价因素权重的确定一般采用三种方法 一是专家会议法 二是特尔裴法 第三是层次分析法 层次分析法是运用多因素分级处理来确定因素权重的方法 这种方法可以比较科学地确定权重 因此我们采用层次分析法 AHP 作为本 次权重确定方法 用 AHP 分析问题大体要经过以下五个步骤 建立层次结构模型 构造 判断矩阵 层次单排序 层次总排序 一致性检验 其中后三个步骤在 整个过程中需要逐层进行 5 运用基于 AHP 的权重设计方法 通过向海事管理专家 学者发放咨询问卷 然后对 咨询问卷进行统计 分析 得到海事管理绩效评估结构模型中指标层和准则层的两两比较 判断矩阵 应用计算机编程对判断矩阵进行运算 得到各层次判断矩阵的一致性系数以及 各层次指标的权重 3 2 建立评语集 评语集是对评估对象优劣的描述 评语集不能太多 也不能太少 多了不 便于掌握标准 少了也不利于区分评估的好坏 评语集对各层次指标都是一致 的 对于评估对象 可取评语集如下 Y 好 较好 一般 较差 差 Y1 Y2 Y3 Y4 Y5 其中 Y1 90 100 Y2 80 89 Y3 70 79 Y4 60 69 Y5 0 59 3 3 评估等级隶属度的确定 通常评语论域的取值采用分等级评分 再量化综合的办法给定 一般评估等级通常采用五级评定法 也可以分为七等 最简单的量化是给 每个等级分别赋值为5 4 3 2 1 二是设定各等级的隶属度 隶属度可以 通过一个隶属函数给出 10 12 x x e 定性等级的量化设定见表2 表2 评估等级隶属度 5 评估等级好较好一般较差差 0 9500 8450 7450 6450 295 设分数集 F f1 f2 f3 f4 f5 本文以 100 分作为评估的满分 将 评估等级进行量化 F f1 f2 f3 f4 f5 95 分 84 5 分 74 5 分 64 5 分 29 5 分 3 4 评估的数学模型 6 对复杂对象的多指标综合评估方法 国内外先后提出了价值分析法 层次 分析法 模糊综合评估法以及数据包络分析法等 鉴于海事管理绩效评估指标 体系是一个具有多层次 多指标的复合体系且评估主体对客体的模糊性 选择 模糊综合评估模型评估海事管理绩效具有更强的科学性和实用性 1 确定评估矩阵 R 评估矩阵 R 为 X Y 的模糊映射 对准则层各评估指标 Xi 建立模糊评估 矩阵 R mnmm n n m rrr rrr rrr R R R R 21 22221 11211 2 1 对于定量指标可根据评估分值的计算结果对应于评语集做出判断 其计算方法为 正效应指标 max i ip ip k k f 其中 是第个海事部门第 个指标的实测值 是个海事 ip kPi max i kn 部门中第 个指标的最大 最好 实测值 是第个海事部门第i ip fP 个指标的评估分值 i 负效应指标 jp j jp k k f min 其中 是第个海事部门第个指标的实测值 是个海 jp kPj min j kn 事部门中第个指标的最小实测值 是第个海事部门第个指j jp fPj 标的评估分值 对于定性指标可通过专家判断给出 2 进行多级模糊综合评估 本文设置了多级指标 因此最终评估结果需由多级模糊综合评估后得出 A 6 即 21ni bbbbRWB 其中 i 1 2 n n j jiii bab 1 n i i a 1 1 具体由如下两个步骤完成 一是计算准则层第 i 个指标的综合评估集 Bi 21ipiiiii bbbRWB 其中 Ri为评估因素 Xi的评价矩阵 i 1 2 m inpinin piii piii i rrr rrr rrr R 21 22221 11211 其中 n 为第 i 个指标下的评估因素个数 m 为准则层指标个数 p 为评语 集中元素的个数 二是计算目标层综合评估集 B 21ni bbbbRWB mpmm p p m bbb bbb bbb B B B R 21 22221 11211 2 1 3 计算最终评估值 T FBE 式中 E 为综合评估值 B 为最终综合评估向量 F 为评估等级分行向量 FT为 F 的转置矩阵 综合评估值的大小 反映不同评估指标的高低 从而为客观评估海事管理 绩效提供了科学依据 4 海事管理绩效评估案例 根据评估模型 对 A B C D 四个海事局进行绩效评估 应用计算机编 程计算得到四个海事局目标层模糊评估向量为 计算目标层即最终综合评估值 00014 0 253 0733 0 AA RWB 00141 0 339 0 520 0 BB RWB 014 0 00026 0 960 0 CC RWB 0145 0 284 0 466 0 105 0 DD RWB 7 06 92 5 29 5 64 5 74 5 84 95 00014 0 253 0 733 0 T AA FBE 同理 85 79 8 9355 88 T DD T CC T BB FB EFB EFBE 根据最终综合评估值可以对各海事局海事管理绩效做出如下排序 C 海事 局 93 80 A 海事局 92 06 B 海事局 88 55 D 海事局 79 85 C 海事局 海事管理绩效情况最好 C A 海事局综合评价为 好 等次 B 海事局综合评 价为 较好 等次 D 海事局综合评价为 一般 等次 进一步分析可以得出 各海事局各绩效种类的好差情况 5 结论 本文根据海事管理的具体内容 构建了海事管理绩效系统 应用系统分析 理论 建立绩效评估指标体系 应用层次分析法 确定各指标的权重 应用模 糊综合评估法 建立绩效评估数学模型 通过实证分析得出 该评估指标体系 能较科学全面地反映海事管理绩效情况 使用该评估数学模型 具有以下优点 1 能把定性分析和定量分析结合起来 较好地防止和克服评估过程中 的主观随意性和盲目性 增强评估结果的客观性和科学性 2 可以根据评估结果 进行各种影响因素的调整 优化 组合 及时 了解海事部门在哪些方面做得好 哪些方面做得差 以促进海事部门管理绩效 的提高 3 评估数学模型具有一定的结构性和程序性 易于在计算机上实现 4 对各海事部门海事管理绩效评估得分进行排序 结果一目了然 缺点和不足就是使用层次分析方法确