DB51∕T 3060-2023 四川省政务信息化后评价指南

ICS03.100.99

CCSA02

DB51

四川省地方标准

DB51/T3060—2023

四川省政务信息化后评价指南

Guidelineforpost-evaluationofgovernmentaffairsinformatization

insichuanprovince

2023-04-28发布2023-06-01实施

四川省市场监督管理局发布

DB51/T3060—2023

目次

前言.................................................................II

引言................................................................III

1范围......................................................................1

2规范性引用文件............................................................1

3术语和定义................................................................1

4符号和缩略语..............................................................1

5基本原则..................................................................1

5.1独立性................................................................1

5.2客观性................................................................2

5.3针对性................................................................2

5.4结构性................................................................2

6评价方法..................................................................2

6.1基本方法..............................................................2

6.2综合评价法............................................................2

6.3逻辑框架法............................................................2

6.4层次分析法............................................................2

7评价指标..................................................................2

7.1评价指标体系框架......................................................3

7.2投资决策与建设管理....................................................3

7.3运维水平..............................................................3

7.4应用效果..............................................................4

7.5项目效益..............................................................4

8评价程序..................................................................4

8.1基本程序..............................................................4

8.2前期准备..............................................................5

8.3项目应用机构自评......................................................5

8.4实施评价..............................................................5

8.5评价报告撰写..........................................................5

8.6评价结果应用..........................................................5

9评价组织管理..............................................................5

9.1总则..................................................................5

9.2独立性................................................................6

9.3公正性................................................................6

9.4保密性................................................................6

附录A（资料性）评价指标体系..........................................7

附录B（资料性）采用层次分析法计算评价指标权重示例...................10

B.1层次分析法基本原理...................................................10

B.2采用层次分析法计算评价指标权重步骤...................................10

B.3采用层次分析法计算评价指标权重示例...................................11

I

DB51/T3060—2023

前言

本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起

草。

请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。

本文件由四川省发展和改革委员会提出、归口并解释。

本文件起草单位：四川省数字经济研究中心、四川省发展和改革委员会数字经济发展处、四川省

人民政府电子政务办公室、西南交通大学、电子科技大学、四川大学

本文件主要起草人：王丹琛、李皓迪、肖杨梅、郭一蓓、牟昕、毛鹏宇、高笑笑、柳岸、宋晶、

王颉、廖丹、罗蕾、何星星、韦涛、方智阳。

本文件为首次发布。

II

DB51/T3060—2023

引言

四川省政务信息化后评价是在四川省政务信息化项目竣工验收后，对项目的目标、执行过程、结果、

效益、作用和影响进行系统、客观的分析和总结的技术经济活动。其目的是总结经验，不断提高项目投

资决策、工程实施和运维管理水平，并为制定相关政策等提供科学依据。为明确四川省政务信息化后评

价工作的原则、内容、方法、程序，特制定本标准。

III

DB51/T3060—2023

四川省政务信息化后评价指南

1范围

本文件规定四川省政务信息化后评价的原则、内容、方法、程序和机构。

本文件适用于策划、组织、实施各种类型四川省政务信息化项目的后评价工作。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，

仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本

文件。

GB/T23691—2009项目管理术语

GB/T25069—2022信息安全技术术语

GB/T25647—2010电子政务术语

3术语和定义

GB/T23691—2009、GB/T25069—2022、GB/T25647—2010界定的以及下列术语和定义适用于本文

件。

3.1

政务信息化后评价post-evaluationofgovernmentaffairsinformatization

对已竣工验收政务信息化项目的目标、执行过程、结果、效益、作用和影响等进行分析、总结和评

估的活动

4符号和缩略语

LFA，逻辑框架法（logicalframeworkapproach）

CE，综合评价（ComprehensiveEvaluation）

AHP，层次分析法（AnalyticHierarchyProcess）

CI，一致性指标（ConsistencyIndex）

RI，随机一致性指标（RandomIndex）

CR，一致性比例（ConsistencyRatio）

5基本原则

5.1独立性

应由具备相应能力、独立运行的机构开展评价工作。

1

DB51/T3060—2023

5.2客观性

应以事实为依据，客观反映项目决策、项目管理、运行维护和系统应用的实际状况，在可靠的文件

及明确的数据基础上，实事求是地得出评价结论。

5.3针对性

应针对四川省政务信息化项目的具体特征选择评价方法，综合考虑项目类型、内容、规模、复杂程

度等要素，确保分析方法和评价结论的科学性、适宜性。

5.4结构性

应针对四川省政务信息化项目，综合考虑业务结构和数字化功能结构，集合公共管理与IT技术等多

视角，做好科学解读和综合研判。

6评价方法

6.1基本方法

四川省政务信息化后评价主要采用定性和定量相结合的方法，包括综合评价法、逻辑框架法、层次

分析法，以及国际国内通行的其他方法等。具体项目的后评价方法应根据项目特征和后评价的要求，选

择一种或多种方法对项目进行评价。

6.2综合评价法

综合评价法即多指标综合评价方法，是指使用比较系统的、规范的方法对于多个指标、多个单位同

时进行评价的方法。综合评价一般采取主客观结合的方式，评价指标的选取和指标权重设置是关键。该

方法采用的计算方法需要考虑的问题比较复杂，但因其综合性和系统性的显著特点在实践中广泛应用。

计算机的普及降低了综合评价的计算方法复杂度，增强了评价可操作性。

6.3逻辑框架法

逻辑框架法是一种设计、计划和评价的方法，通过投入、产出、具体目标、宏观目标四个层面对项

目进行分析和总结。从确定待解决的核心问题入手，向上逐级展开，得到其影响及后果，向下逐层推演

找出其引起的原因，得到“问题树”，并将描述的因果关系转换为相应的目标关系，得到“目标树”和

对应的“规划矩阵”。逻辑框架汇总了项目实施活动的全部要素，并按宏观目标、具体目标、产出成果

和投入的层次归纳了投资项目的目标及其因果关系。

6.4层次分析法

层次分析法是指将一个复杂的多目标决策问题作为一个系统，将目标分解为多个目标或准则，进而

分解为多指标（或准则、约束）的若干层次，然后采取求解判断矩阵特征向量的方法获得每一层次的各

元素对上一层次某元素的优先权重，最后用再加权求和的方式递阶归并各目标对总目标的最终权重，以

作为目标（多指标）、多方案优化决策的系统方法。在本标准附录B中，提供了一个采用层次分析法计

算评价指标权重的示例。

7评价指标

2

DB51/T3060—2023

7.1评价指标体系框架

四川省政务信息化后评价指标包括投资决策与建设管理、运维水平、应用效果、项目效益四个方面。

四川省政务信息化后评价指标体系框架如图1所示。系统的指标体系详见附录A。

四川省政务信息化项目后评价指标体系

投资决策与建设管理运维水平应用效果项目效益

信

业息

务网管资

应络理源

项项资项运

用和和共

目目源目维应社经应

集数政享

投建利运组用会济用

约据务及

资设用行织程效效前

化安服数

决管水状保度益益景

发全务据

策理平况障

展保效归

水障能集

平效

果

图1四川省政务信息化后评价指标体系框架

7.2投资决策与建设管理

7.2.1项目投资决策

项目投资决策主要根据项目实施完成的实际情况，对项目立项决策事项进行评价。

7.2.2项目建设管理

项目建设管理主要评价项目建设实施管理的水平。

7.2.3资源利用水平

资源利用水平主要对项目系统实际运行过程中网络、计算、存储等资源实际使用率与建成的能力进

行比较评价。

7.2.4业务应用集约化发展水平

业务应用集约化发展水平主要评价项目系统与内外部其他信息系统的协同开发的程度。

7.3运维水平

7.3.1项目运行情况

项目运行情况主要评价项目实际运行的情况。

7.3.2运维组织保障

运维组织保障主要评价项目运维的资金、组织和队伍的保障水平。

3

DB51/T3060—2023

7.3.3网络和数据安全保障

网络和数据安全保障主要评价项目运行维护过程中网络系统和数据安全的保障水平。

7.4应用效果

7.4.1应用程度

应用程度主要评价项目对业务的支撑力度、系统功能应用频次及受益者满意程度。

7.4.2管理和政务服务效能

管理和政务服务效能主要评价项目对政务目标的实现程度、业务办理效率提升及改善程度。

7.4.3信息资源共享及数据归集效果

信息资源共享及数据归集效果主要评价信息数据质量以及信息数据开放共享水平。

7.5项目效益

7.5.1社会效益

社会效益主要对项目系统使用以后产生的社会效益进行评价。

7.5.2经济效益

经济效益主要对项目系统使用以后产生的经济效益进行评价。

7.5.3应用前景

应用前景主要评价项目创新能力以及应用的可持续性、可推广性。

8评价程序

8.1基本程序

四川省政务信息化后评价包括前期准备、应用机构自评、实施评价、评价报告撰写、评价结果应用

五个阶段。

四川省政务信息化后评价程序如图2所示。

4

DB51/T3060—2023

项目应用

前期准备实施评价评价报告撰写评价结果应用

机构自评

编写并提交

确定评价对象收集文件资料撰写初步报告评价结果反馈

自评报告

提交相关

成立评价小组审核文件资料修改初步报告问题整改

文件资料

制定评价

现场测评提交正式报告评价结果应用

工作方案

收集项目

综合分析建立档案

基础资料

形成评价

指标体系

制定评价

相关文本

图2四川省政务信息化后评价程序

8.2前期准备

前期准备主要工作包括：确定评价对象、成立评价小组、制定评价工作方案、收集项目基础资料、

形成评价指标体系、制定评价相关文本等。

8.3项目应用机构自评

项目应用机构根据自评报告范本，编写并提交自评报告，并按要求提交相关文件资料。

8.4实施评价

实施评价阶段的主要工作包括：收集文件资料、审核文件资料、现场测评、综合分析等。

8.5评价报告撰写

评价报告撰写阶段主要工作包括：撰写初步报告、修改初步报告、提交正式报告、建立档案等。

8.6评价结果应用

评价结果应用阶段主要开展评价结果反馈、问题整改以及评价结果的采信应用等。

9评价组织管理

9.1总则

后评价机构应具有明确的法律地位，应有文件描述其职能和从事技术相关应用咨询的能力范围。

5

DB51/T3060—2023

9.2独立性

后评价机构应独立于所涉及的各方，不应是其评价项目的设计方、集成方、供应商、监理方和运维

方，也不应是上述任何一方的授权代表。

9.3公正性

开展后评价的人员应不受可能影响其判断的来自商业、财务和其他压力的影响，应严格执行工作程

序确保评价的结果不受评价机构以外的人员或组织的影响。

9.4保密性

后评价机构应确保对后评价活动过程中获得的信息保密。

6

DB51/T3060—2023

附录A

（资料性）

评价指标体系

评价指标体系的详细情况如表A.1所示。

表A.1评价指标体系

一级二级

一级一级指二级三级指

指标指标二级指标说明三级指标三级指标说明

指标标说明指标标编号

编号编号

评价项目的立项实施是否符合

党中央、国务院和省委、省政

1-1-1政策衔接

府要求，是否符合相关政府规

根据项目实施划及法律法规的要求

项目完成的实际情评价项目技术方案的先进性，

1-1投资况，对项目立与项目单位内部其他信息系统

1-1-2技术方案

决策项决策事项进技术路线的兼容适配性，以及

行评价与批复文件技术方案的差异

评估项目应用自主可控软硬件

自主可控

1-1-3的情况，以及项目批复文件及

水平

实际建设情况的差异

评价项

评价项目招标采购方案中技术

目投资1-2-1招标采购

投资项目评价项目建设参数设置的合理性

决策

决策1-2建设实施管理的水1-2-2验收整改评价项目验收整改情况及效果

以及项

1与管理平评价项目实施、运行、维护过

目建设1-2-3档案管理

建设程中档案管理的规范情况

管理的

管理请求响应评价项目确定的系统请求响应

水平和在项目系统运1-3-1

能力利用率能力和利用率的目标实现程度

能力行时，通信、

资源计算处理评价项目确定的业务计算处理

计算等资源实1-3-2

1-3利用能力利用率能力和利用率的目标实现程度

际使用率与建

水平评价项目确定的信息系统数据

成的能力进行数据存储

1-3-3存储能力和利用率的目标实现

比较评价能力利用率

程度

业务评价项目系统与项目单位外部

外部

应用评价项目系统与1-4-1的其他信息系统之间协同开发

协同程度

集约内外部其他信息的程度

1-4

化发系统的协同开发评价项目系统与项目单位内部

内部

展水的程度1-4-2的其他信息系统之间协同开发

整合程度

平的程度

7

DB51/T3060—2023

表A.1评价指标体系（续）

一级二级

一级一级指二级三级指

指标指标二级指标说明三级指标三级指标说明

指标标说明指标标编号

编号编号

评估项目系统完成要求的功能

2-1-1系统可用性

的能力

项目

评价项目实际评估项目系统在运行过程中的

2-1运行2-1-2系统可靠性

运行的情况连续正常运行情况

情况

系统

2-1-3评价项目系统升级与更新频次

可升级性

运维评价项目申请维保资金的规范

评价项目运维2-2-1

评价项运维制度保障性、合理性等

的资金、组织

目系统2-2组织评价运维服务在岗人员、技术

和队伍的保障运维

运维的运维保障2-2-2能力，及使用方对第三方服务

2水平队伍保障

水平能力商的监督制度建立及落实情况

和保障评价项目系统达到的信息安全

等级分级

水平2-3-1和信息系统等级或分级保护等

保护水平

网络评价项目运行级

和维护过程中网网络系统评价项目系统运行防护能力和

2-3-2

2-3数据络系统和数据安全保障安全管理规范实施的有效性

安全的安全保障水数据评价项目数据开放应用安全技

2-3-3

保障平安全保障术防护和管理体系的有效性

商用密码评价项目商用密码应用的合规

2-3-4

应用性评估性和有效性

评价项目实际应用的系统功能

评价项目对业3-1-1功能应用率

模块的覆盖率以及使用频次

务的支撑力

应用评价项目实际应用机构/用户数

3-1度、系统功能3-1-2用户覆盖率

评价项程度量的情况

应用频次及

目满足受益者

受益者满意度3-1-3项目系统受益者的满意程度

业务需满意度

应用求的能公共服务评价项目对改善公共服务普惠

33-2-1

效果力和信普惠改善程度成效的贡献

管理

息资源评价项目实现秩序类公共事务

和评价项目对提

共享的机制秩序管理转型，改善竞争、博弈及

3-2政务升政务效能的3-2-2

水平改善程度合作活动秩序，维护协同机制

服务贡献度

健康的贡献

效能

业务评价系统使用后的业务办理流

3-2-3

流程和质量程和业务办理质量提升情况

8

DB51/T3060—2023

表A.1评价指标体系（续）

一级二级

一级一级指二级三级指

指标指标二级指标说明三级指标三级指标说明

指标标说明指标标编号

编号编号

评价信息系统中的数据是否符

合相关标准和数据规范，或者

3-3-1数据标准化

项目制定了新的标准规范，以

及标准规范的使用程度

评价项目系统内部以及与内外

信息部其他信息系统之间对同一业

3-3-2数据一致性

资源务对象的描述在编码、格式、

共享含义等方面的一致性

及评价项目系统在数据采集、加

3-3-3数据时效性工、计算和展示方面的及时性，

评价信息数据

是否在规定时间内更新信息

质量以及信息

3-3数据共享评价项目确定的部门间数据共

数据开放共享3-3-4

接口部署率享接口的部署情况

水平

提供共享评价项目提供给其他部门的数

3-3-5

数据信息量据信息量及共享数据方式

数据提供数据评价项目为其他部门提供数据

3-3-6

归集服务频次服务的情况

效果评价项目与内外部其他信息系

数据共享

统之间数据共享机制建设，以

3-3-7机制及应用

及实际利用数据处理支撑平台

平台

的情况

信息资源评价项目实际利用内外部其他

3-3-8

利用率信息系统数据的次数和频度

促进政府评价项目促进政府职能转变方

评价项目系统4-1-1

社会职能转变面的效益

4-1使用以后产生

效益提高评价项目提高办事效率方面的

的社会效益4-1-2

办事效率效益

评价项

提高评价项目提高工作效率方面的

目建设评价项目系统4-2-1

经济工作效率效益

的经济4-2使用以后产生

项目效益节约评价项目节约行政成本方面的

4社会效的经济效益4-2-2

效益行政成本效益

益以及

项目

应用4-3-1评价建设应用后形成的创新点

评价项目创新创新能力

前景

应用能力以及应用项目试点评价项目的试点示范推广应用

4-34-3-2

前景的可持续性、示范推广情况

可推广性表彰

4-3-3评价项目取得的表彰获奖情况

获奖情况

9

DB51/T3060—2023

附录B

（资料性）

采用层次分析法计算评价指标权重示例

B.1层次分析法基本原理

层次分析法根据问题的性质和要达到的总目标，将问题分解为不同的组成元素，并按照元素间的相

互关联影响以及隶属关系将元素按不同层次聚集组合，形成一个多层次的分析结构模型，从而最终使问

题归结为最低层（供决策的方案、措施等）相对于最高层（总目标）的相对重要权值的确定或相对优劣

次序的排定。

具体到本计算示例，得到四川省政务信息化后评价结果（用得分表示）是总目标，投资决策与建设

管理、运维水平、应用效果、项目效益等四个一级指标为组成元素。本计算示例采用层次分析法计算各

评价指标的权重。

B.2采用层次分析法计算评价指标权重步骤

（1）建立层次结构模型

将决策的目标、考虑的元素（决策准则）和决策对象按它们之间的相互关系分为最高层、中间层和

最低层，绘出层次结构图。最高层是指决策的目的、要解决的问题。最低层是指决策时的备选方案。中

间层是指考虑的元素、决策的准则。对于相邻的两层，称高层为目标层，低层为元素层。

（2）构造判断矩阵

在确定各层次各元素之间的权重时，采用一致矩阵法，即不把所有元素放在一起比较，而是两两相

互比较。采用相对尺度可以尽可能减少性质不同的诸元素相互比较的困难，并提高准确度。

如对某一准则，对其下的各方案进行两两对比，并按其重要性程度评定等级。表示对于上层元

素而言，下层元素和相对重要性的数值，表B.1列出9个重要性等级及其赋值。按两两比较结果构

成的矩阵称作判断矩阵。判断矩阵具有如下性质：

=

判断矩阵元素的标度方法如下表B.1所示。

表B.1比例标度表

元素i比元素j量化值

同等重要1

稍微重要3

较强重要5

强烈重要7

极端重要9

两相邻判断的中间值2，4，6，8

（3）一致性检验

对于上一步构造的判断矩阵，需要检验其一致性，以保证后续做出的排序和决策是可靠的。判断矩

阵一致性是指满足条件，它反映了两两比较判断之间是协

10

DB51/T3060—2023

调一致、不矛盾的。由于实际问题的复杂性和不确定性，特别是涉及的元素较多时，构造的判断矩阵可

能不完全满足上述一致性。为此，提出了判断矩阵只要满足“满意一致性”，就可以进入下一步操作。

具体的“满意一致性”计算方法：对每一个判断矩阵求其最大特征根及一致性指标：

再计算一致性比例: