DB3301∕T 0364.1-2022 公共数据质量治理 第1部分：体系架构

ICS35.080CCSL773301IDB3301/T0364.1—2022前言 2规范性引用文件 3术语和定义 4公共数据质量治理架构 5治理能力体系 26生命周期治理体系 47治理评价体系 附录A（规范性）公共数据质量治理通用格式规范 附录B（资料性）公共数据质量治理参考评价指标体系 DB3301/T0364.1—2022本文件按照GB/T1.1—2020《标准化工作导则第1部分：标准化文件的结构和起草规则》的规定起草。本文件DB3301/T0364—2022《公共数据质量治理》拟分为如下几个部分：——第1部分：体系架构；——第2部分：实施指南；——第3部分：绩效评价。本部分为DB3301/T0364—2022的第1部分。请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别这专利的责任。本文件由杭州市数据资源管理局提出并归口。本文件起草单位：杭州市萧山区数据资源管理局、杭州市数据资源管理局、杭州市标准化研究院、浙江鸿程计算机系统有限公司、浙江城云数字科技有限公司。本文件主要起草人：刘诚征、李鹏、孙茂阳、左爱兵、施列松、潘依婷、季海琦、王纪东、冯晨、付静、姚芳。DB3301/T0364.1—2022数字化改革中产生的公共数据质量参差不齐，造成数据共享应用效率低、成本高。在公共数据生命周期中，应建立公共数据质量治理体系，提升源头数据质量，提升交换共享数据质量，规范公共数据质量治理制度、工作流程和评价办法，加强数据可用性和可靠性，发挥公共数据要素在政府治理和服务中的价值。DB3301/T0364《公共数据质量治理》旨在指导公共数据主管单位、提供单位、使用单位建立质量治理能力、规范治理过程、评价治理成效，拟由三个部分构成。——第1部分：体系架构。目的在于规范治理活动实施前的体系建设。——第2部分：实施指南。目的在于规范治理活动实施中的技术要求。——第3部分：绩效评价。目的在于规范治理活动实施后的评价程序。1公共数据质量治理第1部分：体系架构本文件规定了公共数据质量治理架构、治理能力体系、生命周期治理体系、治理评价体系的要求。本文件适用于公共数据质量治理。2规范性引用文件下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本(包括所有的修改单)适用于本文件。DB33/T2350数字化改革术语定义3术语和定义DB33/T2350界定的以及下列术语和定义适用于本文件。公共数据质量满足公共数据管理需求的程度。公共数据质量治理提升公共数据质量过程中能力建设、问题发现、数据整改、绩效评价等活动的集合。公共数据生命周期公共数据从产生、归集、存储、共享、开放、应用和销毁等数据所历经的全链路过程。4公共数据质量治理架构4.1公共数据质量治理体系公共数据质量治理体系包括：a)治理能力体系。治理能力体系明确了主管单位、提供单位、使用单位在公共数据质量治理中应具备的能力，包括组织保障、制度规范、技术工具、人员能力；b)生命周期治理体系。生命周期治理体系按照公共数据生命周期实施治理工作，包括产生、归集、存储、共享、开放、应用、销毁等七个阶段；c)治理评价体系。治理评价体系按照公共数据质量治理成效分为五级，包括1级(非正式治理)、2级(计划治理)、3级(充分治理)、4级(量化评价)、5级(持续优化)。4.2公共数据质量治理体系架构图2公共数据质量治理体系架构见图1。数据销毁阶段治理数据销毁阶段治理数据应用阶段治理数据开放阶段治理数据共享阶段治理数据存储阶段治理数据归集阶段治理数据产生阶段治理生命周期治理体系治理能力体系图1公共数据质量治理体系架构5治理能力体系5.1组织保障应建立公共数据质量治理组织，设立公共数据质量治理决策议事协调机构。5.2制度规范应建立公共数据质量治理管理制度和工作细则。5.3技术工具5.3.1技术工具功能模块技术工具功能模块包括不限于治理规则管理、治理任务管理、问题数据管理、知识库管理、质量监控与评价。技术工具功能模块见图2。3问题归档转知识库问题归档转知识库部门绩效考核评价部门质量生成质量报告部门绩效考核评价部门质量生成质量报告知识库管理维护问题归档问题审核问题处理问题登记研判治理任务监控治理任务调度治理任务配置治理规则维护治理规则定义图2技术工具功能模块5.3.2治理规则管理功能治理规则管理包括以下功能：a)治理规则定义：定义完整性、唯一性、精确性、一致性、及时性等数据质量治理规则；b)治理规则维护：实现规则的新增、删除、修改、发布等操作。5.3.3治理任务管理功能治理任务管理包括以下功能：a)治理任务配置：将治理规则根据业务需要创建成相应的治理任务，对治理任务进行新增、删除、修改、发布等操作，发布成功后方可进行任务执行；b)治理任务调度：对发布的任务按照调度时间、触发方式等调度策略进行智能统一调度；c)治理任务监控：监控任务调度的执行情况和执行状态，对异常情况进行告警、对运行错误进行反馈。5.3.4问题数据管理功能问题数据管理包括以下功能：a)问题登记研判：登记研判发现的问题，形成问题整改责任工单，研判后进行问题分类汇总；b)问题处理：处理问题整改责任工单，问题发现者对工单进行指派，问题处理者对工单进行处c)问题审核：审核处理完的问题整改责任工单，审核通过后方可进行归档，审核不通过进行再次问题处理流程直至审核通过；d)问题归档：归档审核后的质量问题，对质量问题进行分类汇总。5.3.5知识库管理功能知识库管理包括以下功能：a)问题归档转知识库：将重复性、普遍性等典型问题归档转入知识库，作为问题解决方法和问题分析的参考；b)知识库管理维护：实现知识库的新增、删除、修改、查询等维护操作。5.3.6质量监控与评价功能4b)质量评价：定义和维护公共数据质量评价模型，管理维度和权重，对相关单位数据质量进行c)绩效考核：定义和维护质量绩效考核规范，生成质量绩效报告，支6.1.1公共数据产生阶段质量治理流程见图3。开始制定业务规则实施技术规则验证在规则下产生数据实施数据质量核查实施数据治理确认数据质量结束数据提供单位业务人员数据提供单位技术人员6.1.2治理方法公共数据产生阶段质制定技术规则确认数据质量5b)应用系统添加规则验证，包括非空验证、值域验证、唯一性验证；c)定期实施质量核查，包括完整性、唯一性、精确性、6.2.1公共数据归集阶段质量治理流程见图4。开始开始6b)数据主管单位确认数据质量业务格式规范，公共数据质量治理的通用格式按照附录A的要求c)归集数据过程开展数据核查，形成问题数据库，并以数据质量核查报告的形式反馈至提供单d)数据提供单位进行数据治理，并重新实施归集操作；6.3.1公共数据存储阶段质量治理流程见图5。制定数据分层分域质量格式规范实施数据质量核查，形成问题数实施数据治理，实施二次数据归集结束数据提供单位a)数据主管单位制定数据分层分域质量格式规范，公共数据质量治理的通用格式按照附录A的b)数据主管单位利用一体化智能化公共数据平台实施数据质量核查，形成问题数据库和质量报d)数据主管单位重新开展数据质量核查，确认无误后入库。76.4.1公共数据共享阶段质量治理流程见图6。开始开始反馈共享使用中发现的质量问题再现使用场景，研判是否需要开展分析共性问题，开展问题溯源实施数据质量核查，形成问题数据库和质量报告实施数据治理，实施二次数据归集跟踪确认数据质量治理结果确认数据治理结果，评价反馈治理结束b)数据主管单位再现使用场景，研判是否需要开展数据质量治理；f)数据使用单位确认数据治理结果，评价反馈治理成效。86.5.1公共数据开放阶段质量治理流程见图7。6.5.1公共数据开放阶段质量治理流程见图7。果b)数据主管单位再现使用场景，研判是否需要开展数据质量治理；d)数据提供单位按照数据治理质量报告实施数据治理，实施二次数据归集；f)数据使用单位确认数据治理结果，评价反馈治理成效。6.6.1公共数据应用阶段质量治理流程见图8。9开始开始构建创新应用时反馈发现的质量再现使用场景，研判是否需要开实施数据质量核查，形成问题数实施存储数据治理，发布治理信息跟踪确认数据质量治理结果，评结束实施归集数据治理，实施二次数图8公共数据应用阶段质量治理流程6.6.2公共数据应用阶段质量治理包括以下方法：a)数据主管单位应用管理团队反馈构建创新应用时发现的质量问题；b)数据主管单位数据管理团队再现应用场景，研判是否需要开展数据质量治理；c)数据主管单位数据管理团队开展数据溯源，实施数据质量核查，形成问题数据库和质量报告；d)若为存储数据治理问题，数据主管单位数据管理团队实施存储数据治理，并发布数据治理信息，包括数据来源、治理原因、治理结果、影响范围等；e)若需数据提供单位治理，提供单位按照数据治理质量报告实施数据治理，实施二次数据归集；f)数据主管单位应用管理团队跟踪确认数据质量治理结果，评价反馈治理成效。6.7数据销毁阶段6.7.1公共数据销毁阶段质量治理流程见图9。开始开始制定数据销毁业务规则制定数据销毁技术规则实施数据销毁操作(包括被销毁的数据血缘关联数据，根据业务需要进行逻辑销毁或物理销毁)实施销毁数据及关联数据质量核查数据提供单位、主管单位、使用单位业务人员相b)确认数据销毁范围，包括被销毁d)实施质量核查，包括一致性、及时性核查。7.1公共数据质量治理评价维度应从能力建设、质量评估、治理成效等维度开展公共数据质量治理评价，评价指标体系见附录B,不对评价计分细则做具体限定。a)1级(非正式治理)。随机、无序开展数据治理，依赖工作人员的经验和自觉性；b)2级(计划治理)。在自身业务系统中主动实现了数据质量治理，但未形成体系化；c)3级(充分治理)。形成了完善的治理体系，在跨系统协同中实现了数据质量治理；d)4级(量化评价)。建立了量化目标，数据质量治理情况独立量化；e)5级(持续优化)。不断改进优化治理体系，形成范式，持续输出治理成果。DB3301/T0364.1—2022（规范性）公共数据质量治理通用格式规范表A.1给出公共数据的通用字段规范要求和格式要求。表A.1公共数据质量治理通用格式规范表b)证件有效期截止日期不得早于证件有效b)姓名中不能存有空格、特殊字符、数字和TAB键b)姓名中不能存有空格、特殊字符、数字和TAB键。区DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）N..4,1），c)籍贯中不能存有空格、特殊字符、数字和TAB键b)姓名中不能存有空格、特殊字符、数字和TAB键。型b)姓名中不能存有空格、特殊字符、数字和TAB键。型b)地址类字段中不得存在空格、特殊字符和TAB建。DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）型校间期息号态息DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）息c)统一社会信用代码的第9至第17位为该机构的原组织机b)行政违法行为类型需根据相关规定编写类型DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）b)统一社会信用代码编码方法参照GB3人DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）社会信用代码b)统一社会信用代码编码方法参照GB32c)统一社会信用代码的第9至第17位为该机构的原组织机构代码间间间关码b)统一社会信用代码编码方法参照GB32b)姓名中不能存有空格、特殊字符、数字和TAB键DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）），c)住所中不能存有空格、特殊字符、数字和TAB键额）；DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）期b)姓名中不能存有空格、特殊字符、数字和TAB键b)姓名中不能存有空格、特殊字符、数字和TAB键DB3301/T0364.1—2022表A.1公共数据质量治理通用格式规范表（续）b)单位：元b)姓名中