公共数据质量评价体系建设需求

公共数据质量评价体系建设需求1项目概述1.1项目背景目前已建设大数据治理平台，通过数据融合、数据治理和数据服务的务实落地，有效推动系统联通和数据汇聚。数据的质量水平对数据的开发利用及其价值具有重大影响，数据质量评估更是数据资产评估的一个重要方面。目前区公共数据质量评价工作待全面开展，亟需进一步摸清全区公共数据质量状况，建立高效合理的数据质量评价和监管服务体系，推动数据质量治理与提升，进一步打造高质量数据资源体系，以支撑区数据资产评估服务建设，推动形成数据要素市场化流通、创新数据要素开发利用机制。（一）大数据治理平台建设情况大数据治理平台面向区各部门、镇街，提供基础配置、资源维护、资源目录、任务调度等服务，基于大数据平台的存储能力，建立中心数据库，汇聚各部门内部系统的交换数据，构建数据资源目录，提供数据资源订阅、资源申请单处理功能，使用支持库表类、文件类和接口类等数据资源传输的数据交换引擎，实现交换任务的高效稳定运行。大数据治理平台提供了包括数据集成平台、共享交换平台、数据开发中心、数据资产管理平台、数据标准管理平台、数据标签管理平台、数据服务平台、数据质量平台等相关数据服务支撑能力。（二）公共数据资源体系建设情况已完成建设的大数据治理平台实现数据汇聚、数据融合，初步打造了区级数据底座。目前正建设完善的人口、法人、房屋等基础库以及城中村治理、百千万高质量发展、人才大数据等主题库和专题库，为行政业务管理、市民服务、领导辅助决策等提供数据支撑，助力数字经济发展。1.2项目目标为摸清公共数据质量情况，进一步打造高质量公共数据资源体系，为数据资产化、数据要素化铺垫良好的数据基础，开展公共数据质量评价体系及质量监管项目，通过建设包含一套公共数据质量评价与监管制度、一个公共数据质量评价综合展示平台和一系列公共数据质量评价与监管服务的“三个一”体系，支撑数据资产评估服务建设，推动建立数据要素市场化流通、创新数据要素开发利用机制。本项目建设实施以大数据治理平台能力（重点对接数据质量平台能力）为基础，建设“三个一”服务体系，针对重点业务板块数据，如人口、法人、房屋、城中村治理、百千万高质量发展、人才大数据等，全面开展公共数据质量的评价、分析和监管，实现以下具体数据监管目标：一、掌握数据质量现状和态势，掌握每个业务主题、部门和镇街的数据质量整体通过率，分析各项评价指标的达标情况。二、发现存在的数据问题，定位不符合质量标准的数据，并进行主题和数源部门的溯源，分析数据问题的可能原因，提出整改提升的具体举措。三、跟进和监管数据质量问题整改情况，与相关数据管理部门和镇街沟通协作，开展问题整改、源头治理工作，推动数据资产质量的提升和优化。1.3建设内容一览表本项目建设内容包括公共数据质量评价与监管制度体系建设、公共数据质量评价综合展示平台和公共数据质量评价与监管等部分，具体内容如下：序号分项名称功能模块/工作内容单位数量1公共数据质量评价与监管制度体系建设现状调研与规则梳理项12规范文件编制与完善项13公共数据质量评价综合展示平台公共数据质量评价综合展示概览项14基础库数据质量评价专题项15专题库数据质量评价专题项16主题库数据质量评价专题项17公共数据质量评价与监管体系展示项18公共数据质量分析报告展示项19公共数据质量评价与监管服务公共数据质量检测实施工作项110公共数据质量评审与监管服务项111各部门、镇街数据质量评价需求收集整理服务项112软件平台运维服务3年公共数据质量评价综合展示平台运行维护服务项12项目详细需求2.1公共数据质量评价与监管制度体系建设搭建公共数据质量评价及监管体系，形成《公共数据质量管理办法》、《公共数据质量评价指南》和《公共数据质量评价实施及监管方案》等制度文件及配套标准规范，指导全区共享数据的接入和质量治理工作，指导全区公共数据质量评价工作的实施开展，以保障工作开展的可行性、规范性、有序性和科学性。按照省市对公共数据治理及质量管理要求，深度结合公共数据资源管理的实际情况，充分了解各部门、镇街的数据共享和汇聚工作情况以及区公共数据质量管理及考核要求，基于各类数据库的业务规则和规范，建立相应的质量评价指标体系，以确保质量评价工作的科学性、有效性、可行性。（一）现状调研与规则梳理现状分析及范围盘点：针对全区各单位建设的人口、法人、房屋等基础库以及主题库和专题库等全量公共数据进行质量评价和监管范围的梳理，需要完成至少30个库的质检范围梳理工作。调研检测规则及评价标准：针对每张大数据平台数据库表的关键信息字段进行规则梳理，并完成调研工作，需要完成至少1000张大数据治理平台数据库表的规则梳理工作。（二）规范文件编制与完善编制《公共数据质量管理办法》、《公共数据质量评价实施及监管方案》、《公共数据质量评价指南》等制度文件及配套标准规范。针对编制的制度规范文件，发至各部门、镇街进行征求意见，收集相关意见和规范优化调整，形成终稿。针对编制的3份规范办法，发至各部门、镇街进行征求意见，收集相关意见和规范优化调整，形成终稿。为确保制度体系的专业性和质量，要求至少1名专家带领项目团队开展公共数据质量评价与监管制度体系编制工作，对项目的主要交付成果质量负责，并在最终交付文档上签名确认。2.2公共数据质量评价综合展示平台在大数据治理平台数据质量平台建设及服务成果的基础上，针对公共数据提供公共数据质量评价综合展示。具体地，通过建设公共数据质量评价综合展示概览、基础库数据质量评价专题、主题库数据质量评价专题、专题库数据质量评价专题、公共数据质量评价与监管体系展示和公共数据质量分析报告展示等模块，通过量化指标及图标的方式进行可视化呈现。实现基础库数据质量评价及态势、主题库数据质量评价及态势以及专题库数据质量评价及态势等各维度数据质量情况的可知可看。公共数据质量评价综合展示概览。针对前期建设的人口库、法人库、房屋库等基础数据进行数据质量评价与分析，对接大屏、中屏和小屏（粤政易）实现专题内容的可视化展示。具体的展示内容包括：公共数据概况、公共数据质量评价与分析、公共数据质量态势分析等。基础库数据质量评价专题展示。针对前期建设的人口融合库、法人融合库、房屋融合库等基础数据进行数据质量评价与分析，对接大屏、中屏和小屏（粤政易）实现专题内容的可视化展示。具体的展示内容包括：基础库数据质量概况、基础库数据质量评价分析、基础库数据治理态势分析等。专题库数据质量评价专题展示。专题库数据质量评价专题是专门面向专项类工作的应用专题，如城中村治理、百千万高质量发展、人才大数据等专项工作，具有强聚焦、短周期、快应用的特点。通过对接大屏、中屏和小屏（粤政易）实现专题内容的可视化展示，具体的展示内容包括：专题库数据质量基本情况、专题库数据质量评价与分析、专题库数据质量态势分析等。主题库数据质量评价专题展示。主题库数据质量评价专题是专门针对各部门、镇街共享和汇聚过来的数据进行质量检测及分析。通过对接大屏、中屏和小屏（粤政易）实现专题内容的可视化展示，具体的展示内容包括：主题库数据质量基本情况、主题库数据质量评价与分析、主题库数据质量态势分析等。公共数据质量评价与监管体系展示。对接中屏和小屏（粤政易），建设公共数据质量评价与监管体系展示子模块，提供已发函的公共数据质量评价与监管体系相关文件的查阅。公共数据质量分析报告展示。对接中屏和小屏（粤政易），通过图表化/文件查阅的方式提供公共数据质量分析报告的可视化展示。本公共数据质量评价综合展示平台要求部署于云（国产云）上，需依托大数据治理平台开展的服务工作生成的明细数据为基础，投标人按照对项目现状基础以及数据质量评价进行业务规则分析和指标功能的设计。本项目需要与大数据治理平台进行对接，公共数据质量评价综合展示平台需兼容Web端和移动端安装部署，确保展示内容在办公电脑、移动终端（粤政易）和大屏上展示。服务单位在开展系统对接实施过程中，采购人负责提供相关系统所需要的有关技术资料以及相关协调工作，相关费用由服务单位承担，所有费用已计入服务单位投标总价，采购人不再另行支付费用。2.3公共数据质量评价与监管服务围绕数据质量和质量检测和评价开展的核心环节，从确定评价数据范围、评价规则及标准、宣贯和同步实施方案与制度规范、开展服务工作、落实问题数据整改提升工作的联动机制，汇集相关部门、镇街的质量评价需求，形成合理、科学、可行的工作实施链条，有效形成数据质量与质量评价和监管服务的闭环体系，围绕监测问题、发现问题、分析问题、整改问题等方面构建问题数据的处理机制，以促进全区公共数据资源的质量提升和质量风险控制。在开展公共数据质量检测和评价实施前，需要对现有数据资源体系进行盘点和分析，按照区数据管理工作的要求，对数据质量评价和分析对象和范围进行理解和明确，为顺利开展数据质量检测、分析及评价服务铺垫工作基础。公共数据质量评价及监管服务具体服务内容包括：（一）公共数据质量检测实施工作针对每张大数据平台数据库表，依照制定好的质量评价及监管规则，基于大数据治理平台中的数据质量平台开展质量检测实施工作的配置和执行，定期输出质量评价结果报告（不少于6期），需要完成至少1000张大数据治理平台数据库表的相关工作。（二）公共数据质量评审与监管服务针对每张大数据平台数据库表，定期将质检评价发现的数据问题与各部门、镇街进行反馈和沟通，并协助整改，为数据问题整改提供建议，需要完成至少1000张大数据治理平台数据库表的相关工作。同时在各部门信息化项目立项和验收时开展质量评审、沟通协调等工作，在区首席数据官评价时配合支撑区开展数据质量指标评定相关工作。（三）相关部门数据质量评价需求收集整理服务在促进问题数据整改和质量提升的过程中，与各部门、镇街做好充分沟通，形成质量提升工作协同，并在开展过程中了解和征集各相关部门、镇街的质量评价需求，包括相关数据资源信息项的质量评价规则，质量评价的需求等，至少对30个相关部门和16个镇街开展相关工作。本项目数据质量检测及评价实施工作，要求服务单位基于已建大数据治理平台数据质量平台，按照平台开展数据质量分析的功能流程，从规则模板、作业配置、质量检核、质量分析报告等功能操作流程开展服务工作。3系统性能要求本项目建设的公共数据质量评价综合展示平台主要性能要求如下：1、系统承载力：可以支持50个用户同时在线访问、执行读取操作。2、响应速度：90%的业务操作响应时间应≤3秒；非统计性查询响应时间≤5秒（网络原因除外）；复杂统计响应时间一般应≤7秒；特别复杂的、耗时长的特殊情况，应显示加载进度。3、可靠性：应能够连续7×24小时不间断工作，软件系统应具备自动或手动恢复措施，自动恢复时间<15分钟，手工恢复时间<12小时，以便在发生错误时能够快速地恢复正常运行。软件系统要防止消耗过多的系统资源而使系统崩溃。4、兼容性：满足向下兼容的要求，软件版本易于升级，任何一个模块的维护和更新以及新模块的追加都不应影响其他模块，且在升级的过程中不影响系统的性能与运行。具备支持业务扩展的需求。4系统安全要求本项目建设的公共数据质量评价综合展示平台会涉及一些业务敏感数据，并存在和其他信息系统交换数据的接口通道，如何保证数据与应用安全，是项目建设过程中一项需要优先考虑的工作，主要包括如下几点：1.满足信息安全等级保护（二级）的相关要求；2.系统自身数据的安全，如何做到防止泄密、防止丢失和损坏；3.与处于不同网络环境中其他系统进行数据交换时，如何在传输过程保障数据的完整可靠且不被窃取、如何控制访问权限和级别；4.合理系统规划，划分安全区域，制定安全策略；5.提高应用系统的安全性和可靠性，防止网络攻击、计算机木马病毒、硬件故障等意外情况损害本系统的数据安全；6.结合管理制度和技术手段确保安全策略和设计能始终有效发挥作用并不断改进。5系统对接要求（一）对接大数据治理平台的数据质量平台大数据治理平台搭建统一的数据管理平台，其数据治理中枢包括大数据基础平台、数据汇聚体系、共享交换平台、数据开发中心、数据资产体系、数据治理体系、数据对外管控、BI分析平台等，数据质量模块作为数据治理体系的重要能力，主要通过构建质量检核规则，基于质量规则进行检核作业，发现大数据平台每一张表、每一个字段的质量问题，有效追溯到质量问题的源头，辅助平台运营管理者和决策者对大数据的健康状态了如指掌。公共数据质量评价综合展示平台需实现与区大数据治理平台的数据质量平台的对接，获取公共数据质量检测规则、质量作业、质量分析报告和质量知识库等相关信息，作为本期项目公共数据质量评价综合展示平台和数据质量度评价和监管服务的数据基础。项目需按照区大数据治理平台对数据对接及数据服务的技术和管理要求，依托大数据治理平台的相关平台能力进行数据质量服务相关基础数据的对接。（二）对接“城市智管平台”平台“城市智管平台”是打造的城市运行管理中枢平台，依托数据金库建设汇聚全区各类数据，将融合通信、视频云、人工智能、物联网、大数据等各类创新信息技术与业务深度融合，支撑建立全面感知、监测预警、辅助决策、一体联动的精细化社会治理体系。“城市智管平台”平台为“1+5+1+N”架构，其中，一个数据底座，实现数据全面共享开放，高效流转，形成数据金库。五大支撑平台，即融合通信、视频云、可视化、物联网、人工智能等支撑平台，提供统一的技术支撑能力。一个数据中台，提升数据服务能力，简化数据调用难度。N个应用，以专题建设方式实现城市运行可看、可感、可知、可管、可控。本项目公共数据质量评价综合展示平台建设将按照“城市智管平台”统一的技术标准以及对接规范、页面风格进行建设，并作为相关专题内容接入“城市智管平台”平台。6项目实施要求6.1项目实施进度要求项目工期要求：本项目整体实施周期为12个月。项目通过终验后，公共数据质量评价综合展示平台提供3年运维服务。服务单位须要在2个月内完成项目需求与实施方案详细设计（质量评价综合展示平台需求，数据质量评价及监管服务数据范围、数据质检标准等）并得到采购人确认，3个月内完成公共数据质量评价综合展示平台开发部署进入上线运行后，开展初验工作。服务单位完成项目全部规定内容，项目整体服务期结束，开展终验工作。6.2项目实施团队要求投标人需明确拟投入本项目人员的数量、职务、相关资质和项目经验等，提供具体参加实施的人员配置情况、项目经理及主要成员的资质及简历。为保证项目实施质量，实施团队需包括专家1名、项目经理1名、实施人员4名。1.专家要求：（1）项目专家具有博士学位；（2）项目专家具有人社部门颁发的计算机软件领域正高级职称；（3）项目专家具有主持机构大数据咨询类项目经验；2.项目经理要求：（1）项目经理具有计算机专业相关的本科及以上学历；（2）项目经理具有全国计算机技术与软件专业技术资格（水平）考试的信息系统项目管理师证书、系统架构设计师证书、软件设计师；（3）项目经理具有10年及以上工作经验；3.驻场人员要求：（1）驻场人员具有计算机专业相关的本科及以上学历；（2）驻场人员具有全国计算机技术与软件专业技术资格（水平）考试的系统规划与管理师、信息系统项目管理师证书；（3）驻场人员具有10年及以上工作经验；项目实施期间，服务单位需提供至少1名技术人员在现场驻场。4.实施人员要求：（1）项目团队具有计算机专业相关的本科及以上学历；（2）项目团队具有全国计算机技术与软件专业技术资格（水平）考试的系统架构设计师证书；6.3项目验收要求服务单位须要在2个月内完成项目需求与实施方案详细设计（质量评价综合展示平台需求，数据质量评价及监管服务数据范围、数据质检标准等）并得到采购人确认，3个月内完成公共数据质量评价综合展示平台开发部署进入上线运行后，开展初验工作。服务单位完成项目全部规定内容，项目整体服务期结束，开