




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
政务大数据资源平台项目可研方案目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7项目概况目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7数据平台现状:数据平台已实现部分功能区当前大数据系统架构为了满足市大数据中心考核要求,以及区委办局数据共享调用的要求,在尚未申报资金的情况下,目前在区信息中心已经搭建的大数据环境如下:持续为数据目录编制系统提供支持,对接市大数据中心,提供数据目录。满足市大数据中心的日志交换要求,提供FR、RK办件数据服务。对接市大数据中心下发数据需求,对数据编目整理、归集,以及日常事务。市区两级交换平台级联开发,满足区别数据交换业务,市区两级数据交换业务。维护区别大数据中台平稳运行。当前区大数据系统已具备资源目录管理、数据交换管理、交换监控管理、数据交换异常检测、表与字段权限管理、数据归集管理、数据源配置管理、数据归集策略管理、归集任务管理、异常数据管理、数据发现与消息通知管理等功能应用系统现状:总量700+,区级部门自建300+个经过全面梳理与统计,目前全区主要使用的应用系统超过700个,其中自建的信息化系统超过300个,各单位部署在电子政务云的业务应用超过200个。数据资源现状:区级各部门普遍存在数据交叉供需的需求现有网络、设备以及其他信息资源情况现阶段,区科委的信息化机房分布情况如下(不含公、检、法系统):m区电子政务云中心主要机房为1个,其他为公安云、教育云和卫健云等三个云分中心m区电子政务云由m区信息服务中心负责建设和运维,目前全区已有35家单位接入政务云,共承载340个业务应用。政务云配置虚拟机580台,政务网区和互联网区差不多各一半。目前m区政务外网骨干结构为“核心-汇聚-接入”的三层结构,接入交换机—汇聚交换机间实现双链路互联,汇聚—核心间实现网状互联。由于整个网络有了明确的层次划分,汇聚层与核心层也将承担各自的功能。汇聚层实现所有接入单位三层网关功能。核心层实现核心应用服务器群、Internet出口、市政务外网出口的接入,并实现接入链路的冗余。汇聚层-核心层设备之间环状冗余。网络现状机房现状虚拟化平台现状本项目与已有系统的关系整体架构重新部署功能模块全面升级市大数据平台对接市级数据资源落地归集全区公共数据原有系统与数据数据资源目录系统公安视频图像平台物联网平台汇聚整合共享应用展示评价六位一体大数据资源体系数据归集管理系统拟建区级大数据资源平台(一期)项目是加快整合本区现有数据共享交换平台、数据资源目录和基础数据库等与大数据资源平台相关的平台的基础上,进行整体架构的重新部署和功能模块的全面升级,在满足与市大数据资源平台的对接,并承接市大数据资源平台的落地数据资源,同时,归集全区内各单位公共数据资源,按需实现共享交换,逐步构建集区级公共数据汇聚、整合、共享、应用、展示、评价六位于一体的大数据资源体系。GIS服务平台目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7项目建设的必要性区级大数据平台建设是贯彻和落实国家大数据战略的重要实践1区级大数据平台建设是响应本市公共数据管理办法的必然要求2区级大数据平台建设是打破信息壁垒解决数据烟囱的关键举措3区级大数据平台建设是提升智慧城市管理服务能级的核心中枢4区级大数据平台建设是区城市经济高质量发展的内在需求5本项目建设具有必要性,具体如下:项目建设背景及依据项目需求分析业务量需求45家区级部门,14个街镇公共数据资源市级大数据资源平台数据下发600+政务用户,80万+办事群众3年内委办局上线总数据量160TB,每日交换量280GB数据资源中心三年总数据量270TB,第一年规划60TB功能需求区大数据支撑子平台区数据共享交换子平台区数据资源中心区三清单一目录管理区数据治理子平台区数据管理子平台区数据安全子平台区统一数据管理门户性能需求平台需要具备5PB数据存储与管理能力,其中结构化数据存储与管理能力要求达到500TB。平台数据计算/并发能力:数据融合计算(百万级数据)执行效率达到分钟级别;分布式存储平台支持超过200人的数据开发人员并发访问,同时进行数据处理任务的开发、测试和使用;平台的调度执行器需具备2000个在线数据任务在分布式存储平台下的管理和执行的能力。平台门户使用:1) 登录系统时长;页面加载时长<3s;并发用户数(个)≤200;总请求数(个)≤2000;页面平均响应时间<3s;页面响应最小时间<0.4s;页面响应最大时间<5s;报表平均加载时间<5s。架构需求建立自身的统一技术栈。开放架构:平台本身具备模块化开放和集成能力。支持多租户和容器化资源弹性伸缩部署。架构的先进性:技术架构中的技术组件选型,从技术成熟度、性能、稳定性、持续研发升级、使用后业内评价、易维护性、适配性等方面做出考量,为架构选型提供参考,保证整体架构中的组件的先进性。架构的高可用:在长时间、多任务场景下的稳定运行。项目需求分析硬件设备需求大数据资源平台:14台大数据共享交换体系软件:20台数据治理系统软件:2台配置:4C/8G/300G标准配置,共需要144C核数,288G内存,10800G磁盘容量。平台应用部署资源的硬件部分可考虑由区电子政务云统一提供。网络环境需求区级大数据资源平台部署在区电子政务云上,并借用政务云所处的网络环境下来满足平台的网络部署需求,同时通过电子政务外网、互联网、物联网、专网等网络的互联互通环境需求。标准规范需求安全保障需求物理安全网络层安全系统层安全应用系统安全资源数据库数据涉及部门多,且存在跨部门、跨系统的数据交换,各系统建设难免出现异构现象,数据格式、类型不一致,数据质量问题突出。统一标准是各局点之间互联互通、信息共享、业务协同的基础。目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7项目建设原则和基本策略基于市级技术规范开放原则先进原则安全保密原则统一建设、管理与应用体系统一技术规范统一模型设计平台功能规范要求借鉴互联网思维,提供标准化环境,实现应用与平台分离,强调开放、协作、共赢,打造开放的“生态”。引入先进技术及经验,加强自身对技术掌控能力,建设“低成本、高效率、可管理维护”的大数据资源平台。确保数据安全,防止数据泄露保护自然人、FR信息安全隐私保护……利旧原则渐进原则可靠原则实用原则充分借鉴现有系统在数据、架构、应用、运维和人员等方面的储备和积累,尽量利旧现有资源。按照“统一规划、分步实施”要求,逐步推进组织机构建设,推进大数据资源平台建设和运维工作。在技术服务和维护响应上同用户积极配合,确保系统的可靠;对数据指标要保证完整性、准确性。操作简单、快捷,紧密结合业务;满足规范要求的效率与响应时间,有良好人机接口与灵活的展现方式。项目建设标准与规范本项目建设依据主要为国家、市公布的相关工作要求和意见通知,以及电子政务等信息化技术规范。《市公共数据和一网通办管理办法》《市全面推进‘一网通办’加快建设智慧政府工作方案》《市政府电子政务“十三五”发展规划》《市电子政务云建设工作方案》(沪府办发〔2016〕47号)《促进电子政务协调发展的指导意见》国办发〔2014〕66号《关于运用大数据加强对市场主体服务和监管的若干意见》国办发〔2015〕51号《促进大数据发展行动纲要》《关于印发政务信息资源共享管理暂行办法的通知》(国发〔2016〕51号)《市推进智慧城市建设2014-2016年行动计划》《市国民经济和社会发展第十三个五年规划纲要》《市政务数据资源共享管理办法》《国务院关于印发政务信息资源共享管理暂行办法的通知》(国发〔2016〕51号)《国务院关于印发“十三五”国家信息化规划的通知》(国发〔2016〕73号)《政务信息资源共享管理暂行办法》(国办发〔2017〕39号)《政务信息系统整合共享实施方案》(发改高技〔2017〕1529号)。政策指导文件《XML在电子政务中的应用指南》(GB/Z19669-2005)《电子政务主题词表编制规则》《电子政务数据元第1部分:设计和管理规范》GB/T19488.1-2004《电子政务数据元第2部分:公共数据元目录》GB/T19488.2-2008《政务信息资源交换体系第1部分:总体框架》GB/T21062.1-2007《政务信息资源交换体系第2部分:技术要求》GB/T21062.2-2007《政务信息资源交换体系第3部分:数据接口规范》GB/T21062.3-2007《政务信息资源交换体系第4部分:技术管理要求》GB/T21062.4-2007《电子政务业务流程设计方法通用规范》《电子政务标准化指南》《基于云计算的电子政务公共平台技术规范》管理及技术标准规范项目总体建设目标指导思想构建以区城市大脑为核心,打造“能呼吸、自生长、有温度、共生态”的区级综合智能体(一体),提升“城市服务人性化、管理精细化、应急快速化、决策科学化”(四化)水平加快推进与承接市大数据资源平台的落地数据资源,归集区内各单位数据资源,按需实现共享交换;构建形成区公共数据汇聚、整合、共享、应用、展示、评价为“六位一体”的大数据资源体系;构建区级数据基础库、专题库和主题库为核心的数据资产;构建数据集成、数据共享、数据管理、数据决策的综合管理服务体系,确保大数据平台全面支撑m区公共数据协同服务、城区管理协同服务、惠民数据协同服务和兴业数据协同服务;基于数据资源平台为m区领导决策和减轻基层人员工作量提供坚实的数据支持。总体建设目标聚:推进与市级RK、FR、空间地理库的数据集成,促进电子证照库对接利用;逐步推进区级各部门视频数据、物联数据以及基层业务数据的数据汇聚。管:构建一站式数据资产管理平台,通过级联实现区内数据上报市级平台,结合区内情况进行本地数据资产目录管理,形成对数据全生命周期管理及各环节安全监管。通:实现基于应用场景的数据资源授权管理机制,推动公共数据按需充分共享。实现数据分级分类开放管理,扩展共享交换平台功能。用:开展主题数据库建设,推动数据资源整合及数据分析应用。开展数据应用模型及算法研究,探索数据服务模式创新;推进区级跨部门的数据智能应用。安:打造整体安全管控体系,保证平台上政务数据在数据汇聚、数据管理、数据共享、数据开放等全生命周期中的安全防护能力。项目建设路径规划启动区级大数据平台资源中心建设建立统一的政府数据信息资源目录启动大数据资源平台各平台功能建设建设充实现有管理功能构建城市驾驶舱支撑城市运行应急指挥的应用新建宏观经济库,民生保障等相关主题库,数据资源中心完成度达到总体100%,基本完成城市治理、民生保障等为主题的资源归集,并形成相关的专题库和主题库;完善区级大数据资源平台功能建设,实现全区大数据综合运营管控;汇聚政府侧与社会侧的政务、视频、物联数据等,建立大数据服务平台,带来多样化的大数据服务;完善组织能力保障,实现跨越共享。持续完善数据资源中心的相应的基础库、主题库和专题库,并支持各类综合创新应用顺利运行;实现以政府惠民数据共享和实现社会数据交换功能,全面实现内外部数据交换共享;建设全面的保障体制,共享制度更趋于标准化、体系化、制度化;完善组织实施机制,提高数据开放管理水平,实现数据治理标准规范和安全保障,奠定数据发展基础;构建公共数据汇聚、整合、共享、应用、展示、评价为“六位一体”的大数据资源体系,支撑区级大数据资源生态体系闭环。全面构建-2021全面深化-2022全局引领-2023项目建设按照总体规划,分步实施的原则来进行,首期完成基础平台的搭建,后续逐步完善、丰富区级大数据平台能力和应用的建设。至2021年底,基本形成区级大数据资源平台基础功能架构,建立基础的数据资源中心,支撑各部门急用先行的数据共享需求至2022年底,建设形成完善的区级大数据资源平台功能,构建相对完善的区级数据资源中心,支撑各部门主要的数据共享需求至2023年底,构建形成区级公共数据“六位一体”的大数据资源体系,实现城市服务人性化、管理精细化、应急快速化、决策科学化”(四化)的战略目标总体平台定位:区级大数据资源平台是城市大脑的重要组成部分市-区一体化大数据资源平台总体架构区级大数据资源平台的总体架构数据湖数据智能子平台智能标签数据探索画像分析数据DNA全景监控SRC近源数据层:区级条线业务数据,以及结构化的视频及物联网感知数据ODS源数据层:区级条线业务数据,以及结构化的视频及物联网感知数据专题库
主题库基础库人脸/车辆数据库视频点位数据库城市事件数据库…视频布控数据库公共场所数据库设备基础数据库水务预警数据库污染预警数据库…燃气预警数据库设备维修数据库公共业务数据域应急指挥数据库公共安全数据库市场监管数据库…城市管理数据库经济发展数据库门址数据库气象数据库水务数据库…公安数据库LBS数据库工商数据库楼宇租金数据库…产业数据库数据资产管理数据架构管理数据分析呈现数据集成管理元数据管理数据分级分类数据管理子平台数据交换服务管理统一监控交换级联对接联调接口开发数据安全子平台加密密钥管理数据脱敏管理安全审计分析敏感数据发现数据分级分类管理身份认证和权限管理大数据基础支撑子平台并行大数据计算与分布式存储(HADOOP)并行分布式关系型数据库(MPP
DB)统一数据开放门户资源查询资源申请资源使用资源详情数据目录数据服务互动交流其他开放服务统一数据管理门户安全保障体系标准规范体系区级数据资源中心公共视频数据域公共物联网数据域时空数据域社会数据域FR组织自然人空间地理…电子证照数据共享交换子平台统一运维子平台服务启动故障预案日常巡检应用系统监测业务服务监控监测资源管理数据开放清单数据标准管理流数据处理数据质量管理区级大数据资源平台各子平台间关系大数据基础支撑平台共享交换市平台业务系统1业务系统2委办局节点行业数据互联网数据互联网交换节点市/部门行业/互联网区大数据资源中心数据湖->数据库(基础库/主题库/专题库)区级数据共享交换子平台(数据交换/服务管理/统一监控/交换级联等)数据管理子平台(数据标准管理、元数据管理、数据资产管理、数据架构管理、数据异常管理、数据开发统一调度管理、数据质量管理 数据安全子平台(数据风险审计、风险识别管理、数据安全管理、敏感数据管理)数据智能子平台(数据探索、智能标签、数据DNA、全景监控、画像分析)运行支撑安全保障体系标准规范体系统一数据管理门户统一数据开放门户数据汇聚数据共享应用服务支撑数据资产统计分析数据抽取数据安全管控访问控制数据管理与治理区级大数据资源平台应用服务支撑数据安全管控共享交换共享交换平台网络架构本次区级大数据资源平台(一期)项目建设主要依托区信息服务中心提供信息基础设施和网络环境,并在区电子政务云统一规划和标准要求下进行该平台的搭建和部署建设。信息安全保障方案本项目按照信息安全等保三级的要求,依托于区电子政务云环境和数据安全子平台建设,在计划开展对现有主机、网络设备、安全设备功能及配置优化和加固工作,同时根据三级等保要求建立健全安全管理制度,进一步落实安全管理相关工作。按照三级等保要求规建,确保平台达到信息安全等级保护三级要求(85分以上)物理安全确保数据中心机房的安全包括机房的选址,机房场地安全,防电磁辐射泄漏,防静电,防火等内容网络安全确保平台网络的设计、构建和使用的安全使用基于网络的各种相关安全技术和手段,如防火墙,IPS,安全审计等系统安全保证服务器操作系统,数据库,中间件在内的平台相关系统安全使用安全评估管理工具所进行的系统安全分析和加固数据安全确保数据存储与使用安全使用数据备份和恢复等数据安全设计使用数据加密、脱敏等技术信息安全保证平台所涉及信息安全是由完整的用户身份认证以及安全日志审计跟踪对安全日志和事件的统一分析和记录确保数据与信息安全,符合信息安全管控规范围绕数据为核心,从数据采集、存储、访问、使用、修改、共享、丢失、泄漏等多个维度展开,构建全生命周期的数据安全保障体系,形成数据与信息安全管控闭环项目建设技术路线分布式存储引擎资源管理框架通用计算引擎细分领域引擎短时任务资源管理框架
YARN资源隔离/调度/管理框架Kubernetes分布式文件系统-HDFS搜索引擎ElasticSearch分布式大表HBase分布式缓存Redis消息队列Kafka分布式协作服务Zookeeper流处理引擎SQL批处理机器学习交互式分析事务数据库图分析引擎深度学习数据分析管理工具数据装载与加工数据工作流开发数据资产管理统计挖掘开发运维与监控机器学习建模可视化报表批处理框架MapReduce高性能处理框架Spark向量处理框架TensorFlow低延时流处理框架Flink本项目开发过程中将使用面向服务架构(SOA)本项目开发过程中将采用多层架构体系本项目将使用JavaB/S开发技术本项目开发过程中将采用J2EE技术架构本项目将实现模板化的图表配置区级大数据资源平台的建设将选用先进、成熟、通用、开放的技术路线,并确保与市级大数据资源平台的技术体系保持一致目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7区级大数据资源平台(一期)建设目标与内容一期建设内容数据基础支撑子平台区级数据资源中心数据共享交换子平台数据管理子平台统一数据管理门户城市驾驶舱数据安全子平台统一运维子平台一期目标:至2021年底,基本形成区级大数据资源平台的基础功能架构,建立基础的数据资源中心,支撑各部门急用先行的数据共享需求平台支撑建设目标启动区级大数据平台资源中心建设:完善基础库建设,建立以应急指挥、城市管理为核心的相关主题库,数据资源中心完成度达到总体30%,基本完成支撑城运中心中应急指挥为主题的资源归集,并形成相关的基础库、专题库和主题库;建立统一的政府数据信息资源目录,建立动态更新机制,明确全区各部门可向其他政府机构共享的公共数据,建立全区统一的数据交换共享平台及数据中心,对上对下实现垂直共享,横向打通各部门间的数据藩篱,实现部门间业务协同和指挥联动;启动数据基础支撑子平台、数据管理子平台、数据安全子平台和统一数据管理门户等为核心功能的区级大数据资源平台功能建设:实现大数据综合管理与服务功能;充实现有管理功能,形成共享工作体制和制度;构建城市驾驶舱,归集全区可视化资源集成呈现并综合多维场景全面分析;支撑基于大数据资源平台的城市运行应急指挥的应用;区级大数据资源平台一期建设总体架构与内容数据湖数据智能子平台智能标签数据探索画像分析数据DNA全景监控SRC近源数据层:区级条线业务数据,以及结构化的视频及物联网感知数据ODS源数据层:区级条线业务数据,以及结构化的视频及物联网感知数据专题库
主题库基础库人脸/车辆数据库视频点位数据库城市事件数据库…视频布控数据库公共场所数据库设备基础数据库水务预警数据库污染预警数据库…燃气预警数据库设备维修数据库公共业务数据域应急指挥数据库公共安全数据库市场监管数据库…城市管理数据库经济发展数据库门址数据库气象数据库水务数据库…公安数据库LBS数据库工商数据库楼宇租金数据库…产业数据库数据资产管理数据架构管理数据分析呈现数据集成管理元数据管理数据分级分类数据管理子平台数据交换服务管理统一监控交换级联对接联调接口开发数据安全子平台加密密钥管理数据脱敏管理安全审计分析敏感数据发现数据分级分类管理身份认证和权限管理大数据基础支撑子平台并行大数据计算与分布式存储(HADOOP)并行分布式关系型数据库(MPP
DB)统一数据开放门户资源查询资源申请资源使用资源详情数据目录数据服务互动交流其他开放服务统一数据管理门户安全保障体系标准规范体系区级数据资源中心公共视频数据域公共物联网数据域时空数据域社会数据域FR组织自然人空间地理…电子证照数据共享交换子平台统一运维子平台服务启动故障预案日常巡检应用系统监测业务服务监控监测资源管理数据开放清单数据标准管理流数据处理数据质量管理区级大数据资源平台一期各子平台关系图大数据基础支撑平台共享交换市级平台业务系统1业务系统2委办局节点行业数据互联网数据互联网交换节点市/部门行业/互联网区大数据资源中心数据湖->数据库(基础库/主题库/专题库)区数据共享交换子平台(数据交换/服务管理/统一监控/交换级联等)数据管理子平台(数据标准管理、元数据管理、数据资产管理、数据架构管理、数据异常管理、数据开发统一调度管理、数据质量管理等)数据安全子平台(数据风险审计、风险识别管理、数据安全管理、敏感数据管理)运行支撑安全保障体系标准规范体系统一数据管理门户数据汇聚数据共享应用服务支撑数据资产统计分析数据安全管控访问控制数据管理与治理区级大数据资源平台应用服务支撑数据安全管控共享交换共享交换区级大数据资源平台一期功能架构区领导各委办分析人员区级政府外部机构公民开发者运维管理者数据采集数据采集离线采集实时采集流媒体采集数据导入上报准实时采集政务数据(区级、委办单位)公共事业数据行业数据(金融、电信)物联网数据(气象、摄像头…)数据源数据资源层分布式数据存储消息队列RDB存储数据存储计算区批数据计算流数据计算图数据库分布式文件存储非结构化数据区图片数据离线数据区区级数据湖标准层(主题模型)共享层(标签、指标、基础应用库-自然人&FR&地理位置&电子证照)实时数据区应用租户应用租户应用租户实时模型实时指标实时事件结构化数据区文本数据数据安全统一身份管理统一权限管理敏感数据发现数据分类分级数据防泄漏加密秘钥管理安全日志采集存储统一安全审计分析数据脱敏管理应用层城市管理主题库社区治理主题库大数据综合应用应急主题库应急专题库门户领导驾驶舱统一数据门户智能场景分析重点专题分析统一门户管理资源目录管理数据供需对接应用集成支撑全区综合应用分析数据共享数据交换服务开发共享服务交换级联服务监控服务申请授权管理数据共享交换数据共享管理审计数据共享安全管控数据处理层数据资产管理数据地图管理数据架构管理数据质量管理数据质检管理数据分析呈现数据集成管理流数据处理数据标准管理元数据管理数据分类管理数据异常管理数据开发管理数据运维管理数据数据分级统一调度管理数据管理治理统一运维监控资源管理基础资源监测应用系统监控业务服务监控服务启停数据质量监控运维流程管理故障预案管理数据基础支撑子平台建设方案-总体架构数据基础支撑子平台建设方案-数据范围与存储区级大数据资源平台数据湖/库归集的数据范围、种类和存储方式如下:数据范围存储方式政务数据结构化数据公共事业数据行业数据物联网数据市级政务数据:市级下发的各类政务数据;区级政务数据:区级各委办局提供的公安、税务等各类政务数据;街道政务数据:下属街道社区上报的各类政务数据。水电煤:采集区级自来水、电力、煤气、供热等公共事业数据,此类数据是和百姓生活息息相关的重要民生资源。金融行业:整合金融行业个人、企业征信数据;电信行业:整合电信运营商个人、企业的位置数据、互联网内容数据等关键数据其他行业:整合其他行业的优质数据资源。视频监控数据:采集区内部署的交通、公安监等各类控摄像头所记录的监控视频数据;其他感知设备数据:采集部署在区内各类感知设备提供的数据。SQL数据库:结构化数据的存储和计算以支持SQL的关系型数据为主,如MySql、KunDB等.NoSQL数据库:非结构化数据的存储和计算以NoSQ数据为主,其中电子证照等小文件数据存储在Hyperbase等KeyValue结构的数据库中,视频等大文件存储在HDFS上。半结构化、非结构化数据数据共享交换子平台建设方案-整体定位数据交换系统负责将各前置库中的数据安全、可靠的传输到数据中心中服务管理系统可对各委办业务系统提供的服务接口接入总线,并由总线对服务接口进行统一调用监管交换级联实现区平台与市平台间数据的交换级联对接以电子政务云为基础构建全区统一的数据共享交换子平台,形成公共数据交换、共享的核心枢纽,并与市级大数据资源平台对接,打通市、区两级级联共享的通道,实现跨层级、跨部门的双向信息传递互通数据共享交换子平台建设方案-架构设计基础设施层主要是指平台建设运行所需的网络、服务器、存储、安全、虚拟化等基础支撑设施息资源层以各部门、机构等数据为基础,通过对数据信息进行汇集、加工、整合,在中心沉淀形成相关数据资源,逐步建设形成全面、权威的数据中心基础支撑层由平台基础支撑软件构成,是平台稳定运行提供服务的基础交换支撑层是数据资源汇集、处理与服务的核心支撑,通过底层中间件为基础,构建面向上层应用的服务系统标准规范与运维体系贯穿平台的各个层面,用于规范各部分的建设运行和管理,保障平台的顺利建设实施和正常稳定运行。数据共享交互平台总体架构主要分为基础设施层、数据资源层、支撑层,服务层以及贯穿多层的标准规范体系和安全保障体系。数据共享交换子平台建设方案-业务逻辑数据交换是整个平台的基础,提供系统业务接口接入、交换前置接入、数据采集、交换传输、数据集成、交换管理等功能服务;数据交换通过前置交换系统与各交换部门进行互联;通过数据传输系统各委办的数据资源汇集到数据中心;对汇集到数据中心的数据进行统一加工、处理,并将经过数据治理后的数据中心中的数据交换到各类基础信息库中;服务管理系统将各类基础信息库中的数据进行服务封装和服务发布,提供给各委办或决策分析等系统使用。系统建设围绕数据资源的采集交换、数据传输、交换监控、数据集成、服务集成、服务发布这一完整的采集应用服务流程进行,以保证平台功能、服务更加贴近实际业务应用需要。区数据交换系统拟建设数据交换平台、服务管理平台、统一监控平台、交换级联管理和标准规范等内容区级数据资源中心建设方案-建立区级数据湖建立区级数据湖,用以存储区级的各种各样原始数据,并保证湖中的数据可供存取、处理、分析及传输。通过数据采集相关技术手段,面向多类数据源,汇集区委办、市级、互联网以及其他各类数据,并统一存储到区级数据湖中。SRC近源数据层定位在于将原始数据源进行全量映射保存,是外部各类数据进入数据湖的第一步缓冲节点。该层需要汇集区各业务条线数据,数据类型需要涵盖结构化数据、非结构化数据为了构建有效的数据分层治理,构建起逐层递进的数据流转模式,数据湖构建过程中,需要构建ODS源数据层。以数据开发工具为基础,构建SRC近源数据层、ODS数据资源层,形成面向全行业的数据基础层;以数据湖为基础,为后续主题、专题建设提供基础数据支撑,同时为上层应用价值发掘提供全面的数据支撑。区级数据资源中心建设方案-构建基础库RK概况、RK查询、RK统计、RK画像、周期管理、模板管理、字段映射、执行策略、入库管理、异常告警、标签管理、标签映射和关系、图形化分析……业务信息数据公安口RK出生、死亡及户籍登记基本信息地理实体数据影像数据高程数据电子地图数据地名地址数据三维数据人口库建模元数据管理法人库建模元数据管理空间地理库建模元数据管理数据抽取/数据交换基础数据库基础库管理应用RK应用FR概况、FR查询、FR统计、FR画像、周期管理、模板管理、字段映射、执行策略、入库管理、异常告警、标签管理、标签映射和关系、图形化分析……FR应用地图服务、影像服务、地名地址服务、三维服务与坐标转换等功能服务……空间地理应用RK数据FR数据空间地理数据民政口婚姻关系双方RK信息人社口社会五险参保等RK信息卫计口孕产妇及家属信息工商口税务口质监口民政口区级数据资源中心建设方案-构建主题库根据区级智慧城市建设的总体规划,将主题库建设主要聚焦在政务服务、城市管理、应急指挥、公共安全、经济发展、市场监管、生态环境和民生保障等8个方向。主题库的建设方案可以依照智慧城市的建设需求进行增加,本期主题库的建设重点为“区应急指挥、城市管理主题库”本期建设应急主题库建设城市管理主题库社会治理主题库包括:主题库模型构建、管理对象主题库、灾害事件主题库包括:指挥体系、网格管理、专项管理、重点区域、基础信息、环境信息包括:社区治理场景分析、社区基本信息管理、居民信息管理、住房信息管理、服务设施管理、区划及机构信息管理、标签管理区级数据资源中心建设方案-构建专题库专题库设计面向应急管理常态与非常态业务需求,通过将资源库、主题库数据进行二次抽取装载的方法重新组织数据,并按照不同事件专题应用的需求重新整合形成专题库。应急专题库内容根据主题设计好的相应数据结构,本次建设将主要实现应急指挥的专题数据展示,包括消防应急、安监管理、防汛防台和重点景区等四大专题。FR自然人空间地理电子证照主题库数据实时事件数据区域基础数据传感器媒体外部系统视频监控学校医院公安消防交通数据采集数据同步数据服务本期建设消防应急安监管理专题防汛防台建立应急指挥消防专题,实现消防信息快速有效的查询,提高案件处置过程中各个环节的效率。建立以企业履行安全生产主体责任和政府履行监管职责相关工作要素为主要内容的“一企一档”。结合物联网检测设备及预警和信息接入构建防汛防台专题,监控汛情,水量分布或台风等级及风向预测等。重点景区针对辖区重点景区设立相关应急专题,对景区人流密度,危险源等进行单独监控及管理等。区级数据资源中心建设方案-三清单梳理部门调研、系统调研梳理各系统信息梳理系统对接方案梳理各系统数据资产数据资产分类(数据类别)数据资产分级(敏感级别)编制数据资源目录数据资源目录制定需求清单模板需求方部门调研需求方系统调研编制数据需求清单流程梳理培训需求清单制定责任清单模板提供方部门调研提供方系统调研编制数据责任清单流程梳理培训责任清单部门调研梳理数据共享规范梳理负面清单编制附件名单模板流程梳理培训负面清单提出数据需求在数据资源目录找到对应数据责任方审批生成需求单审批通过数据对接审批不通过进入负面清单数据申请流程:数据管理子平台建设方案-总体方案逻辑资源层(计算、存储、网络资源)政务云管理存储管理网络管理资源调度系统管理应用层数据资源管理数据加工处理元数据存储库业务库主题数据库元数据数据资源层基础设施层用户管理数据质量管理数据分析呈现专题数据库基础数据库集成管理架构管理异常管理调度管理质量模型方案配置规则管理质检报告数据源管理可视化展示可视化分析探索分析数据标准管理开发管理运维管理数据质检质量统计可视化模版可视化管理指标…区级数据库区级数据湖RK库FR库…应急主题库城市管理、社会治理应急专题库经济运行…元数据管理数据分级管理数据分类管理数据资源……数据资产管理目录地图管理数据管理涵盖了数据的全局治理和过程管控,是数据可用的前提,只有确保数据的标准化、规范化,可信可用,才能进一步通过数据运营与应用实现数据资产管理,发现内部数据问题、发掘数据价值,进而实现数据资产的盘活和有效利用。构建一体化的数据资产管控,实现全流程、全生命周期和全景式的“三全”治理,确保数据资产可靠、可信、可用;通过对数据、应用、系统综合治理与管理,构建标准化、流程化、自动化、一体化的数据管理体系。数据管理子平台建设方案-统一开发调度管理支撑数据标准管理、元数据管理、数据分级分类管理、数据资产管理、流数据处理、数据集成管理、数据架构管理、数据异常管理、数据开发管理、统一调度管理、数据运维管理、数据质量管理。数据统一开发与调度管理能够支撑多种混搭数据库环境的开发调度功能,实现数据从“采集→加工→对外应用服务”的全生命周期管理。基于元数据以及日志数据提供端到端的全过程数据开发质量管控能力。数据管理子平台建设方案-数据分析呈现数据可视化工具:专题数据,主题数据加工完成后,用户可利用可视化工具开发可视化报表,经过测试发布上线后,对外提供可视化服务;数据探索工具:用户通过数据探索工具对拥有权限的数据进行在线自助数据查询,工具记录访问日志。可视化分析工具为业务支撑人员和普通用户提供以简单拖拽操作方式,灵活、快速的生成各种报表,用户可以对拥有权限的数据资源进行快速的数据探索及数据可视化分析。统一数据管理门户建设方案信息查询政务信息资源目录服务政务信息共享网站政务信息资源服务资源审定订阅管理新闻资讯平台动态标准规范个人中心政策法规首页设计后台管理开发者权限管理统一用户管理用户和身份认证应用集成及支撑单点登录服务资源目录监控统一访问控制统一身份认证统一消息管理统一日志管理统一运行监控数据中心监控数据归集监控数据交换监控数据治理监控总体运行监控日志审计管理监控告警管理内部审核信息编目资源目录管理系统目录入库目录服务运行监控与维护目录注册目录提交目录模板管理目录汇总管理目录导出目录发布目录查询目录统计分析目录服务于信息资源对接目录审核数据需求导出业务流程设计数据供需对接系统数据责任管理数据需求分析数据需求确认数据评估管理系统对接需求有效集成整合各子平台应用功能模块,统一用户账号、组织架构、角色权限、资料应用、信息展示等方面管理,全面打造面向各单位工作人员的一体化统一集成门户。城市驾驶舱建设方案-总体方案深度展现数据智能化理解和认知,强化信息掌控能力,提供全局态势可视,揭示城市运行趋势,形成城市超级洞察力,构建具备“城市仪表盘、综合操作台、决策导航仪和超级指挥室”能力的城市驾驶舱,提升城市运行的动态监管能力、科学决策水平和应急指挥协同能力。城市驾驶舱建设方案-设计思路5维:城市多维全景X:智能分析场景Y:重点专题分析城市驾驶舱设计将以精细化管理的实际需求为驱动,实现多个专题的可视化展示,以“5+X+Y”归纳总结为为全区概览、公共管理、公共安全、公共服务、经济发展,X个智能分析场景和Y个重点专题分析的内容形式呈现。城市驾驶舱建设方案-功能架构重点专题数据资源数据安全子平台建设方案-全生命周期安全管理设计安全服务体系平台基础设备信息源身份认证信息数据授权信息安全服务信息数据使用信息大数据平台数据流数据流安全运营中心安全服务信息安全运营中心服务流程平台事前:身份访问控制数据授权管理事中:数据脱敏数据加密/密钥管理分类分级和数据防泄漏事后:日志采集及存储统一安全审计分析风险告警监控整体:数据安全合规审查数据安全子平台建设方案-功能架构大数据资源平台的整体安全防护体系包括数据资源平台环境安全和数据全生命周期安全两大核心要素。数据的全生命周期安全防护是大数据资源平台安全防护的重中之重。结合数据安全能力成熟度模型,数据安全生命周期各阶段主要防护能力,区级大数据资源平台的安全管理子平台功能架构设计如下:数据全生命周期安全敏感数据发现数据分类分级数据脱敏数据校验数据质量采集内容加密数据加密数据防泄漏传输存储介质安全内容加密分层分级存储数据备份归档过期数据处理存储内容加密数据脱敏操作行为统计分布处理安全数据防泄漏处理内容链路加密链路加密数据水印接口安全数据防泄漏交换数据销毁介质销毁销毁统一身份认证和权限管理统一的敏感数据发现统一的分类分级管理统一的加密秘钥管理统一数据数据防泄漏统一的数据脱敏管理统一的安全审计分析统一运维子平台建设方案采集层前端采集前端采集前端采集前端采集前端采集数据层数据库应用层分布式服务组件分布式缓存组件消息管理组件搜索引擎组件流处理组件分布式文件系统通知推送自监控文件管理搜索中心通用能力监控资源管理应用系统监控业务服务监控数据质量监控日常巡检服务启停故障预案基础资源监测运维流程服务层集中平台运维
统一运维平台负责对区级大数据资源平台内的所有基础资源,系统模块,系统运行行情况提供整体的监控告警,运维视图,各类流程引擎,服务启停、巡检等工具承载。使得区大数据平台上快速发现异常,及时发现并告知维护人员,快速恢复,提升平台内外客户感知。目录项目概况1现状分析2项目需求分析3总体建设框架思路与方案4平台(一期)详细建设方案5项目实施与投资规划6项目建设效益分析7项目建设周期与实施计划阶段工作任务具体内容时间第一阶段调研梳理需求调研项目组成立并进驻现场。三个月拟定调研计划并展开调研工作。梳理调研内容,形成总结文档。系统设计根据调研信息,对系统进行概要设计。在概要框架形成后对内容进行细化,形成详细设计内容,与我方建设单位确认。梳理工作有效统计、整合、归纳区内各部门的三项清单数据资源——需求清单、责任清单、负面清单,作为区政务数据资源整合、资源供需的输入。第二阶段开发建设系统软件开发与硬件安装调整开展大数据平台软硬件系统的安装调试,并进行模块化调整。七个月与市级大数据资源平台对接,完成市级四大基础库在区级大数据资源平台的落地。开展与区以及其他部门前置节点部署及业务系统数据集成工作。开展管理门户的开发,及其他定制化功能的开发系统测试对开发的系统进行测试工作。系统调整针对系统测试过程中,功能反馈的情况进行相应调整。第三阶段调试运行安装调试及交付开展系统安装调试及交付工作。两个月系统培训开展系统使用培训工作,并适当提供有关系统使用说明。系统试运行开展系统试运行工作。系统调整根据系统试运行中产生问题反馈进行相应调整。系统验收组织实施验收工作。项目实施组织安排1.项目领导小组项目领导小组由建设部门领导组成,负责项目实施过程的总协调和总推进。2.业主单位按合同规定为项目顺利实施提供必要的条件;督促检查并协调有关各方的工作;定期对项目进展情况进行研究分析3.咨询单位按业主要求,进行项目前期咨询。4.项目管理单位按业主要求,制定项目管理任务书对项目实施过程进行监督、管理并配合业主做好项目竣工验收前的准备工作。5.承建单位制订项目实施的详细设计和质量保证计划,经业主、咨询单位和监理单位审定后组织实施。项目风险及控制措施技术风险及控制安全风险及控制实施风险及控制业务需求变动风险及控制内部人员变动风险及控制技术风险:信息技术的发展是日新月异的,在系统建设时采用的有关技术和标准可能随着时间的流逝而脱离主流技术路线,从而带来较大的风险。安全风险:系统管理维护、用户数据存储、系统数据传输等方方面面都会涉及到安全性的问题。因此,整个系统在安全方面存在很大的风险。实施风险:项目实施过程中的风险因素是存在的,如何进行有效的组织和协调、严格控制实施进度将是一个极具挑战性的课题。业务需求变动风险:项目实施过程中的需求变动不但影响系统的正常、按时实施,而且很可能会造成巨大的经济损失,因此需求的变化也会导致项目风险的存在。内部人员变动风险:在项目建设过程中如果实施单位、承建单位参与项目建设的相关人员发生变动,将会对项目的顺利实施形成很大风险,尤其是关键环节、关键技术等方面移交不清晰,其影响尤其巨大。将执行严格的人员管理制度,包括信息安全保密责任制度。一般情况下不允许替换项目实施人员;如确实需要进行人员变更,则通过严密的交接和监督制度进行有效控制,并确保变更人员在正式离开前有足够的过渡期和交接期。以制度和管理两方面来降低人员变动造成的风险。区级大数据资源平台将通过深入扎实的调研,对国内外类似项目所采用的软硬件平台和技术标准有清晰的了解,进行综合比较、分析论证,选择最主流、先进、成熟、稳定和实用的技术进行建设,把这方面的风险控制在最低限度。系统运行安全控制:建设系统运行日常管理制度;系统数据安全控制:通过设计有效的安
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 初任法官考试题库及答案
- 广告设计师备考的步骤试题及答案
- 安居人性测试题及答案
- 测绘考试题库及答案解析
- 女孩口红测试题及答案
- 内蒙古天津试题及答案
- 2024广告设计师考试设计创新方法题及答案
- 机床基础知识试题及答案
- 生日蛋糕制作试题及答案
- 汉语考试题目及答案
- 成都市2022级(2025届)高中毕业班摸底测试(零诊)英语试卷(含答案)
- 焊工作业证理论考试练习题(100题)含答案
- 2022年浙江省烟草专卖局(公司)业务类岗位招聘考试试题及答案
- 课件:气象雷达讲解
- 《金属非金属地下矿山监测监控系统建设规范》
- 浙江2024年01月高考:《信息技术》考试真题与参考答案
- 反比例函数教材分析上学期浙教版
- 粉罐安装方案
- 生物信息学与人工智能的融合创新
- 腹股沟疝课件
- 中医药农药的活性成分与作用机理
评论
0/150
提交评论