某市智慧新区数据融合服务平台建设方案.docx_第1页
某市智慧新区数据融合服务平台建设方案.docx_第2页
某市智慧新区数据融合服务平台建设方案.docx_第3页
某市智慧新区数据融合服务平台建设方案.docx_第4页
某市智慧新区数据融合服务平台建设方案.docx_第5页
已阅读5页,还剩175页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

某市新区数据融合服务平台建设方案某城市城市云计算中心有限公司目录1术语定义12需求分析22.1信息资源整合需求22.2应用系统整合需求32.3业务处理和管理需求42.3.1支撑平台建设需求42.3.2各部门业务需求42.3.3辅助决策需求53平台建设定位、目标、原则63.1平台定位63.2平台建设目标63.3平台建设原则74平台与智慧应用及某城市大数据中心94.1与智慧应用结合94.1.1平台与智慧交通104.1.2平台与智慧教育114.1.3平台与智慧民生124.1.4平台与智慧旅游134.1.5平台与其他智慧应用144.2与智慧某城市的大数据中心145项目总体框架设计165.1项目总体架构165.1.1总体架构图165.1.2架构优势215.1.3建设内容225.2平台信息资源数据分析266项目重难点分析286.1数据的准确性和完整性是项目的立身之本286.2信息的相关标准与规范的统一是核心286.3应用拓展是项目可持续发展的动力286.4规范的项目管理是项目成功的基本保障297基础信息资源梳理307.1业务组织结构整理分析307.1.1分析方法307.1.2描述模型307.2应用系统业务功能整理分析317.2.1分析方法317.2.2系统业务功能描述模型317.2.3系统处理范围描述模型317.3系统业务流程整理分析327.3.1分析方法327.3.2业务流程描述模型327.4系统业务接口整理分析337.4.1分析方法337.4.2描述模型347.5系统数据整理分析357.5.1分析方法357.5.2控制流描述模型357.5.3数据流描述模型367.5.4状态转换描述模型378数据库设计388.1数据库设计原则388.2数据库相关命名规则398.3数据库表建设思路418.4数据表结构设计428.4.1平台主表设计原则428.4.2人口库设计(参考)438.4.3组织单位库设计 (参考)618.4.4空间地理库 (参考)928.4.5搜索索引库968.4.6专题库988.4.7历史库998.5Catalog服务化1018.6存储过程设计1028.7触发器设计1038.8安全保密设计1049功能详细设计1059.1数据交换层设计1059.1.1交换桥接子系统1059.1.2交换传输子系统1089.1.3前置交换子系统1109.1.4交换管理监控子系统1109.2数据服务层设计1139.2.1数据清洗1139.2.2数据比对1169.2.3异常数据反馈1169.2.4数据融合1179.2.5数据入库1199.2.6数据仓库1199.3数据应用层设计1229.3.1信息资源门户1229.3.2基础数据查询1329.3.3基础数据统计分析1349.3.4统一搜索1509.4资源中心管理管理系统设计1519.4.1单点登录1519.4.2组织机构管理1539.4.3用户管理1549.4.4角色管理1559.4.5功能资源管理1579.4.6数据资源管理1589.4.7资源目录管理15810接口实现设计15910.1接口规范设计15910.2基础数据接口设计16010.2.1数据交换报文结构16110.2.2报文头16210.2.3报文体16310.3空间数据共享服务接口设计16410.3.1目录服务16410.3.2影像数据服务16510.3.3电子地图服务(WMS、WFS)16610.3.4专题信息图层服务(WMS、WFS)16810.3.5DEM服务16910.3.6地址匹配服务17011标准规范与管理办法建设框架方案17212项目概算1751761 术语定义本项目:某市新区数据融合服务平台项目;数据融合服务平台:是指各类信息生产、融合与服务的统一平台,是各类数据的集中储存、交换、共享的中心、枢纽、桥梁。要实现这一功能,需要建立统一的标准和规范、资源目录、数据库群和共享交互平台等。2 需求分析信息资源共享是一项很艰巨而任重道远的工作。大多数前期的政务信息化建设项目缺乏统筹规划,应用系统之间普遍缺乏标准化的数据接口定义,不同的应用系统之间彼此隔离,资源信息纵强横弱、条块分割,所有这些成为了当前迫切要求信息整合与共享的主要原因。某市新区数据融合服务平台的建设就是为了解决这些存在的问题,成为信息资源整合与共享的一种有效手段。建设数据融合服务平台的首要目标就是要创造一个信息共享的方式和环境,按照统一标准和规范,建立信息资源整合机制,规范数据采集口径、采集方式,规范数据的服务方式,建立统一的信息资源整合与交换机制。通过对人口基础信息库、组织单位基础信息库、自然资源和空间地理基础信息库等基础数据库和统计、税务、城市建设、房地产、人事、劳动和社会保障、教育、科技、卫生、民政、交通等专题数据库的整合,形成全区的信息共享平台。在信息共享平台的基础上,以建设某市新区为长远目标,进一步搭建社区综合信息服务、宏观数据分析等应用平台。2.1 信息资源整合需求政务信息资源整合是一个为了某种应用目的对政府业务和信息资源进行梳理、分类、组织、标准化,以满足政务业务协同对政务信息资源共享需求的过程。它不只是一个技术过程,更重要的是一个建立政务信息资源共享和管理机制与规则的过程。同时,政务信息资源整合应体现政务信息资源与政府业务之间的关联性,以满足政务业务协同对信息资源共享的需要。以人口数据库、组织单位数据库、自然资源与空间地理数据库为基础,以部门重点业务系统和跨部门重点应用系统为重点,推动政务信息资源开发利用。基础数据库实行物理上分别建设,逻辑上统一管理。各基础数据项的责任部门在建设和应用过程中,要按照“一数一源多用”原则,不断丰富基础信息资源,保证数据项准确完整和及时更新。依托政务信息资源目录体系与交换体系和基础数据库,按照条块结合、纵横联合的原则,实现政务信息资源有序采集、更新和应用,实现政务信息资源在同级政府各部门间的横向交换、共享和公开,以及政务信息资源的纵向传输,满足各级政务部门的信息需求。实现基于目录体系的政务信息资源整合,是解决政务信息资源整合应用的关键因素。因此,基于目录体系的政务信息资源整合具有业务驱动、按需整合,满足信息整合整体性原则及标准化的优势,可以支持在协同政务中的政务信息资源整合和共享需求,同时可以适应政务信息资源随业务动态变化的特点,保证整合的政务信息资源及时准确,是实现政务信息资源整合和共享的先进手段,是政务协同建设的基础设施。2.2 应用系统整合需求经过多年的电子政务建设,各政府部门已经建成了大量的应用系统,由于政府协同工作的需要,各应用系统之间是相互关联的,它们之间存在大量的数据交换与协同。在实际的工作中,对数据进行跨部门交换的需求日益迫切。不少政府部门由于协同办公的需要,在局部范围内建立了一些数据交换的平台,但是由于这些交换平台与业务密切相关,不能推广到更多的电子政务应用中,造成了重复建设的现象。按照统筹规划、分类整合原则,以业务协作和便民服务为纽带,统筹关联业务系统的规划和建设,推动业务协作和互动,实现管理业务协同和信息共享。部门间电子政务资源整合的重点是要解决部门间的网络互联互通、信息共享和业务协同问题,突破影响互联互通和资源共享的体制性障碍。按照统一的标准和规范,形成信息更新、共享的长效机制。加快梳理业务流程,分析信息共享需求,尽快建立市、区政务信息资源公开和共享目录体系,为政府、社会提供信息查询和共享服务;围绕部门内信息的纵向汇聚和传递、部门间在线实时信息的横向交换、部门间业务协同等需求,依托市、区两级政府数据中心,建立跨区域、跨部门的政务信息资源交换体系,为各级政府的业务协同、公共服务和辅助决策等提供信息交换和共享服务。以市政府公文交换系统为依托,逐步实现部门间公文交换的无纸化。选择社会公众关注度高、经济社会效益明显、业务流程相对稳定、信息密集、实时性强的政府服务,作为跨部门信息系统整合的重点。以社会保障、社会治安、食品和药品监管、应急指挥、投资服务、智慧交通、电子口岸、社会信用、环境保护、安全监管、财政管理、城市规划建设等重点信息系统项目建设为契机,改进和优化业务流程,促进核心业务与相关业务的协同,形成跨部门畅顺的业务流,并根据业务需求开展信息交换共享工作,保证重大信息系统数据的一致性,形成一体化、相互对接和联动的业务体系和信息系统。各单位要按照重点信息系统建设的要求,整合本单位应用系统,做好相关业务与重点信息系统业务的接口和衔接,形成部门间的业务协同机制,更好地为居民、企事业单位服务。2.3 业务处理和管理需求在本平台建立之前,各部门目前已经有大量正在运行和使用的信息系统等。这些信息系统是数据融合服务平台主要的信息来源,在平台建立之后也会提出对这些信息系统的改造要求,也会利用平台提供新的功能。2.3.1 支撑平台建设需求开发一套稳定可靠,功能完备、架构合理,扩展性良好的综合性运维平台系统。实现用户管理、权限管理、角色管理等功能2.3.2 各部门业务需求从政务信息资源的特点和应用需要来看,政务信息资源与政务活动密切相关,政府信息资源产生于政府活动的各个环节和部门。在政府的政务活动中,政务部门在履行职能、办理业务和事项中随时都需要和产生政务信息资源,它的存在和分布是跨行业、跨部门、跨地域的,并且大部分政务信息资源随着政务业务的开展不断产生和变化,是一种与政务活动相关的动态信息资源。所以,政务信息资源的整合应体现政务信息资源与政府业务之间的关联性和动态性,建立以业务需求为依据整合政务信息资源的机制,以满足协同业务对信息资源共享的需要。基于目录体系的政务信息资源整合可以根据业务需要,依靠政务信息资源目录以各种方式整合政务信息资源。政务信息资源目录描述和记录了政务信息资源的名称、业务属性、主题、分类、来源、提供部门等各种属性,即信息资源的元数据,通过元数据描述协同政务流程的上下环节关系和信息资源共享的需求。据此,既可以通过信息资源元数据(资源目录)直接查询和定位政务信息资源;也可以在业务运行的过程中通过交换服务目录由交换体系实现政务信息的动态交换和整合,保证共享的信息资源是最新的和准确的。根据协同政务信息共享的需要,基于目录体系的政务信息资源整合还可以在政务部门内部进行全面的业务梳理和信息资源调查,编制部门政务信息资源目录,对部门信息资源进行全面整合,同时可以根据某个应用主题,站在跨部门的角度进行业务梳理和信息资源调查,根据业务需要明确部门间的信息共享需求,建立政务应用信息资源共享目录,如应急指挥、领导决策等信息资源目录,为实现跨部门的按需整合和共享政务信息资源提供依据和基础。2.3.3 辅助决策需求随着基本业务处理和业务联动信息化的开展,将会从各个机构获得大量的数据。传统的业务管理难以满足管理和决策的需要。管理者/业务人员自身掌握的知识和经验有限,难以从大量数据中得出有价值的信息,从而做出判断或决策。通过辅助决策从大量数据中找出规律,利用数学模型产生信息,为决策者提供分析问题、建立模型等,帮助管理者/业务人员做出判断或决策。3 平台建设定位、目标、原则3.1 平台定位通过某市新区数据融合服务平台建设,打造城市信息化建设的引擎和基础支撑,实现区域内信息资源目录的梳理和统一管理及服务,在城区综合管理、政府机构业务应用支撑、领导决策支持和公众服务等方面,提供全方位、多层次、多途径的服务,充分利用国内外最先进的IT技术,大胆进行技术创新,形成国内领先的智慧城市大数据中心。平台的定位为:(1) 新区统一的数据交换、融合、共享及服务枢纽;(2) 新区电子政务、智慧应用、行业综合应用基础支撑平台;(3) 信息资源运营、深入挖掘和综合应用孵化平台。3.2 平台建设目标平台建设目标为:以完善的机制体制和全面的安全体系为保障,以弹性动态的基础设施平台为基础,以信息资源数据的共享、交换、融合、服务为核心,以多部门的业务流程协同为手段,打造可持续运营的、实用的、能够真正服务于社会管理、城市管理和社会经济管理的信息化体系,并探信息化与体制机制深度融合和互相促进,为未来智慧城市的建设打下良好的基础。目标可分解为如下的子目标:1) 实现党委、政府所有部门及临时设立的机构的数据交换,基础数据集中、清洗、整理,以合理的数据结构进行存储,打破部门信息壁垒,解决信息孤岛问题。2) 形成一整套数据清洗整理体系,前期采集数据通过采集-清洗-反馈-修改-再次采集数据循环,清洗整理,后期各个部门新生产的数据,都以几个数据主体部门数据为基础,产生数据后,再采集清洗,逐步提升基础数据质量。3) 形成整套数据共享体系。数据采集清洗整理后,集中到某市新区数据融合服务平台,各个部门对已整理的数据提出数据要求,在实现数据安全、保密等多重权限控制情况下,以多种方式提供给部门用户。实现部门之间的数据共享、共用,统一数据环境,减少部门之间数据差异,提高各部门数据质量,方便部门应用。4) 实现综合应用的建设。在完善的数据采集、清洗、共享体系下,在完整、实时、权威及合理结构化的政务数据融合服务平台之上,实现区域化整体数据应用,为组织单位、公众群体提供完整的数据展现、全面的基础数据服务,以及为领导决策层提供全面的、多层次的、直观的、实时有效的数据分析,解决当前部门应用片面不完整,无法宏观把控的局面。3.3 平台建设原则(1) 标准性、开放性系统所采用的相关标准必须与国际、国家、省、市级标准相符合,确保系统具有良好的开放性,能够实现与多种技术和软硬件平台的有机集成。(2) 安全性系统应具有完整、全面的安全体系和良好的安全性,能够提供信息传输保密性、数据完整性、身份识别和数字认证、防抵赖性等安全保障措施,确保信息交换的安全运行。系统设计不影响各部门相关信息系统的安全性。(3) 可扩展性系统采用可扩展的技术体系架构,以适应信息化建设和应用系统快速发展的要求。系统必须支持异构数据库之间数据交换和共享,支持主流关系型数据库,支持不同操作系统之间信息交换应用的互联互通。(4) 高可靠性系统应具有良好的可靠性,建立各种故障的快速恢复机制,确保实现724小时地正常运转,确保信息交换工作正常运行。(5) 可管理性系统应具有良好的可管理性,允许管理人员通过管理工具实现系统全面的监控、管理和配置,并为系统故障的判断、排错和分析提供支撑,可对信息交换流程进行简易、灵活地定制和调整,同时对系统运行情况能够实时的统计分析、报表展示。(6) 实现信息全生命周期管理所谓全生命周期管理,就是指从人们对信息的需求开始,到信息报废的全部生命历程的管理。实现全生命周期,需要对城市管理部件、企业和公众的信息进行全方位的收集和管理,优化、控制城市部件、企业的生命历程,提升数据融合服务平台的服务能力和政府的执政能力。(7) 科学设计,分步实施智慧新区数据融合服务平台作为数据融合、联网应用和服务的重要载体其建设是一个庞大而复杂的系统工程,必须采取强有力的统一规划、统一标准,总体把握、统筹推进,根据发展阶段和现实需要,有计划、有步骤地推进具体项目建设,并能有机融合,形成整体。其中系统的可靠性、高性能、安全性、绿色节能和扩展性五项将成为建设设计重点。(8) 信息为基,应用为本智慧新区数据融合服务平台建设的目的是打造高效的新区城市管理、企业服务和公众服务业务系统。因而,智慧新区数据融合服务平台是业务系统建设的基础,建立完善的应用系统才是建设平台最终目的。只有基于智慧新区数据融合服务平台建立的业务系统,才能发挥平台的作用。4 平台与智慧应用及某城市大数据中心 4.1 与智慧应用结合目前某城市新区已经建设了一系列智慧应用,包括智慧交通、智慧教育、智慧政务、智慧民生、智慧生活、智慧旅游、智慧娱乐等。某城市新区数据融合平台除了整合各委办局的业务数据,还需要整合来自各智慧应用的数据,并且能够使用整合后的数据为某城市智慧应用提供相应的数据支撑。通过对某城市新区智慧应用进行分析,智慧应用主要包括以下数据类型:(1) 实时动态数据:部门交换数据往往存在实时性差、更新不及时的问题,因而来自各智慧应用的实时动态数据往往具有无与伦比的价值。我们在多地的数据融合平台建设过程中,实时动态数据均能得到各部门的青睐。建议在某城市新区数据融合平台的建设过程中,能够通过结合智慧应用的实时动态信息,从而提升信息资源中心数据的价值。(2) 基础数据:也就是信息资源中心中经常提起来的四大基础资源库(住建部智慧城市中提出了五大基础资源库,在人口库、法人库、空间地理库、宏观经济库的基础上,根据住建部门的管理范围,增加了建筑物数据库),从智慧应用中的基础数据与某城市新区数据融合平台中的基础数据进行抽取比对,作为未来信息化项目建设的基础。另外,公共基础数据除了上述数据外,还包括其他的基础数据,包括视频、地下管网、专业人员、雨量、天气、车辆等满足不同应用需求的多种数据。(3) 事件过程数据。无论城市运行体征监测还是应急系统,均需要除基础信息之外的实时动态信息。而智慧应用中包含了很多事件过程数据,这些数据一方面能够及时发现城市运行中的问题,更重要的是动态的信息为数据的分析和挖掘提供了必不可少的基础。(4) 物联网监测数据。目前物联网数据应用越来越广泛,其中应用最广泛的是视频监控数据、GPS/北斗监控数据;另外在各个行业里应用较多的数据包括噪音监测、空气质量检测、水环境监测等数据。无论是在长期的数据分析还是综合应急指挥,这些数据均能够作为基底数据发挥作用。因为,某城市新区数据融合平台与智慧应用的结合,并不是将基础数据汇聚整合的过程,而是一个将基础数据、事件过程数据和物联网数据等各种不同数据进行深度融合的过程。4.1.1 平台与智慧交通某城市智慧交通包括了实时路况、停车位查询、公交线路查询、列车时刻查询、航班查询、交通地图、出行向导等智慧应用。实时路况实时路况运用先进的3G技术,为城市居民提供实时交通视频服务,最实时、最有用的交通资讯,使居民在开车出行中畅通无阻,停车加油更方便。同时更充分的利用了各个道路与停车场的有效资源,让居民能够在交通日益拥堵的时候出行倍感舒适与便捷。停车位查询停车位查询提供了某城市市内公共提车位的汇总信息,居民可以方便的从中查询到公共停车位的停车场名称以及所在位置分布。从而使居民在出行前,提前获知停车场信息,选择离目的地最近的停车位,从而提高出行效率。列车时刻查询提供全国列车时刻查询,数据由第三方公司提供,定期更新,为居民提供及时列车时刻信息,从而为居民提供方便的出行服务。公交线路查询公交线路涵盖了某城市市所有的公交站牌信息以及路线信息,居民可以通过输入出发地以及目的地,通过系统找到最优到达目的地的公交线路。系统同事支持离线查询公交路线的地图,公交导航显示多种乘车方案并提供多种备选方案,每个方案均会显示距离、到达时间,并对比不同方案的特点,用户可根据自身需求选择出行路线。以上智慧应用不仅积累了大量城市部件信息,如公交站牌,还积累了大量的居民行为信息,如出行信息,这些信息如果能够共享到融合平台中,通过数据挖掘技术,可以深入的挖掘出人的出行行为,从而为交管部门制定交通预案提供数据支撑。同时数据融合平台可以通过分析人口密度分布,交管部门可以根据分析结果更加合理的安排公交线路、公交发车时间、交通红绿灯时间间隔等,从而能够减少居民的等待时间,提高出行效率。4.1.2 平台与智慧教育某城市智慧教育包括了教育云、翼校通等智慧应用。教育云教育采用云计算服务模式,实现校园教学、教务、办公、沟通的数字化、自动化和网络化。教育云平台包括了统一认证、学校门户、网上办公、发展评价、成绩分析、教学资源等模块。(1)统一认证:解决多系统的单点登录难题,用户无需记住各种账号,实现一次登录就可方便快捷地访问多个应用系统和资源。(2)学校门户:采用了云平台管理模式,大量模板供随时更换,新闻发布、校长信箱、网络调查、投票等功能一应俱全,还可实现学校门户与上级教育局门户信息共享。(3)网上办公:提供会议管理、场馆预约、公文办理、请假报修等日常申请、工资管理、重大活动安排等学校常用功能,完善的提醒功能让效率变得更高、各种统计报表让管理者一目了然。(4)发展评价:对教师和学生的成长进行跟踪记录,使之能够全面了解自己的发展过程与发展状态。(5) 成绩分析:提供学生,班级历史成绩查询、横向分析、纵向跟踪功能,实现图形化展示各种分析结果。(6)教学资源:整合优质的校本资源、教育公共资源,开通教师学生个人学习空间,提供网络学习服务,支持师生开展网络教学,协作学习。翼校通翼校通是中国电信面向信息化时代推出的一款应用于教育系统的高科技信息互动平台,集现代计算机信息技术、网络技术与无线通信技术于一体,实现家庭与学校的互动、快捷、实时沟通的教育网络信息平台。以上智慧教育应用积累了学校信息、学生电子档案、教师档案,这部分信息能够更加完善完善数据融合平台中人口库信息,而数据融合平台可以针对适龄儿童分布,为学校合理制定教学计划提供数据支撑。4.1.3 平台与智慧民生某城市智慧民生包括了预约点餐、预约酒店、预约挂号、无线热点等便民智慧应用。预约点餐该应用整合了某城市266家餐馆信息,系统提供了在线预订座位以及电话预约功能,居民可以通过下载手机APP或者拨打对应的电话,完成点餐,从而满足居民用餐无需排队等待,省时省钱,方便快捷的需求。预约挂号该应用实时收录某城市市三级以上医院信息,包括科室、医生等门诊信息,以及医院通知、专家停诊信息等更新及时。居民可以按医院、按病症、按科室等,多种索引方式,使操作简便易行,只要登录个人真实信息、提交病情,即可享受免费挂号服务,挂号成功后将收到预约成功短信,持本人身份证即可按指定时间去就诊,方便快捷。预约酒店该应用依托114/118114语音、翼游网络、移动终端等方式,向公众提供某城市市酒店信息咨询、业务预订等个性化服务。为居民提供在线预订、资讯和交流互动的一站式酒店预订门户网站。它充分满足了居民个性化的需求,且将原来传统的上门预订酒店方式,转变为帮助采集、推荐、预订等自助式酒店预订服务。违章查询违章查询为居民提供违法车辆及驾驶人违法查询功能。通过该系统,居民可以方便足不出户,方便的获取相关的违章信息。以上智慧民生应用积累的餐馆、酒店以及医院信息能够完善数据融合平台中法人库信息。而通过对人口库人口年龄结构分布、人口密度分布、企业分布等信息进行分析,为商家选址、医院科室安排提供数据支撑,不仅能够更好为居民提供服务,还能够更加有效的保证商家的利益。4.1.4 平台与智慧旅游智慧旅游包含了旅游概况、旅游资讯、路线推荐、旅游图库、景区列表等智慧应用。旅游概况旅游概况全面介绍了某城市市旅游资源的分类、分布和区域特征概况,并就区域划分对旅游资源进行了详细的整理,游客可以很快的了解某城市市旅游资源及特点,从而能够方案的安排旅游行程。旅游资讯旅游资讯指涉及到旅游的线路、交通、住宿、餐饮的一切讯息。游客可以由此获得旅游过程中一体化的信息服务。路线推荐路线推荐提供各类最新精选的旅游线路信息。游客可以通过旅游推荐功能更加方便的完成线路的制定,从而能够在固定时间内参观更多的景点。旅游图库旅游图库提供了某城市市各景点的照片信息,游客可以在制定旅游方案是,更加深刻的了解某城市各个景点的风景。景区列表景区列表整合了某城市市所有的景点信息,提供全面、实用、丰富的旅游目的地。以上智慧旅游应用记录的数据可以通过融合平台大数据挖掘技术,从不同的维度进行挖掘,如游客来源地、时间、年龄、性别等多维度分析挖掘,根据挖掘结果可以合理的安排景点周围服务设施、有针对性的推送广告、针对旅游高峰季提前预测,制定相应的应急措施等等,最终能够促进新区旅游业发展。4.1.5 平台与其他智慧应用其他智慧应用也积累了大量的数据,智慧应用与数据融合平台合理有效的结合,能够起到双向促进作用,智慧应用积累的数据能够完善融合平台中数据的质量和完整性,而数据融合平台通过对数据分析和挖掘,能够为智慧应用提供数据支撑,从而使智慧应用更加智慧。4.2 与智慧某城市的大数据中心智慧某城市大数据中心建设以大数据挖掘和应用为出发点,制定全市信息资源数据标准,出台信息资源更新、交换、共享和开放的政策和措施,完善全市政务信息资源目录体系和交换平台,整合人口、法人、宏观经济、信用信息等基础数据库,建设基于城市基础地理信息平台,汇集人口发展、经济运行、市场监管、社会管理、公共服务等经济社会发展动态信息以及城市各类设施和生态环境信息的城市级大数据中心。利用大数据技术对经济社会发展进行多维分析和研判,充分挖掘和提升数据资源的价值,为科学预测、正确决策和快捷处理提供支撑。基于城市大数据中心,建设完善全市统一的数据共享交换开放平台,支持企业、公众和政府部门利用公共数据开发新应用。某城市新区与某城市市大数据中心数据交换模式,如下图所示:从上图可以看出,某城市新区数据融合平台与某城市市大数据中心数据交换采用双向交换的形式来完成,新区基础数据库包括人口库,法人库、空间地理库、宏观经济库、建筑物库,基础数据库在建立过程中,从不同部门交换的数据按照统一的格式进行存储,代码管理按照国家统一标准进行,从而保证了在于某城市市大数据中心进行数据交换时,格式以及对应代码的统一。在数据交换过程中,每一个基础数据库实体库都对应了一个前置库,实体库通过交换适配器将数据上传到前置库上,然后在通过数据交换平台叫新区前置库上的数据上传到某城市市大数据中心前置库上,最后在某城市市大数据中心,进行相应的数据过滤、数据比对操作,将数据保存到对应的中心库中,完成从某城市新区融合平台到某城市市大数据中心的数据上传工作。而某城市市大数据中心同时会将清洗、比对过程中产生的问题数据以及新区数据库中缺失的数据通过交换平台,分发到对应新区前置库中,从而能够有助于提高新区融合平台数据质量以及数据完整性。5 项目总体框架设计5.1 项目总体架构5.1.1 总体架构图总体架构如下图所示:5.1.1.1 数据交换层数据交换是指不同部门按照业务需求,确定信息交换流程,在部门间实现具有主动推送特点的连续、实时信息传输。典型的应用有公文交换、部门间基础信息交换、综合治税信息交换、信用信息交换、社会保障信息交换等。信息交换有集中交换、分布交换与混合交换等三种模式。数据交换的主要任务是实现数据的发送与接收,对参与者的合法性进行验证,并通过与数据传输中间件的配合,实现可靠的数据交换。数据可靠传输的目的是实现传输过程中的“不错、不丢、不重”。数据传输的可靠性由所选定的中间件软件保证,通过数据传输中的数据压缩/解压缩以及断点续传等功能,保证数据交换的可靠性。数据交换总体架构如下图所示:5.1.1.2 数据加工与处理层不同委办局交换而来的数据经过数据清洗、比对、融合环节,为某市新区数据融合服务平台打造信息完整、结构清晰合理、数据准确及时的权威数据库。5.1.1.2.1 数据清洗由于信息共享平台数据采集部门较多,各个数据采集部门的信息化建设程度各异,数据维护程度也各自不同,信息共享平台对从各个数据采集部门采集回来的数据进行规范性清洗,屏蔽数据采集过程中,数据格式错误、无用甚至对信息共享平台有危害的数据。为信息共享平台建设数据服务中心提供前期的一个数据过滤。5.1.1.2.2 数据比对数据比对主要是对采集回来的各类数据,进行关键字段的比较核对,形成各类型属性数据在主表上的挂靠,同时也将采集过来的各个类型属性数据中信息错误或有差异的数据进行更正、统一。针对已经采集并清洗后的数据,分类同地理、自然人口、组织单位三大库主表进行数据比对,比对上的数据,分主表和附属信息表存储,包括新增、修改。主表信息,累计增加,附属表比对上后携带主表id存储。无法比对上的附属表信息作为异常数据存储,以便统计和后期反馈。数据比对主要分为程序比对和人工比对两种手段,程序无法识别的数据由人工进行核实。5.1.1.2.3 异常数据反馈异常数据反馈功能,将数据采集、清洗、比对同数据采集部门形成互动。将清洗和比对工作中发现的异常数据反馈给数据提供部门,提醒数据提供部门核实的同时,也帮助提高部门自身业务数据准确性。5.1.1.3 数据融合层数据共享平台在完成数据比对,形成地理信息、自然人口、组织单位三大对象数据结构体系后,通过地理信息库标准地址和自然人口身份证号码进行三大库整合,使三大相对独立的对象进行关联,有效的实现地理、人口、组织单位的紧密结合,从而构成完整的某城市新区基础信息数据库,数据融合的过程如下图所示:(1)主体对象表抽取对各个部门采集数据进行清洗后,将信息过后的数据分主次抽取,抽取地理、人口、组织单位三大主体对象,形成主体库。其中地理信息库主表,主要由地理信息构成,以地址信息id为主键,详细地址信息为主要字段,形成地址信息库主表。自然人口信息库主表,主要由公安自然人口信息构成,以人口信息id(或身份证号)为主键,以自然人口地址信息、自然人姓名、性别等信息为主要字段,形成自然人口信息库主表。组织单位信息库主表,主要由工商企业登记信息、编办事业单位信息、民政社会团体、民办非企业单位及质监局的组织机构代码颁证信息构成,以组织单位id为主键,以工商注册号、组织机构代码证、组织单位名称、注册地址、办公地址等信息为主要字段,形成组织单位信息库主表。(2)主题表关联各主题库通过对应的主题表中的主键相互关联,如组织单位主题表通过企业地址与地址信息主题表关联、人口主题表通过人员居住地址与地理信息主题表关联、自然人主题表通过身份证号与组织单位主题表关联。(3)业务属性信息关联以主题表关联形成了数据关联融合的整体框架,各业务属性信息之间也需要通过相应的主键进行关联,如自然人口民政、劳动、计生、卫生信息等为属性专题数据表,通过身份证号与自然人主题表关联。(4)属性信息与地理信息的关联属性信息与地理信息的关联地址编码主要通过地址编码实现。地址编码的过程通常包括两个明确的步骤,即地址标准化和地址匹配。地址标准化是指在进行地址编码之前,将道路地址处理为一种熟悉的、常用的格式,纠正道路和地址名称的形式等。目前宁波市规划局已经采集了20多万条标准地址数据,具备了地址匹配的基础条件。地址匹配指确定具体地址事件的空间位置,并且将其绘制在地图上,最终目标是为给定地址,如:企业地址、人员居住地址等返回最准确的匹配结果,并通过GIS服务器在地图上找到并标明每条地址所对应的位置。地址编码的方式有3种:定位到道路、定位到区域以及定位到道路和定位到区域相结合的方式。定位到道路:是通过道路名和门牌号码进行匹配,在参考主题中每一个路段都具有道路名和起止门牌号码信息,在地理编码时,首先首先根据地址信息中道路名找到参考主题中相同名称的路段,然后根据地址信息中的门牌号及每个路段的起止门牌号码信息找到门牌号所在路段,最后根据门牌号及该路段的起止门牌号码信息进行内插确定该记录在该路段上的位置。定位到区域:将地址中具有区域属性的记录与地图地址相应属性的区域记录进行比较,如果匹配成功,则将待查地址区域以点要素形式生成在地图的相应区域内。定位到区域以及定位到道路和定位到区域相结合的方式:是将上述两个方法折中的方式来实现的。采用地址编码的优点:信息自动匹配,信息自动关联融合,减少了人力物力开销。缺点:匹配信息存在不准确现象,系统实现过程复杂。5.1.1.4 数据仓库层随着某市新区数据融合服务平台将越来越多的部门数据收集整合起来,信息共享平台数据内容越来越复杂,更多的数据信息无法得到有效的分析利用。而随着社会信息化的快速发展,平台用户决策任务越来越重,决策频率也越来越高,原始的数据分析已经无法负荷这种大量度、高频率、多维度的决策支持工作,为此信息共享平台引入数据仓库技术。数据仓库是一个面向主题、集成的、非易失的、随时间变化的数据集合,能够对平台数据进行分类、元数据抽取、数据统计、模型搭建、历史数据存储等操作,为智能分析提供多角度、多层次、多时间面的数据支持,方便智能分析中数据统计,利用数据仓库,新的分析需求无需从原始数据进行重新归总统计,可直接利用初步综合数据或中度综合数据甚至高度综合数据,从而节约数据分析时间,快速支持用户决策,同时也节约了分析系统设计开发成本。数据仓库还存放了大量的历史统计静态数据,对于以时间为主线的环比、同比、趋势等分析可提供直接的数据支持,不需向原始的数据分析那样去调用原始的历史数据来重复统计,也解决有些数据无历史数据记录的弊端。5.1.1.5 数据应用层应用系统是数据融合服务平台建设的目的,通过应用系统的建设,充分发挥基础人口、组织单位库和地理信息库融合以及多部门信息整合的优势,满足以往做不好或者不能做的业务应用,以各种灵活的方式为用户提供应用服务,例如部门共享应用、智慧社区、政府应用、领导桌面、智能分析、权限管理、全面审计、数据目录、单点登录、公众服务等。5.1.2 架构优势(1)不脱离国家基础资源库标准规范体系,充分利用已有的建设成果;(2)提供了更加深入的数据融合功能,为城市的综合管理、委办局的协同工作、智慧应用的全面服务奠定了基础;(3)提供了便捷的数据利用方式,能够使云计算中心的信息资源得到有效的利用;(4)数据的收集、清洗、比对、核查、建库形成了完整的闭环,保证了数据的完整性和现势性;(5)采用先进的技术,保证了服务良好的扩展性和实用性;(6)以空间位置信息为枢纽组织全区的基础数据,具有直观性和广泛的业务关联性,极大的提升了数据利用的效率和范围。5.1.3 建设内容本项目的建设内容包括对需要采集的信息资源的梳理和建设基础数据库,同时建设保证基础数据库数据持续更新及利用的数据交换系统、数据加工处理系统、数据目录系统、数据综合展现系统、数据分析挖掘系统、数据共享服务系统、统一管理系统、数据标准规范体系和安全体系等,具体包括:(1) 信息资源梳理针对城市各委办局信息资源的现状进行摸底调研,制定统一的信息资源标准规范,并参照标准规范采集、梳理公安局、工商局、计生局、民政局等政府部门的信息资源,形成信息资源目录体系,为实现具有普遍性的信息资源整合打下基础。(2) 基础数据库建库建立由人口、法人、空间等基础信息资源、城市视频、文档数据构成的数据库,其中人口基础信息资源包含人口原始库、人口库(人口核心信息表、人口扩展信息表);法人基础信息资源包含法人原始库、法人库(法人核心信息表、法人扩展信息表;空间地理基础信息资源包括空间地址信息表、地理信息图层、政务信息图层、公众服务图层等;物联网数据库则主要从各物联网项目中抽取实时监控的全媒体数据,实现多种监控手段的统一,构建可视化的物联网系统的数据全面的存储;同时基础数据库内容还包括各种文档数据。(3) 数据交换系统建设数据交换系统,实现各政府机构人口、法人、空间地理等基础信息的数据交换。满足在线实时或非实时数据交换的目标,为基础数据库建设获取数据信息。数据交换系统核心的功能包括了数据桥接子系统、数据传输子系统、前置交换子系统和交换管理监控子系统。无论是政务外网应用、专网应用均能够利用数据交换平台便捷、安全、高效的进行数据交换。(4) 数据加工处理系统数据加工处理系统是对通过数据交换系统交换到某市新区数据融合服务平台前置交换信息库的数据进行清洗、比对、整理后,实现数据准确无误进入数据库,并将异常数据反馈给相关委办局。数据加工处理系统的建设目的是为了保证数据的动态准确性,需要对政府基础数据库的信息进行加工处理。根据数据的具体情况,设定数据的比对、清洗流程、规则,实现对数据的自动化清洗和比对,并针对数据来源对异常数据进行反馈,并将处理完成的数据进入数据融合服务平台的中心数据库。(5) 数据融合系统数据融合系统主要实现对不同来源数据的关联和融合,从而使得数据能够对人口的全生命周期、事件的全流程进行描述。数据融合系统的功能包括数据关联绑定,实现基础数据(人口、法人)、物联网数据、空间地理数据之间的关联。数据融合系统另一个核心功能是实现不同来源的同一数据的关联绑定,从而实现各部门虽然能够采用部门数据标准,但能够在区域层面上实现数据的标准统一。(6) 数据目录系统数据目录系统是维护某市新区数据融合服务平台的展示中心,其目的是让用户能够在不接触数据的情况下,对数据的属性能够有清晰地了解。数据目录系统的功能包括目录管理,元数据管理,数据源信息注册,资源目录展示等功能。(7) 数据仓库数据仓库是面向主题的、集成的、相对稳定的、反映历史变化的数据集合。数据仓库的重点与要求是能够准确、安全、可靠地从某市新区数据融合服务平台数据库中取出数据,经过加工转换成有规律信息之后,再供管理人员进行分析使用。数据仓库主要是应用于决策支持系统,其主要目的是“提取”信息并加以扩展,用来进行处理基于数据仓库的决策支持系统(DSS)的应用。在某市新区数据融合服务平台的建设中,通过将基础数据、物联网数据、空间数据、文档数据根据具体的应用主题,抽取到数据仓库中,从而为政务业务的开展、政府的决策和管理、对公众的服务等业务决策提供依据。本方案中涉及的数据仓库主要功能有:l 原始数据抽取:将数据融合服务平台现有的原始数据进行结构化分析,提取客观可供分析使用的原始数据,填充到数据仓库,用作数据分析的基础颗粒数据。l 数据建模:根据数据仓库中的基础数据颗粒,进行维度挑拣,设置维度划分口径,搭建数据分析模型。l 数据切片综合:根据数据模型中多种维度,对原始颗粒数据进行多维度切片,并进行多层次的综合,形成轻度、中度、高度、综合的统计数据。l 历史数据存储:设置统计周期,将每次统计出来的数据结果进行存储,保存所有的历史分析记录,为历史同比、趋势分析提供直接的数据支持。(8) 数据综合展现及搜索系统数据综合展现系统分别利用图表、地图、视频等多种手段对综合性数据进行呈现和展示,从而为数据可视化提供必要的工具和手段,利用可视化的手段,去芜存菁,抽取关键数据进行展示和应用。可以分别采用二维地图、三维地图、遥感影像地图、视频物联网数据融合展示等多种手段进行展现。通过数据搜索系统,能够便捷的在海量数据中搜索出所需要的数据内容、数据分类等,从而为数据的充分利用提供工具。(9) 数据分析挖掘系统数据分析挖掘系统主要是通过利用某城市云计算中心处理平台强大的计算资源,利用BI和数据仓库工具,实现对融合数据的深入分析,满足政府决策和社会综合管理的需求。数据的分析和挖掘主要分为两个部分,分别为指标分析和数据深度挖掘。指标分析是根据政府管理需要,设定对管理决策有意义的指标,利用分析挖掘系统的数据关联关系,对指标进行呈现;数据深度挖掘是根据业务需要,用数据量化方式,并开发一定的算法,对业务目标进行综合评估。(10) 数据共享服务系统数据共享服务系统基于某市新区数据融合服务平台的数据库,系统通过接口将各个行政部门数据进行开放,同时也向各个行政部门提供将清洗整合、统计分析的数据,实现信息共享平台的“各有所供、各有所用”的设计思想。数据共享有多种方式,可以通过应用服务中心的数据应用服务接口,也可以通过数据采集时所使用的部分交换模式,包括数据库对接模式、excel交换模式、Web Service接口模式。(11) 信息资源开放系统开发信息资源开放系统,该平台与数据融合服务平台的进行逻辑上隔离,经过加工处理,不涉及隐私安全的信息针对应用系通过开发企业、独立ISV等服务提供商提供数据服务进行开放,从而促进数据向公共服务的转化。(12) 平台运营系统平台运营系统对整个平台的运行情况进行管理和监控,能够对数据交换情况、信息的访问情况、应用接口的调用情况、数据访问日志、热点数据、进行统一的管理和分析,根据运营需要生成平台的运行报表。(13) 统一管理系统统一管理系统包括两方面内容:单点登录和统一权限管理。由于用户相对分散且涉及多个行政管理部门和企事业单位,也会涉及到个人用户,同时还将集中海量数据应用。介于这种多用户,多应用的平台,系统构建统一管理系统,实现统一用户管理,统一组织架构管理,统一登录管理,减少用户、组织架构维护成本,解决用户各个应用系统都要登录的弊端。各个系统集,只需维护自身系统权限即可。(14) 信息标准规范体系基础信息标准规范体系包括数据规范和信息系统管理规范。数据规范包括信息分类、信息资源目录、元数据、数据审核、数据注册、数据建设、信息服务等标准和规范。(15) 数据安全管理体系数据安全管理,顾名思义就是要保护数据信息免受威胁的影响,从而确保某市新区数据融合服务平台的连续性,缩减业务平台有可能面临的风险,为整个业务平台部门的长期正常运行提供强有力的保障。在信息安全中,最活跃的因素是人,对人的管理包括法律、法规与政策的约束、安全指南的帮助、安全意识的提高、安全技能的培训、人力资源管理措施以及企业文化的熏陶,系统的正常运营实现都是以完备的安全管理政策和制度为前提。这里所说的安全管理制度包括信息安全工作的总体方针、策略、规范各种安全管理活动的管理制度以及管理人员或操作人员日常操作的操作规程。5.2 平台信息资源数据分析某市新区数据融合服务平台的数据不应该仅仅包含基础数据,更重要的是动态数据和事件过程数据。在平台建设中,相关的数据分别为:(1)基础数据:也就是信息资源中心中经常提起四大基础资源库(住建部智慧城市中提出了五大基础资源库,在人口库、法人库、空间地理库、宏观经济库的基础上,根据住建部门的管理范围,增加了建筑物数据库),从各部门将相关的数据进行抽取比对,作为未来信息化项目建设的基础。基础数据主要来自各个业务部门,比如人口数据主要来自公安、民政、计生、卫生、人社等;法

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论