大数据信息资源库学习笔记.docx_第1页
大数据信息资源库学习笔记.docx_第2页
大数据信息资源库学习笔记.docx_第3页
大数据信息资源库学习笔记.docx_第4页
大数据信息资源库学习笔记.docx_第5页
全文预览已结束

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1 大数据信息资源库1.1 建设任务分析1、加强统筹规划,优化大数据形成机制。高度重视大数据发展,制定大数据发展规划。强化对大数据建设工作的组织协调和监督管理,打破地区和部门数据壁垒,实现数据资源联合共建、广泛共享。建立政府和社会联动的大数据形成机制,以政府数据公开共享,推动公共数据资源的开发利用,带动社会大数据资源的收集和开发利用。加强粤港澳、国际之间的数据交流合作。2、搭建大数据技术平台,支撑城市级应用。综合利用云计算、大数据、数据仓库、数据交换等技术,搭建大数据技术平台,使其能够适应整个城市的数据规模、共享规模以及各行各业的应用需求。3、全面整合政务信息及相关社会资源,实现数据集中与共享。城市大数据信息资源库需要整合广州市城市管理与运行相关的全部信息,包括各级政府部门、党政机关所产生的政务信息、社会重要单位的关键信息、以及网络舆情信息等,总之应涵盖政府开展电子政务建设的一切内容,从而实现全面的信息共享、业务协同、决策支持等功能,作为建设智慧城市的重要基础。4、建立一套完善的数据采集体系,能够处理不同数据类型、不同数据来源、不同数据量大小的数据,从管理协调机制、接口规范制定到技术处理等方面形成一整套的大数据采集方案。5、继承和发展电子政务信息资源整合理论中的信息共享与业务协同的基本目标,形成更加全面、合理的信息资源共享目录,以及高性能的数据交换平台,并通过主数据业务建模的方式提高业务协同类应用的效果。6、建立一批重点示范工程,推进大数据应用,提高经济社会智慧化水平。推进政务信息公开;推行政府网上办事;收集分析挖掘社会政务服务需求,推进公共服务个性化和政府决策智能化。支持公共服务机构和商业机构开放与社会民生密切相关的公共数据。推进国民经济各行业和企业数据开发,发展商业智能。鼓励开展服务大众的大数据应用,提升智慧生活品质。7、通过大数据的建设加强政府的政务公开力度,将政务大数据中对公众有用的信息,通过建立渠道对外公开,并提供方便的检索、查询和分析工具。一方面体现出政府的阳光与透明,另一方面充分发动社会资源,形成全社会开展大数据应用的良好生态环境。1.2 大数据的定义定义: 信息资产/ 3+1V /新处理方式3+1VVolume 数据海量Velocity 增长迅速Variety 格式多样Value 价值(稀疏)(IDC)/ Veracity 真实性(IBM) / variability 变化(MS)与结构化数据的数据仓库等处理方式的不同:l 数据处理的实时性:在线(实时)、离线(非实时)、准在线(近实时)l 索引的设计l 先验知识的缺乏:分析的时候难有合适的模型连续数据保护技术-CDP1.3 四大基础数据库l 宏观经济数据库l 人口数据库l 法人数据库l 地理空间数据库2 NOSQLHIVE 类SQL的方式代替map、reduce函数来进行批量数据处理

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论