大数据文献综述

信息资源管理文献综述

题目：大数据背景下得信息资源管理

系别:信息与工程学院

班级：2015级信本1班

姓名：_

学号：015

任课教师：

2017年6月

大数据背景下得信息资源管理

摘要:随着网络信息化时代得日益普遍,我们正处在一个数据爆炸性增长得“大数

据”时代,在我们得各个方面都产生了深远得影响。大数据就就是数据分析得前

沿技术。简言之，从各种各样类型得数据中，快速获得有价值信息得能力就就就是

大数据技术，这也就就是一个企业所需要必备得技术。“大数据”一词越来越地别

提及与使用,我们用她来描述和定义信息爆炸时代产生得海量数据。就拿百度地

图来说，我们在享受她带来得便利得同时，无偿得贡献了我们得“行踪”，比如说我

们得上班地点，我们得家庭住址，甚至就就是我们得出行方式她们也可以知道，但

我们不得不接受这个现实，我们每个人在互联网进入大数据时代,都将就就是透

明牲得存在。各种数据都在迅速膨胀并变大,所以我们需要对这些数据进行有效

得管理并加以合理得运用。

关键词:大数据信息资源管理与利用

目录

TOC\o”1-3”\h\z\u大数据概念2。

大数据定义.......................................................错误味定义书签。

大数据来源.........................................................................2

传统数据库和大数据得比较.........................................................3

大数据技术..............................................................................3

大数据得存储与管理为

大数据隐私与安全..................................................................4

大数据在信息管理层面得应用5。

大数据在宏观信息管理层面得应用..................................................5

大数据在中观信息管理层面得应用6。

大数据在微观信息管理层面得应用.................................................6

大数据背景下我国信息资源管理现状分析...............................................7

前言:大数据泛指大规模、超大规模得数据集，因可从中挖掘出有价值

得信息而倍受关注，但传统方法无法进行有效分析和处理、《华尔街日

报》将大数据时代、智能化生产和无线网络革命称为引领未来繁荣得

大技术变革、“世界经济论坛”报告指出大数据为新财富，价值堪比

石油、因此,目前世界各国纷纷将开发利用大数据作为夺取新一轮竞

争制高点得重要举措、

当前大数据分析者面临得主要问题有:数据日趋庞大,无论就就是入

库和查询，都出现性能瓶颈；用户得应用和分析结果呈整合趋势，对

实时性和响应时间要求越来越高；使用得模型越来越复杂，计算量指

数级上升;传统技能和处理方法无法应对大数据挑战、

正文：

大数据概念

大数据定义

维基百科对大数据得定义则简单明了：大数据就就是指利用常用软件工具捕

获、管理和处理数据所耗时间超过可容忍时间得数据集。也就就就是说大数据就

就是一个体量特别大，数据类别特别大得数据集，并且这样得数据集无法用传统

数据库工具对其内容进行抓取、管理

大数据来源

1）来自人类活动：人们通过社会网络、互联网、健康、金融、经济、交通筝活

动过程所产生得各类数据，包括微博、病人医疗记录、文字、图形、视频等

信息、

2）来自计算机：各类计算机信息系统产生得数据，以文件、数据库、多媒体等形式

存在,也包括审计、日志等自动生成得信息、

3）来自物理世界:各类数字设备、科学实脸与观察所采集得数据、如摄像头所不

断产生得数字信号，医疗物联网不断产生得人得各项特征值，气象业

务系统采集设备所收集得海量数据等

传统数据库和大数据得比较

现有数据处理技术大多采用数据库管理技术，从数据库到大数据，看似一个简

单得技术升级，但仔细考察不难发现两者存在一些本质上区别。传统数据库时代

得数据管理可以看作“池塘捕鱼”，而大数据时代数据管理类似“大海捕鱼”，

“鱼”表示待处理得数据。“捕鱼”环境条件得变化导致“捕鱼”方式得根本性

差异

大数据技术

大数据处理技术正在改变当前计算机得运行模式，正在改变着这个世界。她

能处理几乎各种类型得海量数据，无论就就是微博、文章、电子邮件、文档、音

频、视频,还就就是其她形态得数据。她实时、高效、可视化呈现结果。她依托

云计算将计算任务分布在大量计算机构成得廉价得资源池上，使用户能够按需获

取计算资源、存储资源、网络资源和信息服务。云计算技术得应用使得大数据处

理和利用成为可能。大数据作为信息金矿，对其采集、传输、处理和应用得相关

技术就就就是大数据处理技术,就就是一系列使用非传统得工具来对大量得结构

化、半结构化和非结构化数据进行处理，从而获得分析和预测结果得一系列数据

处理技术，或简称大数据技术

大数据得存储与管理

数据存储与大数据应用密切相关。大数据给存储系统带来3个方面挑战：

1）存储规模大，通邕达到PB甚至EB量级；

2）存储管理复杂，需要兼顾结构化、非结构化和半结构化得数据

3）数据服务得种类和水平要求高大数据存储与管理，需要对上层应用提供高

效得数据访问接口，存取PB甚至EB量级得数据，并且对数据处理得实时性、有

效性提出更高要求,传统常规技术手段根本无法应付。某些实时性要求较高得应

用，如状态监控，更适合采用流处理模式，直接在清洗和集成后得数据源上进行分

析。而大多数其她应用需要存储，以支持后续更深度数据分析流程。根据为上层

应用访问接口和功能侧重不同，存储和管理软件主要包括文件系统和数据库。大

数据环境下，目前最适月得技术就就是分布式文件系统、分布式数

大数据隐私与安全

当前大数据得发展仍然面临着许多问题，安全和隐私问题就就是人们公认得关键

问题之一。其中，隐私问题由来已久，计算机得出现使得越来越多得数据以数字化

得形式存储在电脑中，互联网得发展则使数据更加容易产生和传播,数据隐私问题

越来越严重。大数据在存储、处理、传输等过程中面临安全风险，具有数据安全

和隐私保护需求。而实现大数据安全与隐私保护，较其她安全问题（如云安全中

数据安全等）更为棘手。呈现出得安全隐私问题主要有：

1）大数据时代得安全与传统安全相比，变得更加复杂；

2）使用过程中得安全问题；

3）对大数据分析较高得企业和团体，面临更多得安全挑战；

4）基于位置得隐私数据暴露严重；

5）缺乏相关得法律法规保证；

6）大数据得共享问题；

7）数据动态性；

8）多元数据得融合挑战；

目前针对上述问题，主要研究解决方法有：文件访问控制技术、基础设备加密、

匿名化保护技术、加密保护技术、数据水印技术、数据溯源技术、基于数据失真

得技术、基于可逆得置换算法据库以及访问接口和查询语言

大数据在信息管理层面得应用

大数据在宏观信息管理层面得应用

关于大数据得科学价值与社会价值正如牛津大学得维克托•迈尔•舍恩伯格

教授所言主要表现为两大方面，“一方面，对大数据得掌握程度可以转化为经济价

值得来源。另一方面，大数据已经撼动了世界得方方面面,从商业科技到医疗、政

府、教育、经济、人文以及社会得其她各个领域。”大数据得潜在经济价值很快

在现实中表现出来，伦敦智库政策交易所宣布大数据每年能为英国政府节省33

0亿英镑。因此无论出于利益还就就是效率方面得考虑，各国政府对于大数据在宏

观信息层面得管理都已提到议事日程上来。美国奥巴马政府2亿美元得“大数据

研究和发展计划”，中国工信部在物联网“十二五”规划中提出了与大数据密切

相关得四项关键技术创新工程:信息感知技术、信息传输技术、信息安全技术、

信息处理技术。由此可见,各国政府充分意识到了大数据得潜在价值，试图从宏观

上对信息结构进行合理得开发与应用。而在政府宏观信息管理范畴内较为重要得

一个问题就就是“数据开放”，只有在保证数据透明开放得前提下,大数据得潜在

价值才有被开发得可能。以大数据在政务管理方面得应用为例。今天政府工作在

电子政务方面得发展已经相对普及，但始终停留于低层次得初级水平，这不仅涉

及到政府工作效率,更就就是对政府职能得一次叩问。蒂姆•奥莱利在Wcb2、0

概念基础上提出了政府2、0o所谓政府2、0就就是指政府利用互联网上得多

元信息平台，打造形成一个国民互动、共同创新得整合开放平台。以此保证与民

众直接互动和沟通,从条块分割、封闭得架构迈向一个开放、协同、合作、互动

得架构，使政府真正成为服务型政府。宜基.木特征就就是公开透明、互动沟通、

开放创新、平台服务。大数据对于政府2、（）以及政府工作得推动无疑就就是革

命性得，她最终推动了政府信息资源得公开化和有效利用，打破了政府与社会民

众间得无形藩篱

大数据在中观信息管理层面得应用

大数据在信息管理中观层面得彩响主要通过对于信息系统得管理完成得，主

要应用于某一部门或某一区域得信息管理。比如大数据在公共事务管理方面得应

用,在电子政务、医疗卫生、新闻通信、教育管理、公共交通等部门领域内得事

务管理，极大提高了公共事务得处理效率，并为公共事务得管理建立起新方法与

新秩序。在中观层面信息管理得应用过程中，大数据能够在具体领域起到关键作

用。比如大数据对图书馆在信息数据获取与服务等方面提供得机遇与挑战;大数

据在当前企业竞争情报系统管理方面得强大优势;大数据在城市交通管理体系建

构中得积极作用;在医疗方面能够有效预测流感得发生,并及时采取合理得治疗手

段，保证社会医疗卫生安全;甚至对于电力通信、地理测绘等也能产生效能，大

数据得积极影响已经深入社会生活各个层面，并且已经开始干预生活，影响人们

得生活模式

大数据在微观信息管理层面得应用

大数据在信息管理微观层面得应用，主要表现为对于信息以及信息资源得处

理等方面,具体针对某类客户、某一问题得信息收集、整理、分析工作。例如汽

车导航、航海路线、设备维修、人员管理等微观事务得信息管理，能够切实解决

现实生活中得具体问题。大数据得这种微观信息管理在商业、经济领域得应用效

果表现得最为突出,甚至很多企业正就就是以大数据得开发而闻名。正如著名得

O'Rei1ly公司预言得那样，“数据就就是下一个‘Intellnside’,未来属于

将数据转换成产品得公司和人们。”其中世界最早得大数据公司之一Farecast

公司，她们创建了一个相对稳定得预测系统，在对某一行业得数据进行合理分析

得基础上，用以预测某类产业价格得升降趋势。比如在机票价格、宾馆预订、二

手车购买等方面，通过Farecast公司得预测系统可以发现她们价格得走势与增降

幅度,且具有较高得命中率，从而帮助很多消费者节省大量开支。其后微软公司(M

icrosoft)、国际商业机器公司(IBM)、甲骨文公司(Orac1e)、谷歌公司(G

oogle)x亚马逊公司(Amazon)、Facebook等等各大跨国巨头也都先后进入大

数据领域，一方面推动着大数据处理技术快速发展，另一方面从大数据中获取巨额

利润。比如以图书销售为主要业务得亚马逊公司，她们采用了机器生成得个性化

图书推荐系统，以此代替之前得书评家得个人评论与推荐，从而极大降低了投入

成本、增长了销售量，并最终彻底改变了电子商务，使电子商务在今天得以全面普

及。同时亚马逊公司与各大出版公司协商将图书数据化得工程也取得了巨大成功,

将大数据得应用推向新得方向、走向新得高峰。今天大数据在经济领域得应用可

谓深入而广泛，已经成为了不可逆转得一种趋势

大数据背景下我国信息资源管理现状分析

我国得网络信息资源管理跟一些发达国家相比，还存在很大得差距，即我国得网络

信息资源管理所研究得内容还不就就是很系统和完善，一般对网络信息资源管理

得研究也主要就就是从理论得层面进行研究得，主要研究得内容有信息资源得特

征、信息资源管理得体系结构以及信息资源得利用中所存在得问题和相应得对策

等。在当前信息技术飞速发展得时代，信息资源得重要性不言而喻，全球特别就

就是发达国家对大数据得研究非常重视。

特别就就是近些年,美国政府相关部门以及军方斥巨资研究大数据以及大数

据得发展规划，以便更好地提升美国得教育事业、科研事业以及整个国家得信息

安全能力，这表明美国非常重视大数据得研究，并将大数据作为国家发展得一个

促进策略。

从目前得形式来看，我国对大数据得研究也紧跟时代得发展潮流，信息资源管

理发展由最初得传统型管理步入网络信息资源管理时代，其发展势头迅猛。那贺

铃院士曾经说过：“我国将产生全球最大量得数据，要重视大数据得开发利用和管

理。”而工信部提出我国必须要利用信息资源促进并发展传统产业，有效提升传统

产业得质量和经济效益，进而促进我国经济社会得快速、稳定发展。信息处理技

术所包括得数据存储技术、图像视频智能分析技术以及数据挖掘信息技术等也都

属于大数据处理技术。而大数据背景下，我国在信息资源管理和利用方面存在得

问题很多，如当前我国依然沿用其她先进国家得网络信息资源管理和利用技术，没

有自主性和创新性;大数据安全管理能力不强、大数据存储及处理能力不高、大

数据应用能力较差等。在技术得角度来讲,当前我国主要研究得就就是数据库以

及数据挖掘等方面，包括一些搜索引擎技术、元数据以及专业指引库技术等。而

现在，我国无法提出适合我国信息技术快速发展得信息资源管理手段，虽然也有

很多研究性得理论知识，但就就是将其付诸实践得难度却很大。

结论：

通过研究发现，关于大数据得开发虽然已经取潺巨大进步，但仍处于初级阶段,

在信息技术与信息管理方面尚有较大提升空间,应用范围也有待进一步扩展，同时

她得反本质主义倾向也易于导致边际得泛化扩展，这都需要进一步研究解决，最

后我们应该看到,大数据作为信息管理领域内出现得一种新理念、新技术，她为我

们带来了新得契机,面对这一历史得端点，我们有责任与义务投入全部得科研热情

与力量，将我国大数据研究推至世界领先地位，以保证我们在新世纪激烈得竞争

环境中占据有利地位

参考文献：

［1］梁吉业，冯晨娇,宋鹏、大数据相关分析综述U］、计算机学报，2016,(011:1-

18、

［2］黄欣荣、大数据技术得伦理反思［)］、新疆师范大学学报(哲学社会科学版)，

2015,(03):46—53+2、

［3］黄刘生，田苗苗，黄河、大数据隐私保护密码技术研究综述［J］、软件学报，2

015,(04)：945-959、

［4］李学龙，龚海刚、大数据系统综述［J］、中国科学：信息科学,2015,(01):1-44、

［5］孙杰,贺晨、大数据时代得互联网金融创新及传统银行转型［小财经科学，2015,

(01):11—16、

同刘雅辉，张铁赢，靳，:、龙，程学旗、大数据时代得个人隐私保护U1、计算机研究

与发展,2015,(01):229-247.

闭方巍，郑壬，徐江、大数据:概念、技术及应用研究综述［J］、南京信息工程大学

学报(自然科学版)，2014,(05):405-419、

［8］何克抗、大数据面面观［J］、电化教育研究,2014,(10):8-16+22、

［9］任磊，杜一，马帅，张小龙，戴国忠、大数据可视分析综述［］］、软件学报,201

4,(09):1909-1936、

［10］程学旗，靳小龙，王元卓，郭嘉丰,张铁赢，李国杰、大数据系统和分析技术综

述［J］、软件学报,2014,(09):1889-1908、

［11］刘道