大数据计算模式和关键技术.ppt_第1页
大数据计算模式和关键技术.ppt_第2页
大数据计算模式和关键技术.ppt_第3页
大数据计算模式和关键技术.ppt_第4页
大数据计算模式和关键技术.ppt_第5页
已阅读5页,还剩24页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

在未来,已经发生了变化.大数据关键技术,大数据关键技术,1,数据采集2,数据存储与管理3,数据处理与分析4,数据隐私与安全,1.5大数据关键技术,分布式存储,分布式处理,大数据,两大核心技术,1.5大数据关键技术,分布式存储:解决海量数据存储问题,单机不能存储,集群分布式存储,海量数据存储, 1.5大数据和大数据技术的关键技术都以谷歌技术为代表,1.5大数据关键技术,正如企业中不同的应用场景中“不同的锁需要不同的钥匙”,不同的计算模式需要使用不同的大数据技术,不同的计算模式需要使用不同的产品,大数据关键技术,批量处理,流数据需要实时处理。 图形计算需要实时处理、实时计算、交互式查询分析和交互式计算。不同的计算模式需要使用不同的产品。MapReduce是批处理计算模式的典型代表。批处理计算,MapReduce是批处理计算模式的典型代表。Spark可以进行迭代计算,具有更好的实时性。10.流量计算、代表性技术:需要实时处理风暴、S4、水槽、溪流、流数据(在线购物数据、游戏中的玩家活动、社交网站信息、金融交易大厅或地理空间服务,以及来自数据中心中连接设备或仪器的遥测数据)以给出实时响应,否则分析结果将失去商业价值。图计算代表技术:Pregel、GraphX、社交网络数据到图结构、查询分析和计算代表技术:Dremel、Hive、Cassandra、Impala等。大数据计算模型,表1-3大数据计算模型及其代表性产品,分布式存储,分布式处理,大数据,两个核心问题,1。云计算概念,云计算通过网络提供可扩展、低成本的分布式计算能力。用户只需在具备网络接入条件的地方,随时随地获取他们需要的各种信息技术资源。云计算的优势,企业不需要构建自己的IT基础设施,他们可以租用云资源,云计算的优势,企业不需要构建自己的IT基础设施,他们可以租用云资源,图1-7云计算的服务模式和类型,云计算的服务模式和类型,公共云,面向所有公共,私有云,面向企业内部,混合云,混合云,部分为自己,部分为外部,基础设施服务, 平台服务、软件服务、SaaS、PaaS、IaaS、谷歌应用、微软“软件服务”面向用户(云软件)、西纳帕工程、谷歌工程是为应用程序开发人员(为服务租赁构建开发平台)、亚马逊C2、IBMBUECloud、太阳网格是为网络架构师(服务租赁基础设施)、服务器、存储、服务器、存储、可视化、红外结构(一种将软件从中央系统部署到本地计算机上运行(或从云远程运行)的模型)。 由于这是一项计量服务,SaaS允许租赁应用程序并按时间收费。IaaS将基础设施(计算资源和存储)作为一项服务出租。PaaS类似于IaaS,但它包括一个操作系统和围绕特定应用程序的必要服务。SaaS。关键云计算技术包括虚拟化、分布式存储、分布式计算、多租户等。

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论