




版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、未来,已发生改变大数据的关键技术1实用精品课件PPT1大数据关键技术1、数据采集2、数据存储与管理3、数据处理与分析4、数据隐私与安全2实用精品课件PPT1.5大数据关键技术分布式存储分布式处理大数据3实用精品课件PPT1.5大数据关键技术单机无法存储集群分布式存储海量数据的存储4实用精品课件PPT1.5大数据关键技术5实用精品课件PPT1分布式数据库Bigtable分布式文件系统GFS分布式并行处理技术Mapreduce 1.5大数据关键技术6实用精品课件PPT正如“不同的锁需要不同的钥匙”企业中不同的应用场景数据不同的计算模式,需要使用不同的大数据技术7实用精品课件PPT1大数据关键技术批
2、处理流数据需要实时处理图计算需要实时处理实时计算交互式查询分析交互式计算不同的计算模式需要使用不同的产品MapReduce批处理计算模式的典型代表8实用精品课件PPT批处理计算MapReduce是批处理计算模式的典型代表可做迭代计算的Spark,实时性更好9实用精品课件PPT10流计算代表技术:Storm、S4、Flume、Streams流数据(网购数据、游戏内玩家活动、社交网站信息、金融交易大厅或地理空间服务,以及来自数据中心内所连接设备或仪器的遥测数据)需要实时处理,给出实时响应,否则分析结果会失去商业价值。10实用精品课件PPT图计算代表技术:Pregel、GraphX、社交网络数据转换
3、成图结构11实用精品课件PPT查询分析计算代表技术:Dremel、Hive、Cassandra、Impala等12实用精品课件PPT大数据计算模式大数据计算模式大数据计算模式解决问题解决问题代表产品代表产品批处理计算针对大规模数据的批量处理MapReduce、Spark等流计算针对流数据的实时计算Storm、S4、Flume、Streams、Puma、DStream、Super Mario、银河流数据处理平台等图计算针对大规模图结构数据的处理Pregel、GraphX、Giraph、PowerGraph、Hama、GoldenOrb等查询分析计算大规模数据的存储管理和查询分析Dremel、Hi
4、ve、Cassandra、Impala等表1-3 大数据计算模式及其代表产品13实用精品课件PPT分布式存储分布式处理大数据14实用精品课件PPT1. 云计算概念云计算实现了通过网络提供可伸缩的、廉价的分布式计算能力,用户只需要在具备网络接入条件的地方,就可以随时随地获得所需的各种IT资源。15实用精品课件PPT云计算的优势企业不需要自建IT基础设施,可以租用云端资源16实用精品课件PPT云计算的优势企业不需要自建IT基础设施,可以租用云端资源17实用精品课件PPT图1-7 云计算的服务模式和类型 云计算的服务模式和类型18实用精品课件PPT公有云19实用精品课件PPT私有云20实用精品课件P
5、PT混合云21实用精品课件PPTInfrastructure as a ServicePlatform as a ServiceSoftware as a ServiceSaaSPaaSIaaSGoogle Apps, Microsoft “Software+Services”面向用户(云软件)Sina APP Engine, Google App Engine面向应用开发者(搭建开发平台作为服务出租)Amazon EC2, IBM Blue Cloud, Sun Grid面向网络架构师(基础设施作为服务出租)ServerStorageServerStorageVisualizationInfrastructurePlatformApplication从一个集中的系统部署软件,使之在一台本地计算机上(或从云中远程地)运行的一个模型。由于是计量服务,SaaS 允许出租一个应用程序,并计时收费 IaaS将基础设施(计算资源和存储)作为服务出租PaaS类似于 IaaS,但是它包括操作系统和围绕特定应用的必需的服务SaaS22实用精品课件PPT 云计算关键技术包括:虚拟化、分布式存储、分布式计算、多租户等云计算关键技术23实用精品课件PPT云计算数据中心的建设24实用精品课件PPT阿里全球云计算数据中心部署25
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 关于证书借出管理制度
- 兼职医师考勤管理制度
- 工厂设备共用管理制度
- 公司日常监督管理制度
- 医院病房利器管理制度
- 卫校卫生工具管理制度
- 小学健康卫生管理制度
- 剑桥公司食堂管理制度
- 军校学院学员管理制度
- 学校网校安全管理制度
- 成人手术后疼痛评估与护理团体标准
- 端午养生与中医智慧
- 【MOOC】财务管理-上海对外经贸大学 中国大学慕课MOOC答案
- 《传染病防治法》课件
- 国家开放大学《实 用管理基础》形考任务1-4参考答案
- 高空作业规程及标准
- 急性创伤的现场急救和评估
- 呼吸系统测试题(含参考答案)
- 欧洲文明概论学习通超星期末考试答案章节答案2024年
- 民兵知识小常识
- DBJ04∕T 290-2012 袖阀管注浆加固地基技术规程
评论
0/150
提交评论