8.1.1大数据在云端-云端大数据

《大数据导论》大数据在云端【导读案例】亚马逊，数据在云端亚马逊Web服务（AWS）【任务描述】（1）了解大数据基础设施的基本概念；（2）了解虚拟化的重要思想，了解计算虚拟化、存储虚拟化和网络虚拟化的具体内容；（3）了解云计算的基本思想和主要内容，了解云计算与大数据的关系。【知识准备】

基础设施是指在IT环境中，为具体应用提供计算、存储、互联、管理等基础功能的软硬件系统。

在信息技术发展的早期，IT基础设施往往由一系列昂贵的，经过特殊设计的软硬件设备组成，存储容量非常有限，系统之间也没有高效的数据交换通道，应用软件直接运行在硬件平台上。

云端大数据云端大数据基于大规模数据的系列应用正在悄然推动着IT基础设施的发展，尤其是大数据对海量、高速存储的需求。为了对大规模数据进行有效的计算，必须最大限度地利用计算和网络资源。计算虚拟化和网络虚拟化要对分布式、异构的计算、存储、网络资源进行有效的管理。云端大数据1.云计算：所谓“云计算”（CloudComputing），是一种基于互联网的计算方式，通过这种方式共享的软硬件资源和信息可以按需求提供给计算机和其他设备。云计算云计算是分布式计算（DistributedComputing）、并行计算（ParallelComputing）、效用计算（UtilityComputing）、网络存储（NetworkStorageTechnologies）、虚拟化（Virtualization）、负载均衡（LoadBalance）等传统计算机和网络技术发展融合的产物。云端大数据云端大数据2.云计算的服务形式

云计算按照服务的组织、交付方式的不同，有公有云、私有云、混合云之分。

（1）公有云向所有人提供服务，典型的公有云提供商是亚马逊。（2）私有云只针对特定客户群提供服务，比如一个企业内部IT可以在自己的数据中心搭建私有云，并向企业内部提供服务。（3）目前，有部分企业整合了内部私有云和公有云，统一交付云服务，这就是混合云。云计算的服务方式云端大数据云计算包括以下几个层次的服务：基础设施服务（IaaS），平台即服务（PaaS）和软件即服务（SaaS）。分层体系架构意义上的“层次”IaaS、PaaS和SaaS分别在基础设施层、软件开放运行平台层和应用软件层实现。云计算提供的服务层次云端大数据3.云计算与大数据云计算与大数据云端大数据4.云基础设施大数据解决方案的构架离不开云计算的支撑。支撑大数据及云计算的底层原则是一样的，即规模化、自动化、资源配置、自愈性。大数据是构建在云计算基础架构之上的应用形式，因此它很难独立于云计算架构而存在。

虚拟化（Virtualization）是云计算所有要素中最基本，也是最核心的组成部分。虚拟化技术的发展其实已经走过了半个多世纪（1956）。在虚拟化技术的发展初期，IBM是主力军，它把虚拟化技术用在了大型机领域。云端大数据1964年，IBM设计了名为CP-40的新型操作系统，实现了虚拟内存和虚拟机。1965年，IBM推出了System/360Model67和TSS分时共享系统（TimeSharingSystem），允许很多远程用户共享同一高性能计算设备的使用时