从云计算到新企业数据中心技术

1、匕冃从云计算至噺企业数据中心（节选）主管督导者：Willy Chiu, IBM软件部“高性能随需解决方案” （ HiPODS副总裁负责人：Jayashree Subrahm onia.团队主管：Dennis Quan,HiPODS咼级技术人员，技术联系人：Catheri ne C. Diep, Linda Legreg ni, Yuan hui Liu,Rahul Jai n,Web地址:日期：2008年5月28日状态：版Copyrigh摘要C本文介绍了 200PODS团队如何从IBM的全球客户云计算中心总 结工作负载模式、最佳实践以及可复用的资产，以便为全新的企业数据 中心构建解决方案框架。

2、我们描述了一种高级基础架构框架及其底层技 术。我们还介绍了全新的企业数据中心价值陈述的示例，这些数据中心 基于目前已构建的云基础架构。摘要云计算是一种新兴的模型，利用该模型，用户可以在任何地方通过连接的设备访问其应用 程序。由于简化了用户界面，基础架构对应用程序的支持对于用户而言是透明的。应用程 序位于可大规模伸缩的数据中心，计算资源可在其中动态部署并进行共享，以便能够实现 显着的规模经济。由于具有功能强大的服务管理平台，因此在将更多的 IT 资源添加到云 时，管理成本基本不会增加。随着智能移动设备、高速无线连接以及基于浏览器的功能丰 富的 Web 接口的不断增加，使得基于网络的云计算模型不仅

3、切实可行，而且还有助于降 低 IT 资源的复杂性。IT 行业的组织公布了形状和规模各异的云计算成果，因而分析人员尝试通过确定各种特 征（诸如基础架构外包、将软件作为服务以及下一代分布式计算）来描述这些成果。许多 CIO 都向 IBM 请教：该如何采用云计算的技术和管理方法来提高其数据中心的效率和灵 活性。 IBM 自上世纪 60 年代开始就一直引领虚拟化领域的潮流，最近又推出了“ 新企业 数据中心 ”的设想。该设想结合了以Web 为中心的云计算模型和当前的企业数据中心的优势。它可以采用以请求驱动的方式，为大规模可伸缩且异构的虚拟化基础架构上的工作 负载动态分配计算资源。出于安全性、数据完整性和

4、事件处理方面的考虑， IBM 还会对该 设想进行优化。 IBM 在企业数据中心和云计算方面都具有丰富的经验，因此是唯一能够为 客户提供实现该设想的最佳解决方案的企业。IBM的“高性能随需应变解决方案” （ HiPODS团队一直以来都与全球领先的客户（如Google 和中国无锡市政府）合作，定义运行具有各种工作负载（从 Web 应用程序到任 务关键型事务处理系统）的数据中心的最佳实践。具体而言， IBM 与客户合作，定义并增 强用于运行大规模数据中心的框架，以支持用于托管范围广泛的应用程序的关键功能。现 在，该框架包括对部署应用程序和系统的复杂且耗时的流程的自动化、数据中心级别的虚 拟化以及对高

5、度数据密集型工作负载的支持。客户希望该框架包含面向服务的架构上的可 靠且安全的事件处理。新企业数据中心背后的原理同时适用于处理外包和内部开发的数据 和应用程序组件。该框架受到 Web 客户的启发，这些客户通常拥有数十乃至数十万的服 务器，每天处理的访问数以十亿计。 IBM 汲取这些客户早先的经验教训，以便为更广泛的 客户实现规模经济并提供大规模可伸缩计算支持。我们在建立云数据中心方面所获得的实践经验为迈向新企业数据中心奠定了坚实的基础。 本文介绍了新企业数据中心的高级别基础架构服务框架以及底层技术支柱（如虚拟化、自 动化、自助式门户网站、监控和容量规划）。文中还讨论了目前已构建的数据中心的价值

6、 陈述示例。这些数据中心可以托管各种工作负载， 包括 Java? 2 Enterprise Edition （ J2EE） 应用程序、软件开发测试环境、数据密集型商业智能分析应用程序，等等。简介本部分回顾云计算的历史，并介绍 IBM 对于新企业数据中心的设想。 下一部分从第 5 页开始，将介绍新企业数据中心的基础架构框架，并讨论虚拟化环境和基础架构管理。 最后一部分从第13页开始，将介绍现有的云基础架构及其应用云计算的演进当前，云计算是业界的一个重要话题。但它并不是革命性的新发展，而是历经数十载不断 演进的结果，请参阅图1 0图1.云计算的演进上世纪80年代末，开始出现应用大量系统来解决单一问

7、题（通常是科学问题）的情况， 这就是网格计算的概念，而这种概念又导致向云计算的发展。很多人都问我们，网格计算和云计算到底有什么区别。它们之间的主要区别在于向工作负 载提供所需资源的方式。网格计算的关注重点是将工作负载移到所需的计算资源所在位置的能力，大多数情况下这种位置都是远程的，而且持续可用。通常，网格是服务器集群，大型任务可拆分 为多个小型任务，以便在这些服务器上并行运行。从这个角度来看，我们实际上可将 网格视为仅仅是一台虚拟服务器。网格还要求应用程序符合网格软件的接口标准。 而在云环境中，计算资源（如服务器）可以根据其底层的硬件基础架构进行动态设置 或调整，然后提供给工作负载使用。 另外

8、，云不仅支持网格，还可以支持非网格环境， 如运行传统的或Web应用程序的三层Web架构。到了上世纪90年代，虚拟化的概念已从虚拟服务器扩展到更高层次的抽象，首先是虚拟平台，而后又是虚拟应用程序。公用计算将集群作为虚拟平台，采用可计量的业务模型进 行计算。最近，“将软件作为服务”（SaaS将虚拟化提升到了应用程序的层次，它所使 用的业务模型不是按消耗的资源收费，而是根据向订户提供的应用程序的价值收费。云计算的概念源于网格、公用计算和SaaS概念。这是一种新兴的模型，利用该模型，用户可以在任何地方通过连接的设备访问其应用程序。应用程序位于可大规模伸缩的数据中 心，计算资源可在其中动态部署并进行共享

9、，以便能够实现显着的经济规模。随着智能移 动设备、高速无线连接以及基于浏览器的功能丰富的Web接口的不断增加，使得基于网络的云计算模型不仅切实可行，而且还有助于降低IT资源的复杂性。云的优势在于其基础架构管理，虚拟化技术的日益成熟和不断进步为这种管理提供了强大的支持，使云能够通过自动部署、重新构建映像、重新均衡工作负载、监控并系统地处理 变更请求，以便管理并更好地利用底层资源。新企业数据中心随着IT行业中越来越多的组织公布了云计算的规划，许多CIO都向IBM请教：该如何采用云计算技术和管理方法来提高其数据中心的效率和灵活性。IBM自上世纪60年代开始就一直引领虚拟化领域的潮流，最近又推出了“新

10、企业数据中心”的设想，该设想结合了以Web为中心的云计算模型和当前的企业数据中心的优势，如图2所示。新企业数据中心将是虚拟化、高效管理的中心，它将使用以Web为中心的云所采用的某些工具和技术，并进行一般化以便可由范围更广的客户采用，另外还进行增强以支持安全 的事务性工作负载。通过高效且共享的基础架构，企业能够对新的业务需求迅速做出反应，实时解析大量信息，而且还能根据实时数据做出明智的业务决策。新企业数据中心是一种 演进的新模型，能提供有助于使IT和业务目标保持一致的高效且动态的新方法。本文接下来的章节将介绍全新的企业级数据中心的高级别基础架构服务框架及其底层技 术支柱（如虚拟化、自动化、自助式

11、门户网站、监控和容量规划）。本文的最后部分将讨 论实际数据中心实施的示例，这些示例揭示了以下方面的深层次信息：新企业数据中心的 哪些特征可以为任何规模、使用情况各异的客户实现最大的价值。图2.云计算和新企业数据中心架构框架和技术支柱如图3所示，从高级别的架构角度来看，新企业数据中心的基础架构服务在逻辑上可分为 不同的层次。物理硬件层已虚拟化，以便能提供灵活且适应性强的平台，从而提高资源利用 率。接下来的两层是虚拟化环境层和管理层，它们是新企业数据中心基础架构服务的关键。通过将这两层结合起来，可以确保数据中心内的资源得到有效的管理，并可以快速部署和配 置。另外，如本文“业务用例”一节所述，新企业

12、数据中心旨在处理混合模式的工作负载。图3.新企业数据中心的基础架构服务框架虚拟化的环境什么是虚拟化？虚拟化表示能够以较高级别的敏捷性和灵活性提供计算资源，而无需用户掌握底层物理资 源的详细知识。在虚拟化的环境中，计算环境可以根据需求的变化动态创建、扩展、缩减 或移动。在云环境中，虚拟化在共享、可管理性以及隔离方面提供了许多重要的优点-使多个用户和应用程序能够共享物理资源而不会彼此影响。虚拟化能够将一组未充分利用的 物理服务器整合为数量相对较少但利用率更充分的物理服务器，从而有助于显着地节省成 本，并在新企业数据中心的云环境中实现诸多优势。IT基础架构的虚拟化具有许多不同方面。由于环境的差异，虚

13、拟化对不同的人而言可能 表示不同的含义。一般把服务器虚拟化理解为将单一物理资源映射到多个逻辑表示或分 区。逻辑分区（LPAR和虚拟机（VM就是该定义的示例。IBM从上世纪60年代开始就 在该领域处于领先位置。虚拟化技术并不仅限于服务器。它还适用于存储、网络和应用程序，这些主题可在各自的 文章中讨论。服务器虚拟化的工作原理在大多数情况下，服务器虚拟化是通过使用管理程序（hypervisor ）逻辑地分配和分隔物理资源来实现的。管理程序允许外来操作系统在虚拟机上运行，就好像该系统是在实际的 硬件上运行的那样，从而隐藏了其他外来系统共享虚拟机的事实。每个外来操作系统都受 到单独保护，相互之间是隔离的

14、，不会由于任何其他系统的不稳定或配置问题而受到影响。当前，管理程序逐渐成为客户机和服务器系统上普遍存在的虚拟层。管理程序主要有两种 类型：裸机式管理程序和托管的管理程序。裸机式管理程序 裸机式管理程序直接在服务器硬件上运行，为虚拟机提供对资源的细粒度时间共享。基于 固件的裸机式管理程序的示例包括 IBM? System z? Processor Resource System Manager?(PR/SM?和 IBM? System i? and IBM? System p? POWER? Hypervisor。基于软件的裸机式管理程序的示例包括 z/VM?, VMware ESX Serve

15、r and Xen Hypervisor 。基于固件的 管理程序的开销通常少于基于软件的管理程序。另外，在服务器硬件层实施的虚拟化可以 实现最高的效率和性能。System z PR/SM 是一种硬件分区能力，支持以一个高度可扩展、健壮且可靠的虚拟服务 器托管多个操作系统映像， 而每个映像都位于自己的 LPAR 中。虚拟化功能内置于 System z。 System z 还提供基于软件的 z/VM? 。因为 z/VM 虚拟化技术支持以较高的效率和资源 利用率实现较细粒度的系统资源共享，所以使客户能够在运行其他System z 操作系统的单台大型机上运行成百上千的 Linux 服务器。System

16、 p 使用户能够通过 IBM? AIX? 或 Linux 操作系统请求虚拟化的 LPAR。 System p 具有微分区能力，支持系统将部分CPU分配给LPAR。部分CPU的粒度最细可达一个物理 CPU 的 1/10 。利用微分区和虚拟 I/O 能力， System p 所支持的 LPAR 数量显着增加。 而且， LPAR 的 CPU 资源可通过 IBM? Enterprise Workload Manager? 进行管理，它对 CPU 需求和使用情况进行监控，并根据业务策略来决定分配给每个LPAR 的 CPU 资源量。微分区和虚拟 I/O 使云用户能够使用功能强大的虚拟化基础架构。通过使用诸

17、如 VMWare 和 Xen 等技术，虚拟化现已扩展到 x86 平台。利用这些技术，具 有不同操作系统的多个虚拟服务器可以在一台基于 x86 的服务器上共存，并共享该服务 器的资源。这样，就使整合在异构操作系统环境中运行以及在未充分利用的硬件服务器上 运行的应用程序成为可能。使用 VMWare 和 Xen 的另一个优点是可以实现快速部署。因 为虚拟服务器的操作系统映像、 配置文件和日志文件都作为文件集存储在主机或管理控制 台服务器上，所以虚拟机的操作系统映像可以在一台物理服务器上运行，然后透明地转移 或复制到另一台服务器。要部署新的服务器或克隆现有的服务器，只需在现有的物理系统 上创建虚拟服务

18、器，然后复制先前保存的虚拟服务器映像即可完成。换言之，无需重新安 装操作系统或在其上运行的应用程序就可部署服务器。托管式管理程序托管式管理程序在主机操作系统上运行，使用操作系统服务为虚拟机提供对资源的时间共 享。基于软件的托管式管理程序的示例包括VMware Server 和 Microsoft VirtualServer 。基础架构管理虚拟化是新企业数据中心的基础架构服务的基础技术支柱。其管理层也同样重要，它充当 “大脑”或“ 控制中心”，用于有效地管理整个环境中的资源。接下来的章节将讨论这 层的主要组件。自动化基础架构管理是虚拟环境中的主要难题之一。如果只是构建虚拟化环境而未采用适当的方

19、法，那么会增加复杂性，从而使通过虚拟化节省的成本付诸东流。自动化是解决这些问题 的关键。必须为新企业数据中心配备工具，以便能促进、简化和支持对提供虚拟服务器资 源的物理环境进行管理，这非常关键。自动化部署 自动化是一种重要的方法，适用于动态数据中心内最频繁执行的两项任务：应用程序的装 载和卸载。装载过程将操作系统及其他软件安装到服务器的适当位置并对它们进行配置， 以使其能发挥效用。卸载过程指自动回收服务器以作他用所需执行的步骤。装载应用程序通常从部署服务器开始。手工装载是一个费时费力的过程，由多个复杂的步 骤组成，如安装操作系统和软件以及配置网络和存储器。这些任务容易出错，通常需要由 在系统、

20、存储和网络方面具有较高专业技能的管理员执行。此外，应用程序通常具有特殊 的安装和配置步骤。所有这些因素都使得自动化成为以一致的方式管理这些任务的关键。IBM? Tivoli? Provisio ning Ma nager是我们的云计算解决方案的关键组件。它使云管理员能够编写可以自动安装和配置新服务器和现有服务器的工作流程。它支持快速高效地构 造和管理IT资源。自动化的保留和调度 管理计算资源的关键是能够了解当前和未来需要多少容量才能满足新的请求。如果没有了 解这一点，你就不能准确地预测可以支持的客户数量，也无法确保维护一组稳定的应用程 序。另外，使用IBM? Websphere Applica

21、tion Server通知部署状态和资源可用性的TivoliProvisio ning Ma nager提供了调度资源的部署和回收以及保留资源以供今后使用的能力。自助式门户网站自助式门户网站提供系统化的请求处理和变更管理能力。服务提供者理解必须允许客户或客户代表通过Web门户网站请求服务或查看当前所已部署服务的状态。新企业数据中心必须能够灵活地处理并快速执行变更请求，以满足快速变 化的业务需求。应该使用由请求驱动的部署系统来处理用户对新服务的请求或变更现有服务的要求，例 如，允许用户延后服务结束日期，以及添加或除去资源需求。图4显示了向服务（项目）添加资源的样本截屏，图 5显示了修改项目结束日

22、期的样本截屏。图4.向项目添加资源的样本抓屏图5.修改项目结束日期的样本抓屏监控对于任何环境而言，监控资源和应用程序性能都是非常重要的环节。在虚拟化的环境中， 监控任务更为困难，也更为关键。监控的优点包括： 收集历史数据，以帮助规划未来数据中心的资源需求并优化虚拟化资源的部署 捕获实时数据，以便能快速应对意外的资源需求 衡量性能服务级别协议（SLA的符合性 主动生成警告和详细数据，以便能快速检测和解决应用程序问题 报告应用程序的资源使用情况数据，这对于相应地分配成本非常必要 IBM Tivoli Monitoring可监控由 Tivoli Provisioning Manager状况（CPU磁

23、盘和内存）。这需要在每台云服务器上安装 程序并配置 IBM Tivoli Monitoring 将这些数据传输至监控数据仓库，即部署的服务器的运行IBM Tivoli Mo nitori ng代理服务器。代理程序收集来自云资源的信息，并定期IBM? DB/2?数据库。该监控服务器包含3个组件：、IBM? Tivoli? Enterprise Portal和数据仓库。图6.项目摘要Tivoli Mon itori ng不仅可以监控个别的服务器，还可以监控服务器集合。用户可通过Tivoli En terprise门户网站查看每个受监控资源的详细信息，并且可以将这些信息与云门户网站完全集成起来。另外

24、，用户可以直接在云自助式门户网站上查看表示服务器运行 情况的摘要信息。图 6显示了 CPU内存和磁盘的摘要信息，这些信息在某个项目（可 能包含多个服务器或资源）级别进行了整合。IBM? Tivoli? En terprise Mon itori ng容量规划云计算模型减少了应用程序级别容量规划的需求。应用程序可以向云请求资源，并且能够 在一小时之内获得所请求的资源。对于需要多项资源的应用程序，可以提交其他请求以获 取更多资源。因此，与传统的数据中心相比，准确地预测应用程序的容量需求对于云而言 已不那么重要，传统的数据中心最多可花费6个月来订购和安装专用于应用程序的硬件。另一方面，从数据中心的角度而言，虚拟化使得容量规划更加困难而且更加重要。过去， 数据中心可以通过应用程序进行预测，了解订购的硬件，基本可以避免对硬件自身进行