联通虚拟化平台升级.Ver.1.3.docx

版本 1.0浙江省联通服务器虚拟化平台升级实施服务版本1.22013年10月目录目录II概述1项目目标1实现升级目标的前提1实施内容与方案1实施前的准备1升级vSPHERE 5.13vCenter配置4虚拟机升级5虚拟机存储迁移5实施文档交付5巡检支持6项目实施风险控制6实施时间的选择6突发事件处理6项目时间进度计划7版本 1.0概述项目目标此项目以现有的IBM服务器及IBM存储为基础进行虚拟化运行环境的升级工作。将原有x86服务器中部署的vSphere 4.1升级为vSphere 5.1虚拟化平台环境并添加新存储设备以及改造旧存储设备。实现升级目标的前提现有vSphere 4.1产品的原厂售后保修服务未到期，即现有vSphere产品还可以享受VMware提供的产品版本升级服务。实施内容与方案为了最大限度减少硬件准备工作造成的资源浪费，结合用户实际情况，拟采用在原有硬件平台上进行在线升级方式进行本次产品升级实施。实施前的准备记录所有现有物理服务器的主机名、IP地址、网络配置要素、存储配置要素。准备所有本次实施要求用户方提供的软件工具与工作环境，主要包含下如：Microsoft Windows 2003 64位或 Windows 2008 64位安装介质及许可。Microsoft SQL Server 2008 安装介质及许可。VMware vSphere 在原厂升级服务期内的软件许可及对应的My VMware帐号。快速便捷访问Internet的网络条件存储空间为2TB的USB 3.0接口移动硬盘（用途为存放项目实施过程中各虚拟机的克隆镜像）现有vSphere 4.1管理平台截图如下所示：现有vSphere平台存储情况如下：除本地存储空间外，虚拟化平台还使用了NetApp3040与NetApp-Lun两个datastore存储空间，在进行物理主机迁移与ESXi升级操作前，需要完成虚拟机的备份。并在有NetApp存储工程师的情况下进行本次迁移升级实施工作。升级VSPHERE 5.1通过vMotion功能，将用户的应用迁移至少量硬件服务器中。根据项目实施需要，至少腾空1台物理服务器以便开始进行虚拟化平台的升级工作。通过vCenter控制台将该物理服务器在集群中进入“维护模式”并关机注销。将该物理机环境升级至vSphere 5.1，原有主机IP地址、主机名、存储配置等配置保持不变。通过vSphere Client管理台就ESXi 5.1环境生成vCenter所需的相关VM环境，包含：AD服务器VMvCenter服务器VM安装Microsoft AD服务器，并根据用户要求进行配置。若客户已有AD服务器，本条跳过，可使用已存在的AD服务器。在vCenter服务器VM中安装操作系统，并部署数据库，完成vCenter Server的部署准备工作。完成vCenter Server 5.1的安装部署工作。将这台ESXi主机注册至vCenter Server 5.1中。使这1台服务器成为vSphere 5.1的标准最小运行环境。按以下步骤升级其余ESXi：1. 首先将待迁移到ESXi退出vCenter Server 4.x的管理；2. 将这台ESXi添加至vCenter Server 5.1中；3. 将这台ESXi中的虚拟机迁移（vMotion）至此前安装的ESXi5.1中；4. 将这台ESXi进入维护模式并关机；5. 升级这台ESXi的环境至ESXi5.1，保留IP地址、主机名称、存储配置等；6. 重复步骤15将其余的ESXi都升级至ESXi5.1。VCENTER配置所有物理主机均升级至ESXi 5.1环境后，对vSphere环境进行配置，主要配置如下：1、 将所有ESXi主机配置HA功能，创建ESXi主机集群对所有ESXi物理主机在vCenter Server 5.1管理平台中进行HA配置，并组成统一的虚拟化高可用集群。2、 根据用户应用需要进行资源池创建根据用户要求，对各虚拟化应用系统进行资源池的划分工作，并根据应用的关键程度进行资源池资源争抢机制的设定，保证关键应用在极端情况得到充足的资源。3、 重新审核各ESXi主机网络配置对所有ESXi主机的各项配置特别是网络相关配置进行审核工作，在可能的情况下打开vSphere 5.1的主机配置文件检察功能。虚拟机升级由于ESXi环境由4.1升级至5.1，因此虚拟化环境将得到许多vSphere 5.1的新功能，主要包含虚拟硬件支持HW 9.0与新版本的VMware Tools。对用户所有虚拟机内的VMware Tools软件进行升级，并关闭所有虚拟机。关闭虚拟机后，对虚拟机的虚拟硬件版本（HW）进行升级，根据各虚拟机操作系统不同，最高可升级至HW 9.0版本。重启所有虚拟机。为了尽量降低重启虚拟机的应用宕机影响，升级VMware Tools的工作将安排在晚上10点后进行。且所有45台虚拟机的升级VMware Tools过程耗时不超过180分钟。虚拟机存储迁移在完成vSphere环境升级后进行新存储的添加、虚拟机的存储迁移以及旧存储的重新配置。主要步骤如下：1. 新存储的LUN按照1TB每个划分；2. 将新存储添加至vSphere环境，每个LUN作为一个单独的DataStore；3. 通过Storage vMotion分步将虚拟机从原存储中迁移至新存储，其中虚拟机的硬盘格式由厚置备模式转换为精简自卑模式，注意此转换有可能会影响迁移速度，因此需要在前期克隆备份的时候进行测试；4. 当所有的虚拟机完成Storage vMotion后，将老存储从vSphere环境中断开并重新配置，除保留两个2TB的LUN以外，其余的空间按1TB每LUN划分；5. 将重新配置的老存储再次加入vSphere环境，每个LUN配置一个DataStore，并初始化为VMFS5格式。实施文档交付项目实施完成后，在项目过程中所有工作内容的记录、虚拟化基础架构平台的最终应用策略配置以及vSphere 5.1系统的日常操作运维内容将采用文档方式进行交付。交付文档包含如下内容:ESXi 5.1安装设置手册vCenter 5.1设置文档虚拟化平台策略设置记录巡检支持在vSphere由4.1升级至5.1，所有应用恢复后，进行1天的运行情况监控工作。记录当天所有虚拟机的运行状态并现场支持突发问题的处理。在项目实施完成后的半年内，提供1天的现场观察与支持服务。项目实施风险控制每个项目的实施都存在风险，对于风险的管理将在项目实施过程中非常重要。对于本项目的实施工作，主要存在以下几个风险点：实施时间的选择考虑到本次实施是在原有物理平台上通过资源的调配与迁移实现原平台的升级工作，因此为了规避实施风险，需要选择虚拟化支持的应用的闲事进行升级实施工作。为了升级虚拟化机的硬件版本与VMware Tools工具，需要对所有虚拟机进行重启操作，因此实施时间将包含晚上可停机维护的时间段。突发事件处理每个项目实施过程中都存在突发事件，而突发事件处理的预案将会大幅提升项目实施的成功性。本次实施可能出现的突发事件以及应对计划如下：1、 将ESXi 4.1主机注册至vCenter Server 5.1后，迁移虚拟机不成功删除虚拟机快照并克隆该虚拟机文件，重新迁移。若不成功，将使用克隆虚拟机复制方式进行虚拟机迁移操作。2、 升级虚拟硬件平台与VMware Tools后虚拟机重启失败升级虚拟硬件平台与VMware Tools前进行虚拟机的克隆操作，保留原有虚拟机文件备份，保证回退的可能性。3、 虚拟机迁移存储位置不成功迁移前删除虚拟机快照，并进行克隆虚拟机操作。若不成功，使用克隆虚拟机复制方式进行存储位置迁移操作。4、 虚拟机迁移存储后重启失败使用克隆备份重新进行迁移操作。5、 回退机制设计迁移次序，将vSphere 4.1平台相关管理虚拟机（如vCenter Server 4.1）安排在最后一批进行迁移操作。在留存最后一台ESXi 4.1物理主机时，保证所有业务应用均已迁移至vSphere 5.1环境中并进行虚拟机重启与业务重启验证。克隆所有vSphere 4.1相关管理虚拟机存妥善保存虚拟机文件后，再将最后一台物理机升级为ESXi主机并注册进vCenter Server 5.1环境中。6、 ESXi升级后存储设备无法识别迁移升级的物理环境为NetApp3040存储设备，项目实施前需要做好存储设备的配置备份工作，并有NetApp认证工程师支撑本项目的实施工作。7、 Avamar备份系统不能正常工作项目实施过程中将安排具有Avamar备份软件系统实施经验的工程师进行现场实施工作。项目时间进度计划项目上午下午夜间上午下午夜间上午下午实施前的准备*准备硬件资源*安装vSphere 5.1*迁移虚拟机*vCenter配置*虚拟机升级*实施文档交付*巡检支持*根据此前的测试结论，对整个项目实施的具体时间安排和节点控制列表如下。前提：1. 源存储（Netapp-lun）的数据读写速度不小于80MB/s2. 迁移的数据量不超过3TB。虚拟机的总体数据约为3.5TB，但由于源虚拟机均采用厚置备模式（Thick），实际使用数据预计不超过3TB，在迁移过程中采用瘦模式（Thin）可有效降低迁移数据量。我们将于2013年10月25日17时开始迁移和升级工作，详见下表：时间节点实施内容说明10月25日17：00实施准备记录群集HA、DRS配置记录网络、存储配置导出主机配置文件10月25日18：00开始备份克隆根据测试，每台ESXi主机至少支持20MB/s的克隆速度，6台ESXi并发克隆总体速度可达到120MB/s，考虑存储的读写能力，可将并发数控制在4个预计需要11小时完成每30分钟监控克隆进度在上一克隆结束时及时发起下一克隆10月26日6：00克隆结束预计整个克隆在6点结束，其中冗余了1小时操作时间10月26日6：00关闭群集HA和DRS功能将ESXi主机1上的虚拟机vMotion至其他较空闲主机将ESXi主机1从vCenter 4中退出将ESXi主机1升级至vSphere 5.110月26日6：30在ESXi主机1上创建虚拟机并安装vCenter 5.1将ESXi主机1加入到vCenter 5.110月26日7：30将ESXi主机2从vCenter 4.x中退出将ESXi主机2加入vCenter 5.1将ESXi主机2上的虚拟机vMotion至主机