XX银行VMWARE服务器虚拟化实施文档.doc

XX银行信息网络中心VMWARE服务器虚拟化实施文档XX银行2011年6月文档信息：文档名称XX银行信息网络中心VMWARE服务器虚拟化实施文档保密级别商密文档版本编号文档管理编号管理人制作人制作日期复审人复审日期扩散范围客户版本纪录版本编号版本日期修改者说明文档说明此文档是由实施工程师于2011年6月为XX银行信息网络中心系统软件采购项目VMWARE实施记录。版权说明本文档中出现的任何文字叙述、文档格式、插图、照片、方法、代码等内容，除由特别注明，版权均属于用户所有，受到有关产权及版权法保护。任何个人、机构未经书面授权许可，不得以任何方式复制或引用本文档的任何片断。目 录一、项目实施环境4二、项目实施职责划分7三、项目实施内容及进度8四、实施地点及时间9五、实施安装调试工作10(1)、ESXI服务器安装10(2)、管理平台操作系统、后台数据库、管理平台（VMWARE VC）安装16(3)、VC初始配置41(4)、存储配置47(5)、HBA卡流量负载配置52(6)、虚拟交换机配置53(7)、HA配置61(8)、VDR配置（虚拟操作系统备份）64一、项目实施环境ESXI服务器说明编号主机名称IP信息1ESXi110.0.3.11/242ESXi210.0.3.12/243ESXi310.0.3.13/244ESXi410.0.3.14/24 5ESXi510.0.3.15/24 6ESXi610.0.3.16/24ESXI服务器架设在机房同一个机架内，共6台IBM 3650M3服务器，每台服务器配有2CPU，32GB内存，本地磁盘容量146GB，由两块磁盘RAID1组成。ESXI服务器是整个项目所提及服务器虚拟化-虚拟机所运行的环境。我们的目标就是例用现有6台ESXI服务器组建成集群，我们应用系统在上面运行，从而实现虚拟出来N多个应用系统。每台ESXI服务器拥有4块网卡，都为1000M。每台ESXI服务器配有两块HBA卡，目标就是实现负载与避免发生单点失败。机柜内安装有两台以太网交换机，两台交换机上连到核心交换机上。以实现负载和冗余。每台服务器两块网卡分别连接至两台以太网交换机上。目前两台交换机端口只支持100M，那么ESXI上运行的虚拟机对外提供服务的流量会分别负载到两块网卡上，流量从而流经两台以太网交换机上。本公司虚拟化采用IBM DS5020磁盘阵列柜作为存储使用。ESXI系统存储在本地硬盘上，为了虚拟机数据的安全并且有利实现VMWARE高级功能。我们把虚拟机存放至IBM DS5020磁盘柜上。本机柜架设两台光纤交换机，每台ESXI服务器配有两块HBA卡。这样设计的目的是为了避免HBA卡或光纤链路发生单点失败。VMWARE服务器虚拟化管理服务器：VMWARE服务器虚拟化管理系统我们架设在虚拟机环境中。每个虚拟机都是微软的2003 64位SERVER操作系统。编号主机名称IP信息1poweruni-5245ba10.0.3.10/24 管理服务器，管理员可通过此平台管理整个服务器虚拟化架构。2DATABASE10.0.3.17/24 此平台是管理服务器的数据库，用于存放整个虚拟化平台的日志。用户名、密码等信息为了安全起见，不在本文档描述。每台ESXI服务器配有4块网卡，两块用在虚拟机的流量和管理做负载均衡，在每台ESXI服务器上拿出额外一块网卡用于VMONTION迁移使用。这个网络必须使用1000M。我们在机柜中架设一台H3C的1000M以太网交换机，每台ESXI服务器的VMONTION网卡与这台交换机相连。当一台ESXI主机发生故障那么发生故障的服务器上面的虚拟机通过这个网络迁移到其他主机上运行。用于迁移的网络IP规划如下：编号主机名称IP信息1ESXi1192.168.254.11/242ESXi2192.168.254.12/243ESXi3192.168.254.13/244ESXi4192.168.254.14/24 5ESXi5192.168.254.15/24 6ESXi6192.168.254.16/24虚拟交换机配置说明ESXI1ESXI2ESXI3ESXI4ESXI5ESXI6心跳网络名称HERT192.168.254.11HERT192.168.254.12HERT192.168.254.13HERT192.168.254.14HERT192.168.254.15HERT192.168.254.16虚拟机网络名称VM NETWORK600VM NETWORK103VM NETWORK600VM NETWORK103VM NETWORK600VM NETWORK103VM NETWORK600VM NETWORK103VM NETWORK600VM NETWORK103VM NETWORK600VM NETWORK103存储划分LUNDS5020-1 1.5TBDS5020-2 1.5TBDS5020-3 1.5TBDS5020-4 1.5TB二、项目实施职责划分参与实施单位参与人员职责信息网络中心1. 服务器硬件安装2. 网络交换机安装调试配置3. 提供网络IP地址规划4. 操作系统应用部署5. HBA卡、网卡安装服务供应商1. VCNETER操作系统、数据库安装2. ESXI服务器安装调试3. 配合网络工程师调试存储设备4. 调试虚拟化相关策略5. 负责培训相关的网络管理员并移交文档三、项目实施内容及进度序号实施项目时间实施步骤及内容描述实施人员1ESXI服务器安装1个工作日1、确认用户环境，确认服务器2、对服务器进行初始化，对磁盘进行RAID划分3、安装ESXI系统2VCENTER服务器安装05个工作日1、安装64位2003操作系统2、安装数据库并建ODBC数据库连接3、安装VCENTER3调试1个工作日1、协助网络工程师对存储设备和网络交换设备进行初始化2、调试VCENTER3、与存储、网络对接，达到虚拟化平台与存储、网络协同工作。4测试05个工作日1、把用户现有服务器迁移至虚拟化平台上。WINDOWS及LINUX平台各迁一套。2、迁移后，测试HBA卡、网络设备发生故障自动切换功能。3、测试主机HA功能。5培训05个工作日1、接用户要求制作出实施文档，并移交给用户，移交相关技术资料。2、结合用户环境，把日常管理及相关操作告知用户，用户独立管理虚拟化平台四、实施地点及时间实施地点：XX银行信息网络中心机房实施时间： 2011年5月30 日至6月3日五、实施安装调试工作(1)、ESXI服务器安装用户环境共有6台IBM 3650M3服务器，文档以一台服务器安装为例来讲述安装过程，其他主机与此例完全一样。1、 将ESXI所在的服务器初始化做好RAID，然后放入安装光盘引导服务器启动然后选择第一项，安装ESXI。2、 回车后，加载安装文件，出现许可界面，请详细查看许可内容，如果同意请接（F11）键。3、 然后会看到服务器本地磁盘的大小，我们环境中，每台服务器安装有两块磁盘，做RAID1，总共容量146GB，然后选择本地磁盘，然后点击“ENTER”4、 确认磁盘后，请按F11键。5、 开始安装，从光盘向本地磁盘写入数据。安装过程大约需10分钟左右。6、 安装完成后，出现如上画面。然后接回车键将重新启动服务器。8、重启服务器第一步就是，设定管理密码。密码不在此文档描述。9、接下来，按照网络规划要求，配置一个管理IP地址。10、进入后，选择“IP Configuration” 11、在这里输入：ip address: 10.0.3.11, subnet mask: 255.255.255.0Default gateway: 10.0.3.254 同样其他服务器按照网络规划，配置有所变化。 12、配置完IP地址后，退出，配置主机名。这里配置成：ESXi113、最后重启一下网络服务使刚才配置生效。(2)、管理平台操作系统、后台数据库、管理平台（VMWARE VC）安装1、 安装管理平台，需要64位服务器操作系统，在现在环境中，我们安装的是64位WINDOWS 2003 SERVER企业版R2。通过在任意一台ESXI服务器建一个虚拟机，安装过程略。IP地址：10.0.3.10/24.现已远程桌面已开启。2、 NETFRAMWORK 3安装在WINDOWS 2003系统上。3、 在任意一台ESXI服务器上再建一个虚拟机，IP地址为：10.0.3.17,安装SQL SERVER 2005数据库。4、 新建一个实例，名称是：vcdatabase5、 选择内置系统帐户。6、 然后输入SA密码7、 收集完成，点击“安装”。8、 安装完成后，用SQL管理工具，连接数据库，然后创建一个数据库。9、 数据库的名称为：VC，开启自动增涨功能。10、回到VCENTER管理平台上，10.0.3.10。建ODBC连接，在“控制面板”“管理工具”“ODBC数据库管理器”在系统DSN标签，然后添加。10、 选择SQL NATIVE CLIENT。点击完成。11、 ODBC的名称是：VCODBC 服务器选择：VCVCDATABASE实例。12、 输入SA帐号和密码13、 更改的数据库，选择VC14、 然后默认以上选项15、 然后测试一下，数据源。16、 测试成功后，就可以安装VC管理平台。17、 打开VMWARE VCENTER安装程序，点击“VCENTER SERVER”18、 许可证激活码。暂时可以不输入，可以在管理界面里激活是一样的。19、 然后选择数据源名称DSN：vcodbc20、 输入SA密码21、 可以选择安装的目录22、 重启完成后，管理平台安装就完成了。接下来安装客户端软件。23、 至此VC管理平台和客户端软件安装完成了。(3)、VC初始配置1、把客户端软件打开，连接到VC服务器上，IP为：10.0.3.10.创建数据中心，起名为：FUXINBANK。数据中心是一个逻辑上的名称，可任意。也可在一个VCENTER上建多个数据中心。2、新建一个数据中心后，就可以添加主机，把6台ESXI服务器都添加到这个数据中心下。3、添加主机，把所有的ESXI主机添加到数据中心里面。4、主机IP：10.0.3.12,然后输入ESXI用户名和密码。然后点击下一步。5，然后选择是6、添加ESXI主机的时候，同时也把上面的虚拟机添加到数据中心里面。7、在这里输入ESX主机的许可激活号码，然后下一步,其他选项保持默认。8、选择相应的数据中心。9、然后完成10、同样把6个ESXI主机添加到数据中心里面。(4)、存储配置 1、按照现有用户的环境以及应用的情况，把存储分为4个区（LUN），在VC里面，找到任意一台主机上，然后找到“存储适配器”然后重新扫描一下。扫描完成后，可以看到每台主机里的HBA卡。点击每一块HBA卡，都会看到4个1.5TB大小的LUN。这说明每个LUN都映射给每一块HBA卡上了。2、然后，点“存储器”-“添加存储器” 3、选择“磁盘/LUN”4、可以看到4个LUN已映射到服务器上了，选择任意一个。5、点击“下一步”6、然后存储名称，这个可以是任意的只是用来明显标识。我们以DS5020-1为例。7、然后选择最大文件大小。8、点击完成9、同样，把另外3个LUN挂载到系统上。10、点击任意一个存储器，右键选择“浏览数据存储“11、可以在里面可以新建文件夹存储ISO光盘文件，这样在安装虚拟操作系统时就可以加载光盘ISO。(5)、HBA卡流量负载配置 1、HBA卡流量负载配置前，检查所有光纤链路都连接好。并确认光纤交换机工作正常。HBA卡负载需要在每一个ESXI配置，它不像存储器，只在一台主机上添加其他主机都可看见。HBA卡负载切记要在每一台主机上配置。我们以在10.0.3.16上DS5020-1配置为例。在DS5020-1上右键，然后属性。2、看到相对应的LUN了，然后点击“管理路径”。3、会看到两条路径。然后选择“循环”。以此类推其他的存储器与其他主机同样的配置。(6)、虚拟交换机配置虚拟交换机是一种逻辑上的交换机，用于ESXI主机上的虚拟机之间以及虚拟机与外部网络通信的桥梁作用。可以认为是真实的交换机。在我们环境中，每一个ESXI都建二个虚拟交换机用于不同类型的通信。虚拟交换机1：服务器后配网络适配器，每台服务器两个网卡，用于管理使用及虚拟机对外提供服务流量使用。两块网卡作流量负载均衡及故障切换使用。每台服务器的管理地址范围是：10.0.3.11/24-10.0.3.16/24.我们在此虚拟交换机建两个端口组，每个端口组划分到不同的VLAN上，这样将来虚拟机的网卡连接至哪一个端口组也就可以与相应的VLAN进行通信。两个VLAN ID分别是103、600。虚拟交换机2：板载第二块网卡，用于心跳网络和虚拟机迁移使用。IP地址为：192.168.254.11/24-192.168.254.16/24,配置这二种虚拟交换机上，通过客户端软件连接至管理平台上，分别在每台ESXI上配置这两种虚拟交换机。（1）、虚拟交换机1：VMKERNEL（管理）及虚拟机流量负载均衡1、在安装ESXI期间，选择ESXI服务器板载网卡，自动会生VMKERNEL（管理）及虚拟机虚拟交换机。2、按照网络规划的要求，我们建两个端口组，并且为每个端口组分配VLAN ID。在每台ESXI服务器上，找到“网络”“虚拟交换机”，然后点“属性”，3、我们可以看到，有两个端口组，一个是VM Network，此端口组是用于虚拟机对外流量的。另外一个是Management 此端口组是用管理的。我们的目标就是更改系统默认的端口组，并新建端口组来附合网络规划。4、我们点击“添加”然后选择“虚拟机”，接下来“下一步”5、然后输入网络标签名为“VM Network600”，VLAN ID为：600。然后点击下一步，完成了VLAN ID 600 的端口组。6、同理，我们新建另一个虚拟机端口组，VLAN ID 为103。7、把原有的“Management”端口组VLAN ID 更改为1038、最后，每台服务器的第一个虚拟交换机都为三个虚拟端口组。（2）、虚拟交换机2：用于心跳网络和虚拟机迁移使用1、点击“网络”“添加虚拟交换机”2、选择“VMKenel”3、选择虚拟交换机上连的物理网卡，在现有环境，选择板载的第一块网卡。4、在网络标签上，写明虚拟交换机的名称，只是用于标识。在这里名称是HERT然后把“将些端口用于VMOTION”复选框选上。5、输入IP地址：192.168.254.11/24-192.168.254.12/246、完成后，在网络界面上就可以看到新建的用于心跳网络的虚拟交换机。同样，把另外几台ESX服务器上建虚拟交换机。（3）、用于虚拟操作系统流量负载。1、在管理和虚拟流量所在的虚拟交换机上，点属性。2、可以看到三个虚拟端口组，流量负载需要对三个虚拟端口组设置3、对每个虚拟端口组，选择“