使用一台测试2台ESXi6.5部署vSAN集群.docx

测试2台ESXi部署vSAN实验一、实验环境和介质1.1:实验环境这里我是使用一台Dell R730物理机来做这次的测试，R730安装ESXi 6.5，然后在这上面虚拟2台ESXi6.5服务器，和一台vCenter 6.5管理服务器，来模拟2台ESXi 配置vSAN。因为6.0 U1 U2版本可能vSAN功能还有些问题，我这里就直接用6.5的版本了。Dell R730配置如下：CPU2颗8核的 Intel Xeon E5-2609 内存8根8G，共：64G网络3个千兆网卡，1个百兆网卡存储2个275G的SSD卡做RAID1，3个4T的iSCSI盘做RAID5。就是一个230G的，加一个7T的。IP地址192.168.10.21.2：vSAN原理和用途因为vSAN必须使用3台ESXi主机，那么我们2台ESXi主机怎么配置vSAN呢？这个你就必须了解vSAN的原理和通途。vSAN全名叫vSphere Virtual Storage Area Network,vSphere虚拟化局域网存储。是vSphere 5.5后才开始出来的新功能，而且只能通过Web Client来部署。是基于服务器端存储的共享分布式对象存储系统，可以用来取代vSphere后端的外置磁盘阵列。vSAN就是一种分布式存储，其数据保护技术不是采用传统的RAID方式，而是叫分布式RAID。VSAN在主机之间使用RAID来满足对系统中存储对象的可用性和可靠性的要求，虚拟机存储对象的镜像拷贝数量取决于虚拟机存储策略。数据的副本都是存储在主机上的，当某台主机失效或宕机，就会出现类似脑裂问题，vSphere为了解决这个问题，引入了一个重要的组件见证(winess)，类似于我们常说的仲裁盘。由于见证只是一个逻辑组件，不保存数据，占用空间非常小，我们也就可以实现2台ESXi主机的vSAN集群。这个见证是一个模板，可以从官网直接下，免费的，安装这个模板，最好从vCenter web client添加，就可以省去2个CPU的许可，用client部署这个模板是看不到见证自带的许可的。1.4：虚拟机规划CPU内存磁盘网卡IP地址ESXi 6.5主机2颗16G40G50G500G2个管理地址：192.168.10.6vSAN kernel地址：192.168.10.16ESXi 6.5主机2颗16G40G50G500G2个管理地址：192.168.10.7vSAN kernel地址：192.168.10.17见证服务器2颗8G12G10G100G2个管理地址：192.168.10.6vSAN kernel地址：192.168.10.16vCenter 6.5服务器1颗8G100G1个192.168.10.31.5：需要准备的介质vCenter6.5：VMware-VIM-all-6.5.0-4602587.isoESXi6.5：VMware-VMvisor-Installer-201701001-4887370.x86_64.isoWiness6.5：VMware-VirtualSAN-Witness-6.5.0-4564106.ova二、配置主机，安装虚拟机，安装vCenter2.1：配置主机因为要开启vSAN功能，虚拟机必须配置2块网卡，1块单独来处理vSAN流量，所以在安装ESXi的主机上最好配置2个交换机，1个交换机放正常的虚拟机的管理，另一个当2台ESXi虚拟机的vSAN网卡的交换机。选择一块千兆网卡配置交换机名称，不配置vlan2.2：安装ESXi6.5虚拟机因为vSAN集群主机至少需要2个CPU、1个SSD磁盘、1个HDD磁盘、2个网卡、8G内存，我这虚拟机配置了2个CPU、2个网卡、16G内存、3个HDD磁盘。这个3个HDD磁盘分别是40G、50G、500G容量，40G用来当ESXi6.5系统盘使用，50G用来当SSD磁盘使用，500G当后面vSAN存储。2块网卡，第2个网卡要放在我们刚才创建的交换机中。虚拟机具体配置，如下图：2.3：配置ESXi虚拟机IP、SSH上面我们配置完虚拟机硬件条件，安装ESXi 6.5系统后，进入控制台，根据自己网络的实际情况配置管理IP地址，并开启SSH。配置管理IP地址，IP地址最好是静态的，配置好了，回车就好了。回到配置界面，配置SSH，开启SSH可以看到SSH现在是不可用的状态回车，直接可以将Disabled改成Enabled2.4：安装vCenter这个没什么新东西，就不说了。2.5：安装Witness见证这个最好通过vCenter Web Client来安装这个Witness，要不然看不到Witness自带的2个CPU的License。这个Winess服务器也是安装在Dell R730服务器上的虚拟机，要将这个虚拟机的vSAN的网卡配置到上面新建的交换机上去。如何你是真实2台物理ESXi主机做vSAN，也可以将这个Witness安装到你的2台ESXi主机去。选择Dell主机根据你的实际虚拟机的数量选择选择存储这里注意配置Winess网卡的所在的交换机配置Witness服务器root密码完成三、配置vSAN集群3.1：配置ESXi虚拟机SSD磁盘vSAN必须使用SSD磁盘来做缓存，我们必须把我的HDD磁盘标记为SSD磁盘。安装好vCenter，创建数据中心，将2台ESXi主机和见证服务器都加入到数据中心中，我这里是已经创建了一个vSAN的集群，这个你别管他，找到你要修改的主机，找到要修改的磁盘，几下磁盘的mpx后面的标记。然后使用SSH协议登录到这个主机，将这个标记的磁盘，标为SSD硬盘。我这里是把这个50G的磁盘标记为SSD硬盘用过SSH登录ESXi主机，我这使用SecureCRT这个工具。执行如下命令，将HDD硬盘标记为SSD硬盘。这个C0:T1:L0是我磁盘的mpx的标记，你根据自己实际情况。#esxcli storage nmp satp rule add -satp VMW_SATP_LOCAL -device mpx.vmhba1:C0:T1:L0 -option=enable_ssd #esxcli storage core claiming reclaim -d mpx.vmhba1:C0:T1:L0修改后可以看到，原理的HDD，变成了SSD硬盘。3.2：创建vSAN功能集群创建vSAN功能集群，先不要选择HA、DRS功能。等配置完vSAN后，再开启你需要的HA、DRS。vSAN磁盘组选择手动创建3.3：添加主机将2台ESXi主机加入到刚才创建的vSAN集群中，Witness服务器不要加进vSAN集群中去。3.4：配置2台ESXi主机vSAN流量的kernel，这个vSAN流量的kernel是需要IP地址的，Witness的vSAN流量的kernel也是需要配置IP地址的，这个3个地址必须在一个网段。先创建一台虚拟交换机，使用第二块网卡选择刚才创建的虚拟机配置混杂模式最后选择刚才创建的交换机，创建vSAN流量的kernel。专用的kernel是需要配置IP地址的，所以根据具体情况配置IP地址。配置完后可以看到你创建的vSAN流量的kernel3.5：配置见证服务器的vSAN kernel IP地址和交换机修改见证服务器的交换机开启混杂模式修改vSAN kernel 的IP地址，必须和前面ESXi虚拟机的vSAN kernel地址同网段3.6配置后的ESXi主机网络和见证主机的网络ESXi主机一：管理IP：192.168.10.6vSAN kernel IP：1921.68.10.16ESXi主机二：管理IP：192.168.10.7vSAN kernel IP：1921.68.10.17见证主：管理IP：192.168.10.8vSAN kernel IP：1921.68.10.18上面配置完成之后，可以通过SSH登录到主机中，各个IPping一下，如果不通，说明你的配置还有问题。要不然，你vSAN磁盘组配置完，安装虚拟机会发现只有一个本地的磁盘组可用，导致无法安装虚拟机。3.7：配置vSAN见证主机和故障域选择哪一台当主，哪一台当辅。当主出现故障后，可以从辅恢复。配置见证主机，从OVA模板部署的见证主机的标志是蓝色的。选择声明的磁盘 。可以不选择直接下一步完成这样我们见证主机和主辅主机都弄好了。3.8：配置vSAN磁盘组因为我这里就是一个SSD+HDD，只能使用混合模式的了。可以看到我们