故障分析报告-上海浦东发展银行.doc

HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 1 页 共 17 页 HPUXHPUX HPVMHPVM 部署部署 XXXX 公司公司 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 2 页 共 17 页 目目 录录 1 1 具体实施步骤具体实施步骤 3 1 1宿主机及虚拟机配置 3 1 1 1将宿主机系统升级为VSE OE 3 1 1 2在宿主机中配置虚拟机HPVM 3 1 2删除 HPVM 虚拟机 13 1 3备份 15 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 3 页 共 17 页 1 1 具体实施步骤具体实施步骤 1 1宿主机及虚拟机配置宿主机及虚拟机配置 1 1 1将宿主机系统升级为将宿主机系统升级为 VSE OE 将 VSE OE 版本 HPUX OS 通过 bl870i4 服务器的 ilo 口 virtual media 挂载到系统中 重新安装 OS 为 VSE OE 确认 OS 中包含 HPVM 软件 swlist grep i integrity vm 1 1 2在宿主机中配置虚拟机在宿主机中配置虚拟机 HPVM 建虚拟机 VM hpvmcreate P vm02 O hpux c 4 e 50 r 16384M P vm 名字 O 操作系统类型 支持 HPUX windows linux c CPU 数量 core 数 e 提供虚拟机的动力保障能力 保障提供给虚拟机每个虚拟 CPU 的最低处理能力 缺省为 10 r 指定内存大小 缺省为 2G 克隆 OS 已建立模板 OS 镜像硬盘 disk31 后续新建 VM 的 OS 安装可以直接克隆该硬盘 hpvmmodify P vm02 a disk avio stor disk dev rdisk disk31 将模板硬盘分配给虚拟机 VM02 hpvmconsole P vm02 切换到 VM02 的 vMP 界面 vMP MAIN MENU CO Console CM Command Menu CL Console Log SL Show Event Logs VM Virtual Machine Menu HE Main Help Menu X Exit Connection 启动 VM02 vm02 vMP cm HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 4 页 共 17 页 Use Ctrl X to return to vMP main menu vm02 vMP CM pc Current System Power State Off Power Control Menu C Power Cycle ON Turn Power On OFF Turn Power Off G Graceful Shutdown Enter menu item or Q to Quit on 给 VM02 加电 System will be powered on Confirm Y N y System is being powered on vm02 vMP CM ma 回到 vMP 的主页面 vm02 vMP co 启动 OS Loading EFI Shell Built in EFI Shell version 1 10 14 62 onsole Device mapping table fs0 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 HD Part1 Sig60B129EE 1BD2 11E6 8000 D6217B60E588 fs1 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 HD Part3 Sig60B12A0C 1BD2 11E6 8000 D6217B60E588 blk0 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 blk1 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 HD Part1 Sig60B129EE 1BD2 11E6 8000 D6217B60E588 blk2 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 HD Part2 Sig60B129F8 1BD2 11E6 8000 D6217B60E588 blk3 Acpi PNP0A03 0 Pci 0 0 Scsi Pun0 Lun0 HD Part3 Sig60B12A0C 1BD2 11E6 8000 D6217B60E588 startup nsh echo off setting hpux path EFI HPUX type fs x where x is your bootdisk 0 1 2 type hpux to start hpux bootloader HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 5 页 共 17 页 Shell Shell Shell fs0 fs0 hpux The system is ready GenericSysName HP Release B 11 31 see etc issue Console Login Password 注意 在宿主机中 VM02 的启动盘为 dev disk disk31 但我们在 VM02 启动后 会发现 VM02 将为其生成 一个新的盘符号 例如 dev disk diskxx 克隆 OS Ctrl b 退出 OS 退出 VM 虚拟机到宿主机 将我们要作为 VM02 的操作系统的根盘的硬盘分配给 VM02 例如 我们存储端新加一块 100G 的盘给宿主机 ioscan kfnNC disk disk 27 64000 0 xfa00 0 x4 esdisk CLAIMED DEVICE HP Virtual Disk dev disk disk27 dev rdisk disk27 hpvmmodify P vm02 a disk avio stor disk dev rdisk disk27 将这块硬盘分配给 VM02 作为它的 OS 盘 进入 VM02 虚拟机系统 我们可以发现 VM02 多了一个盘 将模板硬盘上的操作系统克隆到 disk27 上 nohup drd clone t dev disk disk27 加 nohup 这 2 个命令可以将需要执行的命令在后台运行而不占用前台的界面 用 tail f out 可以查看进度 或者 drd status 确认克隆是否顺利完成 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 6 页 共 17 页 操作系统克隆完成后 将系统关闭 模板盘从 VM02 中剔除 并用新盘启动 将克隆完的新盘作为主启动盘 setboot p dev disk disk28 shutdown hy 0 系统关闭后 Ctrl b 退出 VM 虚拟机到宿主机 将模板硬盘从 VM02 中剔除 hpvmmodify P vm02 d disk avio stor disk dev rdisk disk31 hpvmstatus P vm02 查看当前 vm02 包含硬盘应当只有克隆完成保留下来的新盘 启动 VM02 hpvmconsole P vm02 按 3 3 步骤进行启动 或 hpvmstart P vm02 修改主机名 set parms hostname 设置页面可显示当前用户及所在目录 cd vi profile 加入 export PS1 LOGNAME hostname PWD export EDITOR vi export HISTFILE sh history export HISTSIZE 500 wq 保存后退出 OS 再登陆 exit root vmtest root vmtest 至此 操作系统的部署完成 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 7 页 共 17 页 添加数据盘 存储端分配新的 VV 给 bl870 后 ioscan kfnNC disk disk 102 64000 0 xfa00 0 x26 esdisk CLAIMED DEVICE 3PARdataVV dev disk disk102 dev rdisk disk102 将数据盘 disk102 分配给虚拟机 VMtest hpvmmodify P vmtest a disk avio stor disk dev rdisk disk102 登陆虚拟机查看 在 VM 里面 root vmtest ioscan kfnNC disk 建文件系统 pvcreate dev rdisk disk4 vgcreate s 64 dev vg01 dev disk disk4 s 参数设置 PE size 的大小 单位为 M 数值范围为 1 256M MAX PE 数量为 65536 个 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 8 页 共 17 页 建 LV lvcreate L 10240 默认为 M dev vg01 L 参数 直接设置 lv 的大小数值 单位为 M lvcreate l 2879 dev vg01 l 参数 PE 的数量 实际大小为 PE 数量 PE SIZE newfs F vxfs dev vg01 rlvol1 mkdir data mount dev vg01 lvol1 data 编辑 etc fstab 设置 data 启动时自动挂载 vi etc fstab 添加 dev vg01 lvol1 data vxfs delaylog 0 2 wq 保存退出 bdf 创建虚拟网络 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 9 页 共 17 页 hpvmnet c S Vswitch backup n 7 创建虚拟交换机 vswitch 这个 vswitch 名字为 Vswitch backup 通过宿主机 lan7 端口与机房主网进行通 讯 宿主机 lan7 为备份网络 lan0 lan1 lan2 lan4 lan5 lan6 为数据应用网络 lan3 为宿主机 IP 网卡 hpvmnet b S Vswitch backup 启动 vswitch hpvmmodify P vm01 a network avio lan vswitch Vswitch backup portid 1 往 VM 虚拟机添加虚拟网卡 这个网卡是 Vswitch backup 这个虚拟的网络交换机的 port 1 口 hpvmmodify P vm02 a network avio lan vswitch Vswitch backup portid 2 hpvmmodify P vm03 a network avio lan vswitch Vswitch backup portid 3 hpvmnet S Vswitch backup V 查看 Vswitch backup 交换机各个端口的状态 虚拟机 OS 配置 IP 在此次安装中 主要分配 2 个的不同 BLc VC FlexFabri 模块上的端口的虚拟网卡到 VM 中 通过 APA 创建 lan900 配 IP 保证网络的连通性 hpvmstatus P vm03 smh HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 10 页 共 17 页 选择 n 选择 i 选择 a HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 11 页 共 17 页 方向键 选中要配置 IP 的 lan901 按回车 按 p 键修改 IP 地址 移动 到 IPv4 Attributes Select to enable 按空格键选中 并继续下移到 IPv4 Address 输入 IP 地址 Subnet Mask 输入子网掩码 继续按 下移至该页面最下方 至 modify 后按回车 此时 IP 地址配置完成 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 12 页 共 17 页 配置网关 按 Esc 键盘回退至 选中 s 进入网络服务配置页面 选中 r 进入 网关配置页面 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 13 页 共 17 页 按 Tab 至下拉选择栏 按 键移动至 Actions 按回车 选中 add route 回车进入配置页面 一般选中系统 主 IP 的网关为 default 模式 输入网关 IP 地址并按 Tab 键至保存按钮保存配置 最后按 Tab 至 File 回车选 择 exit 退出编辑窗口 按 x 退出 SMH 配置界面 1 2删除删除 HPVM 虚拟机虚拟机 删除数据文件系统 umount data vgchange a n vg01 将 VG01 卷组去激活 vgexport vg01 删除 VG01 相关的配置信息 shutdown hy 0 从宿主机端删除该虚拟机相关的信息 删除 VM 虚拟机数据盘 hpvmmodify P vmtest d disk avio stor disk dev rdisk disk102 删除所有的网卡 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 14 页 共 17 页 hpvmmodify P vmtest d network avio lan vswitch Vswitch backup portid 1 hpvmremove P vmtest 删除虚拟机 存储端回收硬盘 右键点击我们回收的的 VV 选择 unexport 点击 yes 确认 在存储端回收 VV 空间 点击要回收的 VV 右键选择 remove HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 15 页 共 17 页 Delete 删除 VV 回收空间 1 3 备份备份 数据备份 由于每次 tape 只能分配给不同的虚拟机 vm 后 无法同时进行读写 在一台 VM 使用虚拟 tape diriver 进行 备份的时候 对其他 VM tape 进行操作将显示被占用 因此 我们考虑通过 nfs 服务将宿主机硬盘空间挂载 至各个 vm 将虚拟机数据先备份至 nfs 挂载的 backup 目录中 再通过宿主机备份 nfs 相关目录 宿主机备份目录 mount dev vg00 lv backup backup mkdir backup vm01 mkdir backup vm02 mkdir backup vm03 配置 NFS 服务 将这 3 个目录分别挂载到 3 台 VM 中 并将这些 nfs 目录挂载点添加到各 vm 的 fstab 中 对于 VM01 mount bl870i4 backup vm01 backup 对于 VM02 mount bl870i4 backup vm02 backup 对于 VM03 HPVMHPVM 部署实践部署实践 工作文档工作文档 HPVM 部署实践 第 16 页 共 17 页 mount bl870i4 backup vm03 backup 先将虚拟机内数据 tar 到 backup NFS 目录 在宿主机再 tar backup 数据到磁带机 虚拟机系统备份 方法一 主机本地加硬盘 将虚拟机 OS 克隆到宿主机文件系统中 优势是当存储挂过来的虚拟机系统的硬盘 出现问题时 可以直接挂载本地盘对应的虚拟机镜像 启动系统 如 扩容 600G 硬盘到宿主机中 建立对应的 VG 用来备份虚拟机的操作系统 ioscan kfnNC disk 假设我们扫描掉新加的硬盘的盘符为 disk111 pvcreate dev rdisk disk111 vgcreate s 64 dev vgbackup dev disk disk111 lvcreate L 102400 n lv vm01 os dev vgbackup lvcreate L 102400 n lv vm02 os dev vgbackup lvcreate L 204800 n lv vm03 os dev vgbackup hpvmmodify P vm01 a disk avio st