主机层查看存储lun的信息.doc

bash-3.2# powermt display dev=all | morePseudo name=hdiskpower85CLARiiON ID=FCN00111900011 jfwgdbLogical device ID=600601605E302D0010F47A5C870AE111 LUN 225state=alive; policy=CLAROpt; priority=0; queued-IOs=0Owner: default=SP B, current=SP B Array failover mode: 3=- Host - - Stor - - I/O Path - Stats -#HW Path I/O Paths Interf. Mode StateQ-IOs Errors= 0 fscsi0 hdisk173SP B1 activealive 0 0 1 fscsi2 hdisk299SP A0 activealive 0 0 1 fscsi2 hdisk425SP B0 activealive 0 0 0 fscsi0 hdisk47 SP A1 activealive 0 0Pseudo name=hdiskpower85Logical device ID=600601605E302D0010F47A5C870AE111 LUN 225hdiskpower85对应的存储的LUN ID是225接触AIX主机和存储有一段时间了，经常遇到在主机上如何寻找存储信息的问题，个人收集了一点，给大家分享。由于本人做的是AIX系统，接触的是EMC存储所以知识面仅限与此，希望达人补充HP，solaris及HDS相关信息。命令1：#powermt display dev=all这个是常用命令，通过它你可以看到以下信息Pseudo name=hdiskpower1 (你在主机上看到的power盘)CLARiiON ID=CK200031* HR SG(存储上的组别)Logical device ID=60060167EB0C000022A83E3908C3D711 LUN 1(逻辑单元号)state=alive; (状态不错_)policy=CLAROpt;(中档产品) ()priority=0; queued-IOs=0Owner: default=SP A, current=SP A(当前控制器spA)=- Host - - Stor - - I/O Path - - Stats -# HW Path I/O Paths Interf. Mode State Q-IOs Errors= 0 fscsi0 hdisk10 SP B1 active alive 0 0 1 fscsi1 hdisk17 SP B0 active alive 0 0 1 fscsi1 hdisk24 SP A1 active alive 0 0 0 fscsi0 hdisk3 SP A0 active alive 0 0呵呵，当然，这里面还有很多信息，双光纤卡，四个通道，一个power盘映射4个hdisk。下面看看这个hdiskpower1的信息命令2：#lspv(呵呵，这个命令很常用吧)在这里看到主机识别到的所有存储上的盘，对应的vg。hdiskpower0 005f2c6aa2851229 vg1 hdiskpower1 005f2c6aa284d3ce vg1 hdiskpower2 005f2c7aa2c86899 vg2 hdiskpower3 005f2c6aa30fbe31 vg2 hdiskpower4 005f2c7aa2c69692 vg3 activehdiskpower5 005f2c6aa309468d vg4 activehdiskpower6 005f2c6aa3101de2 vg4 active看看大小：(total pps 就是了，看看hdiskpower是100G)# lspv hdiskpower1 PHYSICAL VOLUME: hdiskpower1 VOLUME GROUP: h85vg1PV IDENTIFIER: 005f2c6aa284d3ce VG IDENTIFIER 005f2c6a00004c000000010eb353ee73PV STATE: active STALE PARTITIONS: 0 ALLOCATABLE: yesPP SIZE: 128 megabyte(s) LOGICAL VOLUMES: 1TOTAL PPs: 799 (102272 megabytes) VG DESCRIPTORS: 1FREE PPs: 0 (0 megabytes) HOT SPARE: noUSED PPs: 799 (102272 megabytes) FREE DISTRIBUTION: 00.00.00.00.00 USED DISTRIBUTION: 60.160同样的方法就可以查到主机识别到的所有存储lun的大小了。当然，通过EMC 的powerpath软件业可以收集到主机上所有的存储信息，不过我还不知道达人知道，就贴出来吧！补充一下：查看当前磁盘path、所属端口、I/O数量AIX命令：# /usr/DynamicLinkManager/bin/dlnkmgr view -path HP命令：# /opt/DynamicLinkManager/bin/dlnkmgr view -path 正常情况，IO-Errors为0，path状态为online。示例：Paths:000039 OnlinePaths:000039PathStatus IO-Count IO-ErrorsOnline 3768105389 465 PathID PathName DskName iLU ChaPort Status Type IO-Count IO-Errors DNum HDevName000000 08.4F.0000000000010100.0000 HITACHI .OPEN-V .*8* 0102 1H Online Own 1005 0 0 dlmfdrv0 000001 08.5F.0000000000010100.0000 HITACHI .OPEN-V .*8* 0102 2H Online Own 1007 0 0 dlmfdrv0 000002 08.4F.0000000000010100.0001 HITACHI .OPEN-V .*8* 010A 1H Online Own 167 0 0 dlmfdrv1 000003 08.5F.0000000000010100.0001 HITACHI .OPEN-V .*8* 010A 2H Online Own 147 0 0 dlmfdrv1 EMC：检查PowerPath版本及注册码#powermt version #powermt check_registration 2、检查链路状态#powermt display 所有链路summary =optimal，没有DeadSymmetrix logical device count=0CLARiiON logical device count=13=- Host Bus Adapters - - I/O Paths - - Stats -# HW Path Summary Total Dead IO/Sec Q-IOs Errors=12 0/5/1/.0 optimal 13 0 - 0 013 0/4/2/.0 optimal 13 0 - 0 014 0/5/1/.0 optimal 13 0 - 0 015 0/4/2/.0 optimal 13 0 - 0 0检查每块盘的状态 # powermt display dev=all所有磁盘mode 和State均为aliveCLARiiON ID=* MISLogical device ID=* LUN 16state=alive; policy=CLAROpt; priority=0; queued-IOs=0Owner: default=SP A, current=SP A=- Host - - Stor - - I/O Path - - Stats -# HW Path I/O Paths Interf. Mode State Q-IOs Errors=12 0/5/1/.0.1.3 c12t1d3 SP A0 active alive 0 013 0/4/2/.0.1.3 c13t1d3 SP A0 active alive 0 014 0/5/1/.0.1.3 c14t1d3 SP B0 active alive 0 015 0/4/2/.0.1.3 c15t1d3 SP B0 active alive 0 0检查是否有Dead链路# powermt display dev=all | grep dead如果有Dead列，说明出现问题。# HW Path I/O Paths Interf. Mode State Q-IOs Errors=可以使用lspv去看若后面是none的就是没在使用yefeng602 at 2007-12-27 21:50:32 lsdev -Cc disk可以看到机器中所有的硬盘以及它们的状态yefeng602 at 2007-12-27 21:51:33 如果用lspv看的话，那么没有配置的硬盘就看不到了，lsdev -Cc disk能看到所有的硬盘第1章 功能概述1.1 Power Path 功能介绍 EMC PowerPath 软件用于增强存储环境中开放系统的运行性能，使服务器可以在较少的时间内完成更多的工作，并消除I/O通路中的单点故障。PowerPath通过均衡I/O请求并提供通路故障恢复功能，使服务器高效运行。PowerPath软件与 EMC Clarrion 或 EMC Symmetrix 存储系统一起提供智能I/O通路管理。PowerPath通过不断地智能均衡I/O，帮助提高服务器管理重的存储负载的能力。它自动配置多个通路，并随着负载的变化动态调整，优化性能。由于PowerPath可自动检测并恢复服务器与存储之间的通路故障，提高了EMC Clarrion 或 EMC Symmetrix存储系统的可用性。在通路被修复之后，PowerPath自动恢复在线通路，帮助减少计划内故障恢复服务。 在安装PowerPath之后，可以在服务器保持完全可用的情况下完成所有通路的维护、监视和配置工作，减少了计划内故障。普通的连线工作和存储处理器的替换工作可以不关机的情况下完成。 1.2 Power Path 体系架构介绍 PowerPath放置在主机服务器上，它在多个可用通路之间均衡I/O负载。应用程序向一个逻辑设备提交I/O操作，PowerPath负责选择通向物理设备的通路。见下图: 第2章 安装的配置步骤2.1 Navisphere agent的安装 1. 以 root用户登陆,首先更改光纤卡状态为pt2pt，执行以下命令更改当前两块光纤卡的状态： #rmdev -dl fscsi1 #chdev -l fcs1 -a init_link=pt2pt #rmdev -dl fscsi0 #chdev -l fcs0 -a init_link=pt2pt 接着执行以下命令： cfgmgr v ; 2. 加载Navisphere agent安装光盘， #mount v cdrfs -p r /dev/cd0 /cdrom 3. 将Navispehere agent安装文件拷贝到/usr/sys/inst.images目录中 #cp /cdrom/ NAVIAGNT.lpp /usr/sys/inst.images 4. 安装Agent #smitty installp选择Naviagent软件包; 系统重启时将自动启动agnet, 手工启动可用如下的命令 #/etc/rc.agent start 2.2 ODM库的安装 5. 把光盘里的EMC ODM包 EMC.AIX..tar ftp 到系统的/tmp目录； 6. 解压 #tar xvf EMC.AIX..tar 7. 安装EMC ODM #smitty installp 如果是HA环境（CLARIION），则选择以下三个软件包 EMC.CLARiiON.aix.rte EMC.CLARiiON.fcp.rte EMC.CLARiiON.ha.rte 如果是HA环境（Symmetrix），则选择以下三个软件包 EMC.Symmetrix.aix.rte EMC.Symmetrix.fcp.rte EMC.Symmetrix.ha.rte 如果没有HA环境(CLARIION)，则选择以下两个软件包 EMC.CLARiiON.aix.rte EMC.CLARiiON.fcp.rte 如果没有HA环境(Symmetrix)，则选择以下两个软件包 EMC.Symmetrix.aix.rte EMC.Symmetrix.fcp.rte 8 . 扫描磁盘设备 # cfgmgr v 检查磁盘设备 #lsdev Cc disk |more 2.3 PowerPath的安装 9 . root用户登陆，MOUNT POWERPATH软件包光盘 10.安装软件 #installp -aXgd . EMCpower 11. 确认EMCpower是否安装 #lslpp -L EMC* 输出应该包含以下rte： EMC.CLARiiON.ha.rte EMC.CLARiiON.fcp.rte 12. 注册POWERPATH #emcpreg install = EMC PowerPath Registration = Do you have a new registration key or keys to enter? n 输入y，按回车继续。 Enter the registration key(s) for your product(s),one per line, pressing Enter after each key.After typing all keys, press Enter again. Key (Enter if done): 输入powerpath注册码，然后按回车继续，成功后会显示以下提示信息。 1 key(s) successfully added. Key successfully installed. *license key在一张纸上，和设备及软件光盘介质一起到货* 2.4 主机识别PowerPath管理的设备 13. 执行powermt命令识别POWERPATH设备 #powermt config 14. 检查POWERPATH设备识别情况 #lsdev Cc disk |grep hdiskpower 可以看见类似如下的输出： hdiskpower0 Available 2V-08-01 PowerPath Device hdiskpower28 Available 2V-08-01 PowerPath Device 15 检查磁盘路径, 正常结果每个LUN有2个 path为alive状态 ;# powermt display dev=allPseudo name=hdiskpower0CLARiiON ID=CK200065100269 xdhLogical device ID=600601609E031B009A09A96C2CE7DB11 LUN 1state=alive; policy=CLAROpt; priority=0; queued-IOs=0Owner: default=SP A, current=SP A=- Host - - Stor - - I/O Path - - Stats -# HW Path I/O Paths Interf. Mode State Q-IOs Errors= 0 fscsi0 hdisk4 SP A1 active alive 0 0 1 fscsi1 hdisk7 SP B0 active alive 0 0 2.5 HACMP相关设置 如果AIX访问EMC磁盘，并且安装有PowerPath软件。需要对HACMP做如下设置。 2.5.1 EMC Symmetrix 如果是高端Symmetrix系列盘柜（DMX3,DMX），按如下方法² 执行如下命令增加配置：# /usr/sbin/cluster/utilities/clcustomdisk -c -tdisk/pseudo/power -Ndisk/pseudo/power -gSCSI3 -hSCSI_TUR -b/usr/lpp/EMC/Symmetrix/bin/emcpowerreset pfalse mMKDEV设置完成以后，通过命令 # odmget HACMPdisktype可以查看到以下信息 HACMPdisktype: PdDvLn = disk/pseudo/power ghostdisks = SCSI3 checkres = SCSI_TUR breakres = /usr/lpp/EMC/Symmetrix/bin/emcpowerreset parallel = false makedev = MKDEV reserved1 = reserved2 = reserved3 = 如果是并行环境，通过smit修改设置如下： 1） smitty hacmp - extended configuration - extended resource configuration - HACMP Extended resources configuration - configure custom disk methods - change/show Custom disk methods 2） 选择 disk/pseudo/power 3） 修改parallel为true.注：执行完成以上配置（2.5.1所有操作后），重新同步HACMP2.5.2 EMC Clariion 如果是中端Clariion系列，按如下方法² 执行如下命令行增加配置：# /usr/sbin/cluster/utilities/clcustomdisk -c -tdisk/pseudo/power -Ndisk/pseudo/power gSCSI3 -hSCSI_TUR -b/usr/lpp/EMC/CLARiiON/bin/emcpowerreset pfalse mMKDEV设置完成以后，通过命令”# odmget HACMPdisktype”可以查看到以下信息HACMPdisktype: PdDvLn = disk/pseudo/power ghostdisks = SCSI3 checkres = SCSI_TUR breakres = /usr/lpp/EMC/CLARiiON/bin/emcpowerreset parallel = false makedev = MKDEV reserved1 = reserved2 = reserved3 = 如果是并行环境，通过smit修改设置如下： 1） smitty hacmp - extended configuration - extended resource configuration - HACMP Extended resources configuration - configure custom disk methods - change/show Custom disk methods 2） 选择 disk/pseudo/power 3） 修改parallel为true.² 增加cfgscsi_id配置1） 上传cfgscsi_id到主机/usr/sbin目录下，并且授予cfgscsi_id执行权限2） 通过如下命令，增加HACMP资源/usr/es/sbin/cluster/utilities/claddcustom -t event -ncfgscsi_id -ISet correct scsi id on EMC CLARiiON pseudo devices. -v/usr/sbin/cfgscsi_id3）校验资源配置,执行”# odmget HACMPcustom”，得到如下显示结果HACMPcustom: name = cfgscsi_id type = event description = Set correct scsi id on EMC CLARiiON pseu