AIX高级系统管理培训教材

AIX高级系统管理培训教材第1页/共310页第一单元:问题定位收集足够的系统信息:lspv-listsphysicalvolumes,PVID,VGmembershiplscfg-providesinformationofsystemcomponentsprtconf-displayssystemconfigurationinformationlsvg-liststhevolumegroupslsps-displaysinformationaboutpagingspaceslsfs-givefilesysteminformationlsdev-providesdeviceinformationgetconf-displayssystemconfigurationinformationbootinfo-displayssystemconfigurationinformation(unsupported)snap-collectssystemdata第2页/共310页问题定位步骤

第3页/共310页问题定位步骤1.Identify:找出问题的线索,是什么问题?2.Define:用户觉得问题是什么?询问问题发生的情况3.收集系统信息:机器配置,报错,日志,OS状态等4.问题分析工具5.解决问题第4页/共310页问题分析工具第5页/共310页AIX5.2/5.3逻辑分区(LPAR)第6页/共310页逻辑分区(LPAR)LPAR:

逻辑分区,一台物理机器上可以同时运行多个操作系统DLPAR:

动态逻辑分区,可以动态的增加,移除资源而无须重起操作系统动态CuOD:

按需(时间,系统负载等)购买CPU资源,当需要使用附加的资源时,系统管理员可激活它们并动态地分配给相应的分区使用热备w/CuOD:

用未获得许可的好CPU自动和动态地替换坏的CPU第7页/共310页高级虚拟化(APV)第8页/共310页高级虚拟化(APV)概念1AdvancedPowerVirtulization:

支持虚拟I/O;

支持P5系统;Micro-Partition(微分区): 微分区功能: 继承主机(Mainframe)的技术; 对CPU和I/O设备进行虚拟化,使之能够由多个区共享;

第9页/共310页高级虚拟化(APV)概念2VirtualI/OServer(VIOS):

需要安装专门VIOS系统软件;

支持共享以太网:

物理网卡分配给VIOS 通过在工作分区上定义虚拟以太卡来共享物理网卡. 支持虚拟SCSI服务器:

物理SCSI卡分配给VIOS 通过在工作分区上定义虚拟SCSI卡来共享物理SCSI卡及其设备.第10页/共310页高级虚拟化(APV)概念3PartitionLoadManager(PLM):

分区负载管理器;

管理动态分区(DLPAR)上的CPU和内存资源; 支持AIX5.2和AIX5.3; 按照用户定义的策略,自动分配分区的资源; 支持独享和共享两种方式的分区;第11页/共310页虚拟以太网(AIX5.3及P5)

分区间通讯无需物理网卡,仅当对外通讯时才用;

虚拟网卡采用内存间的点对点连接实现; 类似高速以太网; 支持多种协议(IPv4,IPv6,ICMP); 无需APV许可,只要满足如下条件的设备即具备:

Power5系统; 运行AIX5.3或适当的LINUX版本;

HMC第12页/共310页第二单元:ODM本单元内容包括:

描述ODM的结构ODM命令行的使用

ODM在设备管理中的作用

重要的ODM文件第13页/共310页什么是ODM?ODM:ObjectDataManager

保存系统信息的数据库保存和维护物理设备和逻辑设备信息物理设备和逻辑设备在ODM中定义为目标每个目标具有不同的属性第14页/共310页ODM管理的数据第15页/共310页ODM的组成目标(不同种类设备):磁带,硬盘,串口等目标类描述符第16页/共310页ODM文件第17页/共310页ODM文件(续)预定义设备配置(Predefined):

描述所有支持的设备客户化定义设备配置(Customized):

描述所有连接在系统上的设备,它们已经被识别出来第18页/共310页设备配置概要系统启动时,配置管理器cfgmgr根据目标类Config_Rules决定设备配置顺序第19页/共310页设备配置管理器cfgmgr第20页/共310页ODM库位置和内容第21页/共310页ODM库位置和内容(续)为支持无盘、无数据或其它工作站，ODM库存放在以下3个位置：/etc/objrepos:包含客户化设备目标类和软件产品信息库的四个目标类的root部分。/usr/lib/objrepos:包含预定义设备目标类、smit菜单目标类、软件产品信息库的四个目标类的usr部分。本部分可在网络上共享。/usr/share/lib/objrepos:包含软件产品信息库的四个目标类的/usr/share部分。本部分可在网络上共享。第22页/共310页ODM目标类相互关系第23页/共310页ODM目标类相互关系(续)当设备要在AIX下定义时，它必须在ODM类PdDv中已定义。设备可通过cfgmgr或mkdev定义，两命令都通过驱动程序提供的definemethod在ODM类CuDv建立一个实例。Configuremethod则装载设备驱动程序并在/dev下建立设备的文件。设备通过自动配置后只有默认的属性，要进一步使用它必须修改相应的属性参数。第24页/共310页不由ODM管理的数据文件系统信息:由LVM和系统参数文件管理。用户/安全信息:由系统参数文件、文件系统结构数据和特定子系统管理。队列和队列设备：由系统参数文件和特定子系统管理。第25页/共310页设备配置和ODM复习第26页/共310页设备配置和ODM复习(问题)在AIX中，什么命令配置设备？哪个ODM类包含系统支持的所有设备？哪个ODM类包含系统配置的所有设备？哪些程序被装载到AIX系统核心中以便控制对设备的访问？如果已经配置了磁带机设备rmt1，那么应用通过什么特别文件对磁带进行操作？第27页/共310页ODM命令第28页/共310页修改属性值第29页/共310页使用odmchange修改属性值第30页/共310页ODM文件-软件产品数据第31页/共310页ODM文件-软件产品数据（续）第32页/共310页ODM文件-软件产品ODM类Lpp:软件产品信息,包含当前产品状态和描述Inventory:与软件产品有关的文件Product:软件产品及其依赖包的安装及升级产品 信息History:软件产品安装及其升级的历史信息第33页/共310页软件状态Applied仅PTF及升级前面版本保存在/usr/lpp/package_nameReject升级将恢复升级前版本Commit升级将删除保存的老版本Committed可以删除committed的软件不能恢复到以前版本Applying,Committing,Rejecting,Deintalling如果安装不成功：Installp–CSmitmaintain_softwareBroken清理失败删除软件并重新安装第34页/共310页预定义设备(PdDv)第35页/共310页预定义属性(PdAt)第36页/共310页客户化设备(CuDv)第37页/共310页客户化属性(CuAt)第38页/共310页其它设备目标类第39页/共310页第三单元:系统初始化1本单元内容包括:

描述引导过程中如何装载引导逻辑卷介绍引导逻辑卷的内容 解释引导过程中和系统中止时的LED代码

对不能引导的系统重新生成引导逻辑卷第40页/共310页AIX系统如何引导?第41页/共310页引导数据的装载第42页/共310页引导逻辑卷(hd5)的内容第43页/共310页如何修复损坏的引导逻辑卷(BLV)?第44页/共310页如何修复损坏的引导逻辑卷(步骤)?从光盘或备份磁带启动进入维护模式在进入维护模式时,选择“AccessaRootvg”一般修复使用bosboot–ad/dev/hdisk0如hd5不存在或损坏,则按如下步骤恢复:rmlvhd5删除损坏的BLVchpv–chdisk0清楚磁盘的引导记录mklv–yhd5–tboot–aerootvg1重建hd5bosboot–ad/dev/hdisk0重新生成引导信息bootlist–mnormal–o检查引导列表sync;sync执行两次保证数据刷新到磁盘shutdown–Fr重起AIX可以使用ipl_varyon–i检查引导记录状态第45页/共310页管理引导列表(bootlist)第46页/共310页管理引导列表(SMS)第47页/共310页管理引导列表(SMS)-按键第48页/共310页系统管理服务(SMS)第49页/共310页ServiceProcessor和报错第50页/共310页复习1.(对/错):要使用SMS的程序,必须启动了AIX2.当前RS/6000已经断电.AIX系统是装在hdisk1上,但bootlist是从hdisk0引导的,应该怎么修改使得系统可以从hdisk1上引导?3.机器已经起来,目前的命令提示符为“#”号,用什么命令显示当前的bootlist?什么命令修改bootlist?4.用什么命令来修复引导逻辑卷(BLV)?5.什么脚本控制引导顺序?第51页/共310页如何解决引导问题第52页/共310页启动不能引导的系统第53页/共310页引导进入维护模式第54页/共310页工作于维护模式第55页/共310页工作于维护模式1.AccessthisVolumeGroupandstartashell

可执行大部分修复工作,如:

修改忘记的密码 重建引导逻辑卷 修改损坏的bootlist2.AccessthisVolumeGroupandstartashellbeforemountingfilesystems

只能修复文件系统及其日志,然后再进入“1”第56页/共310页工作于维护模式(续)

修复文件系统及其日志:#logform-Vjfs/dev/hd8#fsck-y-Vjfs/dev/hd1#fsck-y-Vjfs/dev/hd2#fsck-y-Vjfs/dev/hd3#fsck-y-Vjfs/dev/hd4#fsck-y-Vjfs/dev/hd9var#fsck-y-Vjfs/dev/hd10opt#exit第57页/共310页系统引导问题查找第58页/共310页微码检查点和错误码第59页/共310页888闪烁第60页/共310页103错误第61页/共310页位置码:型号44P150第62页/共310页SCSI设备编址第63页/共310页SCSI设备编址(续)一块SCSI卡下的设备必须有不同的SCSI号SCSI总线必须在两端有终结器.一般SCSI卡内部已自带一个没有正常安装终结器会导致系统崩溃SCSI设备地址为0-6支持w-SCSI的卡可以有0-15(除去7)十五个地址SCSI地址7永远给SCSI卡使用,所以设备不能使用SCSI地址7第64页/共310页从网上获取微码第65页/共310页第四单元:系统初始化2本单元内容包括:

了解系统初始化过程“loadingthebootimage”到“bootcompletion”中的每一步内容

系统引导过程中设备是如何配置的分析和解决引导问题第66页/共310页AIX初始化第一部分第67页/共310页系统软件初始化-概况第68页/共310页rc.boot1第69页/共310页rc.boot2第一部分第70页/共310页rc.boot2第二部分第71页/共310页rc.boot3第一部分第72页/共310页rc.boot3第二部分第73页/共310页rc.boot总结第74页/共310页AIX初始化第二部分第75页/共310页配置管理器第76页/共310页Config_Rules目标类第77页/共310页用alog命令查询到的引导日志第78页/共310页/etc/inittab文件不要直接编辑/etc/inittab文件,用命令mkitab,chitab,rmitab第79页/共310页系统挂起状态系统挂起类型高优先级进程其它shdaemon做什么?监视系统执行进程的能力阀值达到后执行特定的动作动作向错误日志中记录错误在控制台上显示警告信息在控制台上执行恢复登陆执行一个命令自动重起系统第80页/共310页配置shdaemon第81页/共310页资源监控(RMC)基于两个概念:条件和应答将预先定义的应答与预先定义的条件联系起来,以便监控系统资源:例如:当文件系统/tmp使用率达到90%以后向系统管理员广播一条消息第82页/共310页RMC条件属性画面:General标签第83页/共310页RMC条件属性画面:

MonitoredRecources标签第84页/共310页RMC动作属性画面:General标签第85页/共310页RMC动作属性画面:

WheninEffect标签第86页/共310页/etc/inittab:需要了解的条目init:2:initdefault:brc::sysinit:/sbin/rc.boot3rc:2:wait:/etc/rcfbcheck:2:wait:/usr/sbin/fbchecksrcmstr:2:respawn:/usr/sbin/srcmstrcron:2:respawn:/usr/sbin/cronrctcpip:2:wait:/etc/rc.tcpiprcnfs:2:wait::/etc/rc.nfsqdaemon:2:wait:/usr/bin/startsrc-sqdaemondt:2:wait:/etc/rc.dttty0:2:off:/usr/sbin/getty/dev/tty1myid:2:once:/usr/local/bin/errlog.check第87页/共310页/etc/inittab:需要了解的条目init:2:initdefault:系统初始运行级别为多用户模式brc::sysinit:/sbin/rc.boot3初始化console设备前执行的进程,在所有运行级别中执行rc:2:wait:/etc/rc完成需要在引导过程中激活的工作:VG,对换区激活,文件系统mount等fbcheck:2:wait:/usr/sbin/fbcheck如果/etc/firstboot文件存在的话执行之srcmstr:2:respawn:/usr/sbin/srcmstr启动系统资源控制程序cron:2:respawn:/usr/sbin/cron程序的定时执行rctcpip:2:wait:/etc/rc.tcpiprcnfs:2:wait::/etc/rc.nfs网络相关的进程qdaemon:2:wait:/usr/bin/startsrc-sqdaemon打印管理dt:2:wait:/etc/rc.dt控制CDE桌面的启动tty0:2:off:/usr/sbin/getty/dev/tty1Init进程忽略此行myid:2:once:/usr/local/bin/errlog.check仅执行一次第88页/共310页系统引导问题分析第89页/共310页系统引导问题解决1JFSlog损坏的修复:#logform-Vjfs/dev/hd8#fsck-y-Vjfs/dev/hd1#fsck-y-Vjfs/dev/hd2#fsck-y-Vjfs/dev/hd3#fsck-y-Vjfs/dev/hd4#fsck-y-Vjfs/dev/hd9var#fsck-y-Vjfs/dev/hd10optexit第90页/共310页系统引导问题解决2文件系统超级块损坏的修复:#ddcount=1bs=4kskip=31seek=1if=/dev/hd4of=/dev/hd4Rootvg被锁的修复:#chvg-urootvgODM文件丢失的修复:

用mksysb备份恢复丢失的文件第91页/共310页系统引导问题解决3/usr,/var文件系统无法加载的修复:

用fsck检查和修复文件系统 检查硬件第92页/共310页第五单元:磁盘管理理论本单元内容包括:

介绍LVM信息的保存位置

解决ODM相关的LVM问题

建立镜象 介绍QUORUM机制

描述物理卷状态第93页/共310页LVM基本功能第94页/共310页LVM概念第95页/共310页卷组的限制第96页/共310页可扩充卷组-AIX5.3支持每个卷组1024个硬盘支持每个卷组4096个逻辑卷VG最大的PP个数依赖于VG而不是PVLV控制信息保存在VGDA中创建VG时无需指定最大值,所有值可在以后修改第97页/共310页不同类型卷组的限制第98页/共310页显示卷组的类型#lsvgmikevgVOLUMEGROUP:mike_svg

VGIDENTIFIER:000c91ad00004c00000000fd961161d9VGSTATE:active

PPSIZE:16megabyte(s)VGPERMISSION:read/write

TOTALPPs:1080(17280megabytes)MAXLVs:256

FREEPPs:1080(17280megabytes)LVs:0

USEDPPs:0(0megabytes)OPENLVs:0

QUORUM:2TOTALPVs:1

VGDESCRIPTORS:2STALEPVs:0

STALEPPs:0ACTIVEPVs:1

AUTOON:yesMAXPPsperVG:32512

MAXPVs:1024LTGsize(Dynamic):256kilobyte(s)

AUTOSYNC:no

可扩充卷组:1024大卷卷组:128普通卷组:32第99页/共310页镜象第100页/共310页条带化第101页/共310页采用RAID卡的镜象和条带化第102页/共310页RAID级别第103页/共310页LVM参数解释第104页/共310页LVM标识符第105页/共310页磁盘控制块中的LVM数据第106页/共310页OS中的LVM数据第107页/共310页VGDA中的内容第108页/共310页VGDA举例第109页/共310页逻辑卷控制块(LVCB)第110页/共310页LVM与ODM和VGDA交互第111页/共310页物理卷的ODM条目(1)第112页/共310页物理卷的ODM条目(2)第113页/共310页物理卷的ODM条目(3)第114页/共310页卷组的ODM条目(1)第115页/共310页卷组的ODM条目(2)第116页/共310页逻辑卷的ODM条目(1)第117页/共310页逻辑卷的ODM条目(2)第118页/共310页与ODM有关的LVM错误第119页/共310页解决ODM问题(1)第120页/共310页解决ODM问题(2)第121页/共310页镜象与QUORUM第122页/共310页镜象第123页/共310页镜象:Stale分区第124页/共310页

创建镜象LV:smitmklv第125页/共310页

镜象LV读写调度策略:顺序第126页/共310页

镜象LV读写调度策略:并行第127页/共310页

镜象写一致(MWC)第128页/共310页

向已有LV添加镜象:mklvcopy第129页/共310页镜象rootvg第130页/共310页镜象卷组:mirrorvg第131页/共310页VGDA计数第132页/共310页QUORUM=yes第133页/共310页nonQUORUM卷组第134页/共310页强行激活卷组:varyonvg-f第135页/共310页物理卷状态和quorum=yes第136页/共310页Quorum总结第137页/共310页第六单元:磁盘管理实践本单元内容包括:

在不同情形下更换硬盘

损坏卷组的修复

纠正磁盘更换造成的错误 导入/导出卷组

第138页/共310页磁盘更换技术第139页/共310页磁盘更换:入手第140页/共310页Procedure1:磁盘已镜象第141页/共310页Procedure2:磁盘仍工作第142页/共310页Procedure2:rootvg的特别步骤第143页/共310页Procedure3:磁盘完全损坏第144页/共310页Procedure4:rootvg完全损坏第145页/共310页Procedure5:非rootvg完全损坏第146页/共310页常见磁盘更换错误(1)第147页/共310页常见磁盘更换错误(2)第148页/共310页常见磁盘更换错误(3)第149页/共310页常见磁盘更换错误(4)第150页/共310页卷组导入和导出第151页/共310页导出一个卷组第152页/共310页导入一个卷组第153页/共310页Importvg与现有同名逻辑卷的关系第154页/共310页Importvg与现有同名文件系统的关系(1)第155页/共310页Importvg与现有同名文件系统的关系(2)第156页/共310页Importvg-L(1)第157页/共310页Importvg-L(2)第158页/共310页第七单元:卷组备份与恢复本单元内容包括:

建立、检查和恢复mksysb

用mksysb建立克隆

缩小文件系统和逻辑卷

alternatediskinstallation技术 备份与恢复非rootvg卷组 执行在线jfs或jfs2备份

第159页/共310页备份与恢复rootvg第160页/共310页系统备份mksysb第161页/共310页Mksysb磁带结构第162页/共310页MksysbCD或DVD三种类型备份个人系统备份：仅用于引导和安装备份的系统本身通用备份：用于引导和安装任何平台（rspc,rs6k,chrp)非引导VG备份： 仅包含VG数据（rootvg和非rootvg)

从AIX产品CD引导后可以安装系统 用于alt_disk_install的数据来源 可用restvg命令恢复非rootvg第163页/共310页备份CD或DVD要求的软硬件第164页/共310页mkcd命令mkcd命令将mksysb和savevg数据写入CD-R或DVD光盘支持ISO9660和UDF格式需要第三方软件来建立RockRidge文件系统和刻录备份数据第165页/共310页mkcd命令(续）保证三个文件系统有足够大空闲空间（容纳一张光盘）/mkcd/mksysb_image/mkcd/cd_fs/mkcd/cd_image第166页/共310页检查系统mksysb备份(1）第167页/共310页检查系统mksysb备份(2）第168页/共310页mksysb控制文件：bosinst.data第169页/共310页恢复mksysb(1)第170页/共310页恢复mksysb(2)第171页/共310页用mksysb磁带克隆系统第172页/共310页用mksysb磁带克隆系统(续)第173页/共310页修改rootvg的PP大小第174页/共310页减小rootvg中文件系统大小第175页/共310页AlternateDiskInstallation第176页/共310页Alternatemksysb磁盘安装（1）第177页/共310页Alternatemksysb磁盘安装（2）第178页/共310页Alternate磁盘rootvg克隆（1）第179页/共310页alternate磁盘rootvg克隆（2）第180页/共310页删除一个alt磁盘安装第181页/共310页备份与恢复非rootvg第182页/共310页备份非rootvg第183页/共310页Savevg/restvg控制文件：vgname.data第184页/共310页恢复非rootvg第185页/共310页在线jfs和jfs2备份；jfs2快照，VG快照第186页/共310页在线jfs备份第187页/共310页镜象拆分第188页/共310页被拆分镜象的重新加入第189页/共310页Jfs2快照映象对一jfs2文件系统，瞬时复本拷贝称为快照Jfs2文件系统快照可用于： 对某一时间点文件系统进行备份 提供访问某一时间点快照下来的文件及目录 备份可移动介质哪怕原始文件系统改变，克隆内容不会变化第190页/共310页Jfs2快照的建立backsnap-m/tmp/snapshot-ssize=16M-if/dev/rmt0/home/abc/test第191页/共310页使用Jfs2快照建立快照:snapshot-osnapfrom=/home/aaa/myfs/dev/mysnaplv

第192页/共310页镜象VG的快照支持第193页/共310页快照VG命令第194页/共310页第八单元:错误日志和syslogd本单元内容包括:

分析错误日志条目

用mksysb建立克隆

提供不同的错误警告手段 用syslogd记录系统信息

第195页/共310页错误日志本单元内容包括:

分析错误日志条目

用mksysb建立克隆

提供不同的错误警告手段 用syslogd记录系统信息

第196页/共310页错误记录组成第197页/共310页通过smit产生错误报告第198页/共310页Errpt命令第199页/共310页Errpt总结报告第200页/共310页Errpt-a详细报告第201页/共310页磁盘错误类型第202页/共310页LVM错误日志第203页/共310页维护错误日志第204页/共310页错误提示方法第205页/共310页自制错误提示第206页/共310页以ODM为基础的错误：errnotify第207页/共310页Syslogd后台进程第208页/共310页Syslogd配置举例第209页/共310页Syslogd配置(facilities)第210页/共310页Syslogd配置(信息级别)Emerg:紧急消息Alert:重要信息,如严重硬件错误Crit:严重信息,不是错误,如有可能是破解密码的登陆尝试Err:错误条件的信息Warning:不正确的,但是可恢复的条件Notice:重要的提示信息Info:对分析系统有用的信息Debug:调试信息,包括所有的信息None:指定的facility信息不记录第211页/共310页重定向系统消息到错误日志第212页/共310页定向错误消息到错误syslogd第213页/共310页第九单元:诊断本单元内容包括:

使用diag命令诊断硬件

显示不同诊断程序模式

在不支持diag的机器上使用SystemManagementServers

第214页/共310页诊断什么？第215页/共310页Diag命令第216页/共310页使用Diag（1）第217页/共310页使用Diag（2）第218页/共310页设备忙第219页/共310页诊断模式（1）第220页/共310页诊断模式（2）第221页/共310页Diag:使用TaskSelection第222页/共310页诊断日志第223页/共310页PCI：用SMS诊断第224页/共310页第十单元:AIX系统转储功能本单元内容包括:

系统转储（systemdump)的含义

确定与修改一级和二级转储设备

生成系统转储 执行snap命令 使用kdb命令检查系统转储

第225页/共310页使用系统转储第226页/共310页系统转储的产生第227页/共310页转储发生时第228页/共310页Sysdumpdev命令第229页/共310页独享转储设备（1）第230页/共310页独享转储设备（2）第231页/共310页Sysdumpdev命令第232页/共310页dumpcheck命令第233页/共310页dumpcheck的激活每天下午3点进行dump检查每天下午2点进行dump检查。建议在最忙的时候执行检查，以便得到准确的转储大小。向root发一个转储检查结果。第234页/共310页启动转储的方法第235页/共310页在TTY上启动转储第236页/共310页用smit产生转储第237页/共310页DUMP相关LED代码0C0Dump成功完成0C1Dump过程中出现一个I/O错0C2用户启动一个DUMP0C4Dump不成功，转储设备容量不足，部分转储可用0C5Dump无法开始。写dump设备时出错，如磁带无法加载等。0C6用户启动二级转储0C8转储功能关闭。未定义转储设备0C9系统启动严重错误转储0CC无法写主转储设备。切换到二级转储设备第238页/共310页拷贝系统DUMP第239页/共310页拷贝系统DUMP到其它设备第240页/共310页系统崩溃后自动重起第241页/共310页将转储发给服务商第242页/共310页使用kdb分析转储第243页/共310页第十一单元:性能和负载管理本单元内容包括:

系统性能基本概念

基本性能分析

管理系统负载 使用性能诊断工具（PDT）

第244页/共310页基本性能分析和负载管理第245页/共310页性能问题第246页/共310页理解负载第247页/共310页关键资源：四个瓶颈第248页/共310页寻找占用CPU的程序：psaux第249页/共310页找出高优先级进程：ps-elf第250页/共310页基本性能分析第251页/共310页监控CPU使用：sar-u第252页/共310页监控CPU使用：sar-u(AIX5.3)第253页/共310页硬件并行多线程（SMT）第254页/共310页监控内存使用:vmstat第255页/共310页监控磁盘I/O:iostat第256页/共310页topas第257页/共310页AIX性能工具第258页/共310页AIX工具：tprof第259页/共310页AIX工具：svmon第260页/共310页AIX工具：filemon第261页/共