系统运维操作手册

第 页 共 页 xxxx 系统系统 运维操作手册运维操作手册 xxxx 公司 二零零九年十月 2 版本控制版本控制 版本号版本号日期日期参与人员参与人员更新说明更新说明 1 02011 06 06创建 分发控制分发控制 编号编号读者读者文档权限文档权限与文档的主要关系与文档的主要关系 1创建 修改 读取负责编制 修改 审核 2批准负责本文档的批准程序 3标准化审核作为本项目的标准化负责人 负 责对本文档进行标准化审核 4读取 5读取 3 1概述概述 5 2 2主机系统主机系统 6 2 1检查文件系统利用率 6 2 2查看系统硬件软件告警日志 6 2 3检查僵死或运行时间过长的进程 7 2 4检查系统 CPU 利用率 8 2 5检查系统内存利用率 8 2 6检查系统 IO 利用率 9 2 7检查系统交换量 10 2 8检查系统高可用性 HA 的使用状态 10 2 9清理过时的系统临时文件 11 2 10检查磁带库和磁带使用情况 11 2 11修改用户口令 12 2 12清洗磁带机 12 2 13检索操作系统日志 13 3系统启动与关闭系统启动与关闭 14 3 1系统的运行架构 14 3 2系统的启动 15 3 3系统的关闭 18 4系统部署系统部署 24 4 1生成部署包 24 4 2程序部署 28 5重要的系统参数配置重要的系统参数配置 41 5 1CONFIG PROPERTIES 41 5 2SPRING MISTASK XML 41 6日志查看日志查看 43 6 1WAS 日志 43 6 2DB2 日志 43 7查系统是否正确运行查系统是否正确运行 45 8系统管理员维护人员信息日志系统管理员维护人员信息日志 47 9查看表空间及附件硬盘的使用情况查看表空间及附件硬盘的使用情况 48 9 1DB2 表空间查看 48 9 2115 服务器附件文件占用情况 48 10服务停启顺序服务停启顺序 50 4 1 概述概述 本手册给出了湖南省移动公司的报账平台系统及报账平台外围 系统的运维操作细则 手册从主机系统 应用系统以及数据库系统 三个方面对任务项进行组织 对应章节包括第 Error Reference source not found 章报账平台主机系统 第 Error Reference source not found 章报账平台应用软件系统以及第 Error Reference source not found 章报账平台数据库系统 每个任务项中可能涉及的表格将 在第 5 章表单模板中统一给出 5 2 2 主机系统主机系统 2 1 检查文件系统利用率检查文件系统利用率 编 号名 称检查文件系统利用率 描 述此任务检查文件系统利用率不低于 85 或有大于 0 5G 以上的空闲空间 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 系统的正常运行应保证有足够的磁盘空间 文件系统被写满会导致 系统服务的中断 可以使用 df k 进行检查是否有文件系统利用率 高于 85 并且可用空间小于 500M 对于保存数据库数据文件所在的 磁盘空间和保存归档日志的应有更高的空闲空间 2 但也不可以盲目的扩展文件系统 因为目前 31 省所使用的文件系统 均不可以缩小 如果要回收空间只能删除重建 表单填写参见表单模板中的巡检单表格 2 2 查看系统硬件软件告警日志查看系统硬件软件告警日志 编 号名 称查看系统硬件软件告警日志 描 述此任务查看系统硬件软件告警日志 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 6 操作说明 以 root 运行 tail var adm messages 查看 如果系统写满了一个 message 文件会自动备份为 message 0 message 1 等 表单填写参见表单模板中的巡检单表格 2 3 检查僵死或运行时间过长的进程检查僵死或运行时间过长的进程 编 号名 称检查僵死或运行时间过长的进程 描 述此任务查看检查僵死或运行时间过长的进程 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 使用 ps ef grep applprd 和 ps ef grep oraprd 进行检查 运行时间超过 12 小时的绝大部分是需要注意的进程 2 而程序名为 defunct 的均为孤儿或僵死进程 3 由于 夜晚为非工作时间 因此运行超过 12 个小时的应用服务例如 form 服务的客户端进程 AIX 平台为 f60runm SUN 平台为 f60webmx 很可能是运行出错的进程 应可以 kill 掉 对于数据 库进程一般不采用在 UNIX 命令中 kill 的方法而是登陆到数据库使用 alter system kill session 的方法中止 该数据库进程 表单填写参见表单模板中的巡检单表格 7 2 4 检查系统检查系统 CPU 利用率利用率 编 号名 称检查系统 CPU 利用率 描 述此任务检查系统 CPU 利用率 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 prstat a solaris 2 psrinfo v CPU 状态 表单填写参见表单模板中的巡检单表格 2 5 检查系统内存利用率检查系统内存利用率 编 号名 称检查系统内存利用率 描 述此任务检查内存利用率 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 8 操作说明 1 solaris vmstat 查看 free 值 2 prtdiag v 表单填写参见表单模板中的巡检单表格 2 6 检查系统检查系统 IO 利用率利用率 编 号名 称检查系统 IO 利用率 描 述此任务检查 IO 利用率 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 solaris iostat 表单填写参见表单模板中的巡检单表格 9 2 7 检查系统交换量检查系统交换量 编 号名 称检查系统交换量 描 述此任务检查系统交换量 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 手动运行的方法如下 topas 2 swap l swap s solaris 表单填写参见表单模板中的巡检单表格 2 8 检查系统高可用性 检查系统高可用性 HA 的使用状态 的使用状态 编 号名 称检查系统高可用性 HA 的使用状态 描 述此任务检查系统高可用性 HA 的使用状态 操作角色 主机系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 webview 状 态 etc opt FJSVwvbs etc bin wvstat 2 CF 和心跳状 态 cftool 和 cftool r 3 SF 状态 sdtool s 4 CIP 状态 ciptool a 和 ciptool n 5 CRM 状态 etc opt FJSVcluster bin clgettree 6 RMS 状态 hvdisp a 1 10 表单填写参见表单模板中的巡检单表格 2 9 清理过时的系统临时文件清理过时的系统临时文件 编 号名 称清理过时的系统临时文件 描 述此任务清理过时的系统临时文件 操作角色 主机系统 管理员 所属管控类别巡检执行频度每周 操作说明 1 f60 dump 2 ORACLE HOME reports60 server cache 最好关闭服务 清理 3 APPLTMP 只有关闭服务后可以进行 表单填写参见表单模板中的巡检单表格 2 10 检查磁带库和磁带使用情况检查磁带库和磁带使用情况 编 号名 称检查磁带库和磁带使用情况 描 述此任务检查磁带库和磁带使用情况 操作角色 主机系统 管理员 所属管控类别巡检执行频度每周 11 操作说明 1 检查是否有足够的空间保存备份 2 磁带库运行中是否有错误出现 表单填写参见表单模板中的巡检单表格 2 11 修改用户口令修改用户口令 编 号名 称修改 UNIX 用户口令 描 述此项目修改用户口令 操作角色 主机系统 管理员 所属管控类别 用户帐号及 密码管理 执行频度每月 操作说明 1 修改 UNIX 密码步骤如下 letterbox username 1 passwd Enter login password 您的旧密码 New password 您的新密码 Re enter new password 您的新密码 passwd SYSTEM passwd successfully changed for username letterbox username 2 2 密码修改之后 必须及时通知系统管理员 修改过 UNIX 口令之后 需要通知需要知道口令的人员 表单填写参见表单模板中的用户帐号管理情况登记表 12 2 12 清洗磁带机清洗磁带机 编 号名 称清洗磁带机 描 述此任务将清洗磁带机清洗干净 操作角色 主机系统 管理员 所属管控类别备份管理执行频度每月 操作说明 用清洗带清洗磁带机 表单填写参见表单模板中的巡检单表格 2 13 检索操作系统日志检索操作系统日志 编 号名 称检索 AIX 操作系统日志 描 述此任务检索操作系统日志 操作角色 主机系统 管理员 所属管控类别日志管理执行频度每周 13 操作说明 1 查看用户登陆日志 查看用户登陆日志 在命令行输入命令 last 2 查看用户失败登陆日志 查看用户失败登陆日志 在命令行输入命令 进入日志所在目录 cd etc security 查看日志内容 vi failedlogin 3 查看查看 su 命令执行日志内容 命令执行日志内容 在命令行输入命令 进入日志所在目录 cd var adm 查看日志内容 vi sulog 4 查看查看 Auditor 文件操作日志文件操作日志 首先需要在系统中开启 audit 功能 会在系统中自动生成 etc security audit bin 文件 此处的 bin 指所有以 bin 开头的文件 进入日志所在目录 cd etc security audit 查看日志 vi bin 表单填写参见表单模板中 日志检索申请表 及 日志检索记录表 根据情况可能需要 备份介质访问登记表 14 3 系统启动与关闭系统启动与关闭 3 1 系统的运行架构系统的运行架构 3 2 系统的启动系统的启动 编 号名 称检查系统启动 描 述此任务查看系统登录以了解应用系统此时此刻的运行状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度系统更改 操作说明 第一步 第二步 挂接 NFS 第三步 启动其他软件 15 表单填写参见表单模板中的巡检单表格 输入用户名 root 和 root 的密码 点击 OK 选择 Global Cluster Service 选择 Cluster Admin 选择其中的任意一个节点 如 dbsvr 选择 rms 标签页 在 Tools 菜单中选择启动 启动后的状态如下图所示 3 3 系统的关闭系统的关闭 编 号名 称系统关闭 描 述此任务查看系统关闭 操作角色 应用系统 管理员 所属管控类别巡检执行频度系统更改 16 操作说明 表单填写参见表单模板中的巡检单表格 输入用户名 root 和 root 的密码 点击 OK 选择 Global Cluster Service 第一步 第二步 关闭其他软件 这样 应用就关闭完成了 17 选择 Cluster Admin 选择其中的任意一个节点 如 dbsvr 选择 rms 标签页 在 Tools 菜单中选择关闭 根据需要 选择 stop all Apps 关闭完成后 如下图所示 18 4 系统部署系统部署 4 1 生成部署包生成部署包 首先 需要更新 SVN 上的版本 在版本管理机器 F ProductSpecial Src1128 src 下 选定下面的文件 按右键 选择 update F ProductSpecial Src1128 WebRoot 下 选定下面的文件 按右键 选择 update 进入 Eclipse 查看项目属性 确实为 F ProductSpecial Src1128 的项目 在项目上按右键 选择 Refresh 在 Project 菜单 选择 Clean 待 Clean 完成后 在 File 菜单选择 Export 选择 War file 19 导出到一个文件夹 这样 部署包就生成了 4 2 程序部署程序部署 登录到 http 10 154 140 115 9060 ibm console 输入用户名 可输入 root 选择应用程序 企业应用程序 选定 eFinance war 点击停止 待停止完成后 选择 eFinance war 点击删除 点击确定 点击保存 点击安装 20 点击浏览 选定部署包 输入上下文根 eFinance 点击下一步 点击下一步 选定所有集群和服务器 选定 ent bpms 点击应用 选定 ent bpms 点击下一步 点击完成 点击保存 部署包已经部署完成 如下图所示 21 下一步的任务是启动应用程序 点击集群 选择 Cluster 点击停止 待选择 Cluster 点击启动 启动完成后 如下图所示 启动完成后 进行验证 http 10 154 140 116 eFinance 22 5 重要的系统参数配置重要的系统参数配置 23 6 日志查看日志查看 6 1 WAS 日志日志 编 号名 称检查 WAS 日志 描 述此任务查看WAS 日志状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 Wassvr 日志存放于 opt IBM WebSphere AppServer profiles AppSrv01 logs wassvr 2 dbsvr 日志存放于 opt IBM WebSphere AppServer profiles AppSrv01 logs dbsvr 表单填写参见表单模板中的巡检单表格 6 2 DB2 日志日志 编 号名 称检查 DB2 日志 描 述此任务查看DB2 日志状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 24 操作说明 1 Db2 日志存放与 dbsvr 服务器的 ef appinst sqllib db2dump 表单填写参见表单模板中的巡检单表格 25 7 查系统是否正确运行查系统是否正确运行 编 号名 称检查系统登录 描 述此任务查看系统登录以了解应用系统此时此刻的运行状况 操作角色 应用系统 管理员 所属管控类别巡检执行频度每日 操作说明 1 如果页面能正常显示 说明 115 服务器或 117 服务器运行