卡生命周期项目_运维手册.doc

1 23 卡生命周期卡生命周期 维护手册维护手册 上海理想信息产业 集团 有限公司上海理想信息产业 集团 有限公司 二零一零年七月二零一零年七月 2 23 目录 1引言引言 3 1 1编写目的 3 1 2适用范围 3 1 3定义 3 1 4参考资料 4 2客户基本信息客户基本信息 4 3系统说明系统说明 4 3 1产品 项目介绍 4 3 2产品 项目面向的用户 5 3 3产品应当遵循的标准或规范 5 3 4产品 项目范围 5 3 5网络拓扑图 6 3 6系统设备详细情况 6 4应用部署应用部署 6 5系统软件信息系统软件信息 7 6远程接入方式远程接入方式 7 7系统安装系统安装 7 8系统维护系统维护 8 9服务系统巡检 可选 服务系统巡检 可选 8 9 1主机巡检 8 9 2数据库巡检 9 9 3应用服务巡检 9 10应用日志应用日志 10 11系统常见问题及解决方法系统常见问题及解决方法 10 12应急情况预案应急情况预案 10 3 23 1 引言引言 1 1编写目的编写目的 本文档是对卡生命周期管理项目的运维内容进行说明 适用于项目成员 系统维护人 员 1 2适用范围适用范围 卡生命周期项目相关系统使用对象 包括 单位 企业信息化部 个客部卡中心 财务部 其他相关单位 系统 CRM 各卡平台 卡清分清算 ODS 卡生命周期管理系统 本项 目新建 过期 11888 卡脱机卡系统 本项目新建 卡业务范围 11888 卡 1 3定义定义 术语和缩写术语和缩写解释解释备注备注 CRM客户关系管理系统IBM UVC统一充值平台华为 UVC 外围统一充值外围消息处理 包 括卡充值 现金充值的处理 理想三部 ODS运营数据系统理想二部 清分清算卡交易情况的清分对账理想三部 脱机卡库管理过期的 11888 卡信息理想三部 卡生命周期又称财帐核对 主要体现卡 财帐平衡关系 现金平衡关 系 理想三部 4 23 1 4参考资料参考资料 参考文件参考文件备注备注 卡生命周期管理项目建设方案 20091112 V3 4 doc 卡生命周期管理项目 需求调研报告 20091204 doc 卡生命周期管理项目 需求调研报告 20091214 doc 2 客户基本信息客户基本信息 项目名称 项目编号项目经理 初验日期试运行期限 客户单位名称公司地址 客户代表客户电话 传真电子邮件 邮编 3 系统说明系统说明 3 1产品产品 项目介绍项目介绍 通过收集 分散在各系统中的电信卡流转数据 对 11888 卡生命周期数据 达到提供准确的财帐核对数据及统计报表的目的 通过优化各卡系统之间的关 系 从而减少人工管理环节 提高卡业务流程的规范性 具体目标如下 新建卡生命周期管理子系统 从 CRM 进销存系统 ODS 清分清算 UVC 过期 11888 卡脱机卡库 等平台采集数据 并进行数据处理 提取满足平衡公式所需数据 完成 11888 卡的进销存平衡公式 卡平台平衡公式 财务平衡公式以 5 23 及三者之间在卡的生命周期各个环节上的统计报表 新建 11888 卡脱机库平台 新建 11888 卡脱机库 对 11888 脱机卡的进行存储和管理 为 CRM 提 供 11888 脱机卡的余额查询功能 优化卡清分清算平台 为卡生命周期管理子系统提供使用各类卡为各计费网元的进行充值和 销账数据 增加退款信息 优化目前各卡平台和清分清算平台对账结算功 能 3 2产品产品 项目面向的用户项目面向的用户 本项目面象的用户 包括 企业信息化部 个客部卡中心 财务部 其他相关单位的运维操作人员 3 3产品产品 项目范围项目范围 规范现有的业务操作流程 在换卡操作 过期卡进收入 已过期卡未转收入 库存已销毁而平台 未删除等情况发生时减少人工控制的环节 通过系统自动形成财帐平衡报表 数据的采集通过系统自动实现 避免人工加减数据 系统通过数据处 理 并按照财务平衡公式进行计算 最终形成卡的财帐平衡报表 6 23 3 4网络拓扑图网络拓扑图 CRM ENI ODSUVC96088通讯卡 应用及接口服务器清分清算应用服务器 南汇IT机房 数据库文件服务器 机房共用存储 3 5系统设备详细情况系统设备详细情况 见 卡生命周期汇总硬 件20100720 xls 4 应用部署应用部署 主机名称主机名称服务器所在位置服务器所在位置IPIP 地址地址应用名称应用名称部署目录部署目录 Db 1Card cycle ws10 7 88 100 Card cycle ws T deploys files Db 1finaAccBalance10 7 88 100 finaAccBalance T deploys files Db 1Czph uvc10 7 88 100 Czph uvc T deploys files Db 1Czph ods10 7 88 100 Czph ods T deploys files Db 1Serv U10 7 88 100 Serv U E tools Db 1Czph total10 7 88 100 Czph total T deploys files 7 23 Db 2Card cycle ws10 7 88 101 Card cycle ws T deploys files Db 2finaAccBalance10 7 88 101 finaAccBalance T deploys files Db 2Czph uvc10 7 88 101 Czph uvc T deploys files Db 2Czph ods10 7 88 101 Czph ods T deploys files Db 2Serv U10 7 88 101 Serv U E tools Db 2Czph total10 7 88 101 Czph total T deploys files 说明 card cycle ws 提供给 crm 查询 删除的 webservice 接口 finaAccBalance 查询页面 报表展现及下载 czph ods crm 数据采集 czph uvc uvc 数据采集 czph total 报表数据分析 统计 serv u 管理 ftp 服务 5 系统软件信息系统软件信息 内容内容子项子项情况说明情况说明备注备注 操作系统版本Windows Server 2003 R2 企业版 64 位 操作系统打补丁情况 SP 2 安装目录C 盘 操作系统 系统管理员名字 口令登录名 Administrator 厂商 系统版本 安装目录 数据库系统 系统管理员名字 口令 系统版本 安装目录 系统管理员名字 口令 WEBLOGIC 系统 所提供的业务 厂商 系统版本 安装目录 其他系统 系统管理员名字 口令 8 23 6 远程接入方式远程接入方式 内容内容描述描述 接入软件Windows 自带远程桌面工具 IP 地址10 7 88 103 用户名administrator 口令admin 7 系统安装系统安装 在远程检查 VCS 集群状态 需要安装 Veritas Cluster Monitor 软件 见附件 vcs维护 doc 8 系统维护系统维护 8 1应用进程和模块巡检 每天一次 应用进程和模块巡检 每天一次 设备 名 服务器名业务软件业务端口周期HA 方式机器 IP 服务 IP Card cycle ws 全天主用 finaAccBalance 全天主用 Czph uvc 全天主用 Czph ods 全天主用 Serv U 全天主用 应用 数据 库服 务器 1 Db 1 Czph total 全天主用 10 7 88 100 10 7 88 103 Card cycle ws 全天备用 finaAccBalance 全天备用 Czph uvc 全天备用 Czph ods 全天备用 Serv U 全天备用 应用 数据 库服 务器 2 Db 2 Czph total 全天备用 10 7 88 101 10 7 88 103 9 23 8 1 1检查应用服务器检查应用服务器 1 进程进程 10 7 88 100 1 登陆 登陆 10 7 88 100 login administrator Password admin 2 查看服务 查看服务 查看 card cycle ws 接口进程 巡检周期 每天 第一步 使用 weblogic 登陆 http 10 7 88 103 8000 console 用户名 密码 weblogic 第二步 查看 server 运行状态 点击左功能树 lixiangdomain 部署查看右边界 面红色部分 活动和 ok 说明服务正常 10 23 查看 finaAccBalance 服务进程 巡检周期 每天 第一步 使用 weblogic 登陆 http 10 7 88 103 8000 console 用户名 密码 weblogic 第二步 查看 server 运行状态 点击左功能树 lixiangdomain 部署查看右边界 面红色部分 活动和 ok 说明服务正常 11 23 查看 czph ods 采集 crm 数据 接口进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq crm file import Service 服 务 验证其状态是否为已启动 注 已切换为备机的话该状态为已停止 查看 czph uvc 采集 uvc 数据 接口进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq uvc file import Service 服 12 23 务 验证其状态是否为已启动 注 已切换为备机的话该状态为已停止 查看 czph total 卡数据天 月统计 进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq totalt Service 服务 验证 其状态是否为已启动 注 已切换为备机的话该状态为已停止 13 23 查看 serv u ftp 服务进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 Serv U File Server 服务 验证其状 态是否为已启动 注 已切换为备机的话该状态为已停止 3 查看业务日志查看业务日志 其日志地址为 T logs 可分别查看log目录下所有子文件夹中的 log 文件 日志检查的内容包括 日志检查的内容包括 日志文件没有被删除 所有 log 文件中均没有 warning error 等异常提示信息 日志文件大小没有发生异常增长 注意 注意 在日志文件中看到类似在日志文件中看到类似 error warning 等等表示错误的告警字样需向理想等等表示错误的告警字样需向理想 报障报障 4 查看查看 cpu 和内存和内存 查看服务器 CPU 占用率 操作方法 通过 Windows 任务管理器 性能选项来检查 14 23 判断依据 CPU 占用率达到 80 时 报异常 具体数值根据各系统情况而 定 服务器内存状态 操作方法 通过 Windows 任务管理器来检查 判断依据 内存占用率达到 80 时 报异常 具体数值根据各系统情况而 定 5 查看存储空间查看存储空间 主要是 T 盘 注意 每天查看占用情况 当文件系统使用率超过 80 时 需联系项目组进 行日志数据清理 8 1 2检查应用服务器检查应用服务器 1 进程进程 10 7 88 101 1 登陆 登陆 10 7 88 101 login administrator Password admin 2 查看服务 查看服务 a 查看 card cycle ws 接口进程 巡检周期 每天 第一步 使用 weblogic 登陆 http 10 7 88 103 8000 console 用户名 密码 weblogic 15 23 第二步 查看 server 运行状态 点击左功能树 lixiangdomain 部署查看右边界 面红色部分 活动和 ok 说明服务正常 b 查看 finaAccBalance 服务进程 巡检周期 每天 第一步 使用 weblogic 登陆 http 10 7 88 103 8000 console 用户名 密码 weblogic 16 23 第二步 查看 server 运行状态 点击左功能树 lixiangdomain 部署查看右边界 面红色部分 活动和 ok 说明服务正常 c 查看 czph ods 采集 crm 数据 接口进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq crm file import Service 服 务 验证其状态是否为已启动 注 已切换为备机的话该状态为已停止 17 23 d 查看 czph uvc 采集 uvc 数据 接口进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq uvc file import Service 服 务 验证其状态是否为已启动 注 已切换为备机的话该状态为已停止 e 查看 czph total 卡数据天 月统计 进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 ksmzq totalt Service 服务 验证 18 23 其状态是否为已启动 注 已切换为备机的话该状态为已停止 f 查看 serv u ftp 服务进程 巡检周期 每天 在开始 运行框内输入 services msc 查找 Serv U File Server 服务 验证其状 态是否为已启动 注 已切换为备机的话该状态为已停止 19 23 3 查看业务日志查看业务日志 其日志地址为 T logs 可分别查看log目录下所有子文件夹中的 log 文件 日志检查的内容包括 日志检查的内容包括 日志文件没有被删除 所有 log 文件中均没有 warning error 等异常提示信息 日志文件大小没有发生异常增长 注意 注意 在日志文件中看到类似在日志文件中看到类似 error warning 等等表示错误的告警字样需向理想等等表示错误的告警字样需向理想 报障报障 4 查看查看 cpu 和内存和内存 查看服务器 CPU 占用率 操作方法 通过 Windows 任务管理器 性能选项来检查 判断依据 CPU 占用率达到 80 时 报异常 具体数值根据各系统情况而 定 服务器内存状态 操作方法 通过 Windows 任务管理器来检查 判断依据 内存占用率达到 80 时 报异常 具体数值根据各系统情况而 定 5 查看存储空间查看存储空间 主要是 T 盘 注意 每天查看占用情况 当文件系统使用率超过 80 时 需联系项目组进 行日志数据清理 8 2主机巡主机巡检检 1 巡检内容 主机名称巡检内容巡检目标巡检周期责任人备注 IBM AIX 主 机 系统错误报告如果有新的错误 分析是硬件原因还 是软件原因 周 20 23 有无 root 用户 邮件 如果有新的邮件 分析原因 周 查看 hacmp out 如果系统使用了 HACMP 软件 查 看该日志文件 周 查看文件系统 使用率 确保关键文件系统 的使用率不超过 80 周 查看逻辑卷有 无 stale 如果有卷 stale 需 要做同步 月 内存交换区是 否超过 70 如果超过 70 需 要扩大内存交换区 月 内存交换区是 否为物理内存 的 1 倍以上 如果内存交换区小 于物理内存大小 需要扩大内存交换 区 月 网络通讯测试主机和网关的 联通性 月 系统 dump 设 置是否正确 查看系统 dump 目 录是否为 var adm ras 月 查看 rootvg 是 否有镜像 确保 rootvg 有两块 磁盘 月 系统性能检测查看主机的 CPU MEM DIS K 性能 季度 其他方式 Hp 主机系统错误报告如果有新的错误 分析是硬件原因还 是软件原因 月 查看文件系统 使用率 确保关键文件系统 的使用率不超过 80 月 内存使用是否 超过 70 如果持续超过 70 需要扩大内 存或重启释放内存 周 CPU 占用率是 否超过 70 如果持续很长时间 超过 70 建议重 启 周 网络通讯测试主机和网关的 联通性 周