上街网管机房设备改造暨搬迁工程项目建议书(修改)-0513调整.doc

中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 中国移动福建公司上街网管机房设备改造暨搬迁工程中国移动福建公司上街网管机房设备改造暨搬迁工程 项目建议书项目建议书 项目名称项目名称 中国移动福建公司中国移动福建公司 上街网管机房设备改造暨搬迁工程上街网管机房设备改造暨搬迁工程 项目管理单位 项目管理单位 省公司网管中心省公司网管中心 项目联系人 项目联系人 俞捷俞捷 联系人电话联系人电话工程建设单位工程建设单位 省公司工程建设中心省公司工程建设中心 开发管理单位开发管理单位 省公司网管中心省公司网管中心 维护支撑单位维护支撑单位 省公司网管中心省公司网管中心 申报日期申报日期 2010 年年 5 月月 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 i 目 录 一 工程概述 1 1 工程背景及现状 1 2 建设内容 1 3 工程建设规模 1 二 机房规划及配套 1 1 总体原则 1 2 机房规划 2 2 1 机位规划 2 2 2 上街五层南侧机房规划 3 3 配套方案 4 三 网络建设方案 5 1 主网络建设方案 5 1 1 网络层次 5 1 2 网络结构 5 1 3 设备配置清单 6 2 管理网络建设方案 7 2 1 管理网络设计概述 7 2 2 管理网络规划 8 2 3 网络设备管理网络设计 9 2 5 服务器管理网络设计 9 2 6 KVM 系统 9 2 7 设备配置清单 10 3 传输带宽需求 10 四 硬件基础架构建设方案 11 1 网管支撑系统现状 11 2 建设目标 11 3 初步实施范围及能力说明 12 4 系统部署方案 14 5 软硬件配置清单 15 五 搬迁方案 15 1 指导原则 15 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 ii 2 项目开展阶段 16 3 项目实施内容 16 4 搬迁风险管理简述 16 5 本次项目搬迁方案的建议 17 5 1 本次搬迁系统 17 6 网管网络搬迁方案 17 6 1 搬迁实施项目 17 6 2 优先保障能力需求 18 6 3 网络搬迁费用 19 7 网管机房基础设施建设 19 7 1 基础设施建设原则 19 7 2 综合布线系统的建设原则 19 六 远期目标 20 1 机房远期目标 20 2 网络远期目标 20 3 硬件基础架构远期目标 21 七 投资估算 22 八 工程进度安排 24 九 附件 24 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 1 一 工程概述 1 工程背景及现状 网管支撑机房位于电信器材一厂枢纽楼 4 5 层 目前一厂枢纽大楼电源 系统较为紧张 同时网管机房已经不能满足业务快速发展带来的空间需求 空间不足 目前一厂四五楼网管机房 安装有 157 机架 300 余台设备 机房使用空间达 95 剩余空间不足以满足后续网络的发展需求 配套电源不足 目前负荷采样数据是 1600A 电池充电电流 660A 考虑 到夏季的空调负荷将比冬季增加 20 夏季总负荷将达 2420A 变压器负荷达 到 83 8 以上 油机负荷达到 87 7 以上 由于以上原因 导致 08 09 年部分项目硬件设备无法上电 网管系统硬 件处于超负荷状态 根据公司总体规划上街局楼 5 层将做为省网管支撑系统机 房 在此背景下 福建公司结合网管支撑系统实际情况 提出了中国移动福建 公司网管机房搬迁工程的建设项目 解决当前设备上电上架问题 同时缓解一 厂枢纽楼供电紧张的局面 2 建设内容 根据总体规划 上街五楼机房将作为网管支撑系统设备机房 考虑到近期 网管工程需要 本期先启用上街五层南面机房 机房面积约 509 8 平方米 主 要放置省级网管设备和其他系统的扩容设备 本期工程将涉及到以下几个方面 1 机房规划及配套设备建设 功能区划分 配套电源等设备建设 2 网络建设 进行上街节点网管网络搭建 保障网管系统稳定运行 支撑网管设备远程集中维护管理 3 硬件基础架构建设 基于报废替换设备 引入云计算技术进行网管 系统硬件资源池的搭建 为后续整体硬件平台向云环境演进奠定坚实基础 4 主设备搬迁 涉及电子运维 话务网管 综合监控 客服支持 数 据集市 网优平台等 28 套系统 3 工程建设规模 中国移动福建公司上街网管机房设备改造暨搬迁工程项目总投资约为 1641 万元人民币 二 机房规划及配套 1 总体原则 1 前瞻性及灵活性 本机房的规划及配套电源设计应立足于业务系统长远的发展需求 统一规 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 2 划 统一布局 为系统的进一步扩容预留充足的配套资源 2 高可靠性 配套电源及机房空调设备的持续高可用性是保障系统高效 稳定运行必不 可缺的前提条件 3 先进性及成熟性 在遵循综合大楼机房统一建设原则的基础上 应尽量将先进的 成熟的技 术应用于机房工艺设计中 2 机房规划 2 1 机位规划 上街 5F 机房是规划作为网管业务机房 根据网管类设备尺寸规格特点 具体规划为 设备机架深度规划为 1200mm 列间间隔为 1200mm 同时机房 两侧走道至少保留 1200mm 宽度 机架排列方式为面对面 背对背方式 有利 于空调送风气流的合理分布 具体机位布置如下图所示 图图 2 12 1 上街上街 5F5F 机房平面图机房平面图 根据南北机房的装机面积以及本期建设的需求规模 本期工程启用上街 5F 南侧机房 5F 北侧机房作为备用机房 具体规划如下 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 3 表表 2 12 1 上街上街 5F5F 机房规划表机房规划表 区域区域位置位置 面积面积 平方米 平方米 最多可放最多可放 置机架数置机架数 本期建设计本期建设计 划放置机架划放置机架 数数 网管设备区南侧机房509 8152125 网管设备预留区北侧机房427 21100 合计机架数252125 图图 2 22 2 上街上街 5F5F 南侧网管机房平面规划图南侧网管机房平面规划图 2 2 上街五层南侧机房规划 上街五层南机房规划面积约 500 平方米 机房按功能划分为 操作维护室 配套区 空调及电源设备区域 和主机房 其中 操作维护室占用约 50 平方 米 配套区占用约 90 平方米 各区域具体功能详细描述如下 1 维护操作室 该区域面积约 50 平方米 目前考虑摆放 14 个工作席位 该区域主要用于机房管理维护人员以及厂家 集成商等调试使用 建议该 区域同机房间做隔断 2 配套区 该区域面积约 90 平方米 主要安装楼层配电屏 空调配电屏 UPS 分配 屏和空调设备等 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 4 3 主机房 主机房区域按照设备的业功能种类逻辑上分为以下几个子区域 存储 备 份区 网络设备区 省级网管设备区和统一采集区设备区 各区域情况详见下表 表表 2 22 2 各区域设备情况表各区域设备情况表 面积面积机架列数机架列数机架总数机架总数 序号序号区域区域 平方米 平方米 列列 架架 1存储 备份子区域 333 2网络设备子区域 112 3省级网管设备子区域 251 4统一采集区设备子区域 256 5合计机架数合计机架数8152 6维护操作室50 7配套区70 a 存储 备份子区域 该区域规划安装 3 列 F G H 列 标准机柜 共 33 架机架位 主要放 置 5 层南北机房存储以及备份设备 另外新增 1 架 ODF 及 1 架 DDF 为网管 网络的快速上线提供便利 b 网络设备子区域 该区域规划安装 1 列 E 列 标准机柜 共 12 架机架位 主要用于网络 的管理 包括网络管理 安全管理等 主要放置各种管理设备和核心及接入交 换机 c 省级网管设备子区域 该区域规划安装 3 列 C D 列 标准机柜 共 51 架机架位 主要放置省 级网管设备 d 统一采集区设备子区域 该区域规划安装 1 列 A B 列 标准机柜 共 56 架机架位 主要放置 统一采集区设备 3 配套方案 本项目仅考虑以下内容 机房尾纤槽道设计 新增 12 台 100A 3P 列头柜安装设计 列头柜监控 动力环境监控 本机房其他配套设施建设由 2009 年闽侯上街机房楼配套工程项目负责 具体配套要求详见 机房配套要求 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 5 三 网络建设方案 1 主网络建设方案 1 1 网络层次 在网络总体设计上 保留原有的网络层次不变 分为以下几个层次 核心交换层 处于网络的中心 负责网管机房内部数据的交换处理 这里利用了新增的核心设备 保证了交换的效率 使用两台交换机互 为备份 保证网管机房核心交换及出口的可靠性 分布交换层 位于各个业务模块网络区域的中心 各使用若干台交换 机互连 系统接入层 由业务系统自带接入设备或直接接入分布交换层 1 2 网络结构 目前网管网络采用 2 台高性能三层设备 CISCO 7606 作为网络核心设备 各业务系统区通过各自的分布层交换机接入到这两台核心设备上 搬迁前网络拓扑如下图所示 图图 3 13 1 网管网络组网拓扑图 工程前 网管网络组网拓扑图 工程前 本期工程在一厂新增两台三层中端交换机 48 个以太网端口和 48 个 SFP 光口 兼容现有的 Cisco PVST 生成树协议 替换原有核心 7606A B 将腾 出的 7606A B 交换机搬至上街作为上街机房核心交换机 同时将一厂部分网络 设备搬迁至上街机房与新增的网络设备一同搭建起上街机房网络平台 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 6 其中利旧 4 台 4507 交换机 4 台 ASA5550 及 2 台 MA5200F 等网络设备 本次搬迁原有核心生产区部分系统未搬迁 原有核心交换机 3550 不能搬迁至 上街 因此新增 2 台三层高端交换机 240 个以太网端口和 96 个 SFP 光口 兼容现有的 Cisco PVST 生成树协议 作为上街网管支撑系统机房核心生产区 核心交换机 由于原有数据网管区交换机 5624P 端口数量不足且不能增加端口 板因此新增 4 台三层中端交换机 48 个以太网端口和 48 个 SFP 光口 兼容现 有的 Cisco PVST 生成树协议 供内 外联 DMZ 使用 防火墙立旧原有 2 台 Juniper SSG 550 设备 新增电源模块 PIM 模块 光口模块 作为互联网接口 区防火墙使用 为了便于网管终端的接入 需新增 2 台二层低端交换机 48 个以太网端口和 2 个 SFP 光口 具体搬迁步骤祥见第 18 页搬迁方案描述 搬迁后上街网络拓扑如下图所示 图图 3 23 2 网管网络组网拓扑图 工程后 网管网络组网拓扑图 工程后 1 3 设备配置清单 表表 3 13 1 网络设备清单网络设备清单 序序 号号 配置配置 数数 量量 单价单价 万元万元 分项总价分项总价 万元万元 备注备注 1三层中端交换机6 240 000 00 1 440 000 00 单台配置 48 个以太 网端口和 48 个 SFP 光口 兼容现有的 Cisco PVST 生成树 协议 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 7 2 CAT4507 引擎升级 4 110 000 00 440 000 00 主设备立旧 对其双 引擎升级 3三层高端交换机2 750 000 00 1 500 000 00 单台配置 240 个以 太网端口和 96 个 SFP 光口 兼容现有 的 Cisco PVST 生成 树协议 4二层低端交换机2 10 000 00 20 000 00 单台配置 48 个以太 网端口和 2 个 SFP 光口 JUNIPER SSG550 设备主体 立旧 SSG PS AC 电源 模块 4 5 000 00 20 000 00 JXU 6GE SFP S PIM 模块 4 15 000 00 60 000 00 5 JX SFP 1GE SX 光口模块 24 2 500 00 60 000 00 6合计 3 540 000 00 2 管理网络建设方案 2 1 管理网络设计概述 中国移动福建公司网管中心机房平台已承载了省级话务网管 电子运维 网优支撑 网络数据综合分析 客户投诉支撑等多类网管应用 随着主机存储 规模的扩大 管理难度和强度也随着增大 目前的管理手段已不能满足当前网 管的需要 为降低中国移动福建公司网管中心机房主机和存储设备的管理工作负荷 加强规范化管理 贯彻系统标准化安装的原则 提高解决系统故障的效率 提 出该方案 从网管系统的管理需求来看 建议在现有业务网络的基础上通过增加交换 机建立一个专门用来管理的网络 管理网络由 2 台交换机构成冗余网络 该网 络的安全性通过主交换机的安全策略实现 如下图所示 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 8 Console交换机 Cyclades ACS32 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 一厂 网络设备 4F 5F 6F 7F 华为 以太网交换机 华为 以太网交换机 Console交换机 Cyclades ACS32 上街 网络设备 上街 网络设备 上街 网络设备 5F 华为 以太网交换机 华为 以太网交换机 Console交换机 Cyclades ACS32 一厂和上街之间的专线 一厂和上街之间的专线 一一厂厂带带外外网网络络管管理理系系统统 上上街街带带外外网网络络管管理理系系统统 远程接入区 KVM数字切换设备 已有 KVM数字切换设备 已有 新增设备 二层连接三层连接备份连接 利旧设备 图图 3 23 2 管理网络设计结构图管理网络设计结构图 管理网络的优点如下 操作简便 可远程操作 不需额外工作平台 可对机器远程操作 方便维护接入 监控方便 可以实时监控 Console 信息 无需额外的电脑对 Console 信息进 行记录 方便监控 效率高 可远程操作机器 无需额外的时间和工具 效率大大提高 提高分析准确度 缩短故障恢复时间 全面记录故障信息 有利于故障分析与定位 增加分析度准确性 降低故障分析时间 缩短故障恢复时间 2 2 管理网络规划 统一规划管理网络接入方式 方便维护及故障分析和处理 主要采用 IPConsole 和 KVM 管理方式 网络设备接入控制台服务器交换机 方便统一管理 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 9 UNIX 主机采用 IPConsole 方案统一管理 PC 服务器采用 KVM 方案进行管理 2 3 网络设备管理网络设计 对于一厂未搬迁的需要纳入管理的网络交换机 其 console 口统计如下 console口统计表 x ls 对于上街机房内需要纳入管理的网络交换机 其 console 口统计如下 console口统计表1 xls 根据统计出来的数量 搬迁完成后上街总共需要 63 根 5 类双绞线 一厂 总共需要 21 根 5 类双绞线 采用 Console 服务器 需要在上街部署 3 台 32 口的服务器 在一厂每个机房部署 2 台 16 口的服务器 合计 4 台 建议采 用业务网络的模式 在网络设备列头机柜部署管理网络接口 2 5 服务器管理网络设计 从网管系统的管理需求来看 建议建立一个专门用来管理的网络 管理网 络由 2 台交换机构成冗余网络 对于主机和 SAN 环境管理网络的设计 涉及 292 台设备总共需要 395 个 IP 地址和 214 根网线 根据统计出来的网线数量以及这些服务器部署在上街机房的位置以及在每 个列头柜部署管理网络的原则 我们可以计算出所需的 48 口会聚交换机的数 量为 8 个 如下 表表 3 23 2 服务器管理网络所需交换机数量服务器管理网络所需交换机数量 机柜位置放置的设备端口总数列头柜中配置的交换机数量 A 列4A 系统 OMC 服务器351 B 列HP 服务器852 C 列SUN 服务器331 D 列SUN 服务器622 G 列存储设备231 H 列新增存储设备 301 2 6 KVM 系统 本工程对远端服务器设备的监控采用 KVM 方案 提供对网管机房设备的 本地机架式或远程 IP 接入和控制 KVM 设备同时支持基于所有设备的数字和 模拟连接 根据现有设备统计出来总共需要 59 根 KVM 联线 具体统计如下 表所示 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 10 KVM网络所需联线统 计表 xls 2 7 设备配置清单 表表 3 3 管理网络设备清单管理网络设备清单 序号序号配置配置数量数量单价单价分项总价分项总价备注备注 1三层低端交换机8 6 250 00 50 000 00 48 口 2 Console 服务器 16 口 4 32 500 00 130 000 00 3 Console 服务器 32 口 3 40 000 00 120 000 00 console 管理 4小计一 300 000 00 5KVM 联线费用1 60 000 00 60 000 00 6小计二 60 000 00 7合计 360 000 00 3 传输带宽需求 目前福建公司的网管核心节点在一厂 为满足今后上街机房各系统接入网 络的需求 需要在该局楼建设新的网管节点 到 2010 年时候上街承载的业务 所有网元的网管信息与其网管系统 包括统一采集区系统 省级网管系统 采 集机 的数据交互上街网管链路需求为网元部分 110 芯系统 终端部分 44 芯 系统 互联部分 8 芯系统 与一厂互联有 10 路 2 兆专线 当前网管对 MDCN 的传输带宽需求 峰值已达到 240M 由于带宽限 制 为避免网络阻塞故障 较大流量应用已作了停用和限流措施 实 际带宽需求已达到 1G 同时考虑到新的应用对带宽的非线性增长需 求 网管上街出口带宽需求在 2010 年底将达到 3G 网管上街机房带宽 和链路需求 xls 网管搬迁MDCN出口 流量需求统计 xls 搬迁临时传输需求 网管服务器从一厂搬迁到上街的过程中存在较大 的带宽需求 为保证平滑搬迁 一方面需要从一厂打通二层的 trunk 到上街 需要 MDCN 提供 2 3G 带宽 另一方面需要临时搭建光纤传 输网络满足 4G 专线带宽需求 专线需求 需要申请 4 条从一厂到上街的电口传输专线 2 主 2 备 每条传输需满足 100M 带宽需求 福州马尾和厦门马巷分别到上街需 要开通的 2 对 155M 光纤专线 用于采集处理设备和上街数据库服务 器之间连接 在上街要开通 8 条 2 兆专线至一厂与 5 楼 2 套诺西统一 采集区涉及网元路由器相 开通 2 条从一厂到上街的电口传输专线 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 11 一主一备 带宽满足 155 兆供一厂的 2960 跟上街的网关 3560 之 间的通信使用 以上所需带宽已在 MDCN 四期项目建设 预计 6 月份投入使用 四 硬件基础架构建设方案 1 网管支撑系统现状 目前网管支撑网有 36 套支撑系统 共 153 台 PC 服务器 80 台 UNIX 服 务器 14 台存储 60 台网络设备 网管网络主要承载于 DCN 网络 大部分系 统实现了存储 备份的集中化 在这样一个庞大的基础架构上运行着数十个关 键的网管应用 随着系统规模的不断扩大与系统复杂度的日益提高 对这些网 管应用如何进行有效管理 已经成为网管部门逐渐关心的一个问题 目前采用 集中化管理的网管系统基础架构主要在以下方面存在不足 1 主机资源利用率不均衡 每个应用使用独立的物理硬件 由于系统与 硬件绑定 每个系统都需要按照其峰值业务量进行主机的配置 这可能导致在 大部分时间段内许多资源都处于闲置状态 2 系统上线 扩容周期长 每次系统上线和扩容都会需要硬件资源 而 硬件资源又是按照项目采购独立进行的 不能直接利用已有空闲的资源 因此 上线或者扩容的周期往往很长 这对于系统安全稳定的运行是一个挑战 在新 设备进场之前 已有设备可能已无法满足需求并导致系统响应慢甚至宕机等事 故 3 运维管理复杂 目前在系统运维工作中存在着大量的人工工作 比如 操作系统与软件安装 存储划分及逻辑卷管理 网络配置等等 这些人工工作 一方面效率不高 另一方面也容易出错 导致各系统配置不尽相同 不利于日 后的统一管理 基于这些不足 移动网管系统迫切的需要一套有效的资源管理和调度平台 来实现系统内对资源的统一调度 统一管理 2 建设目标 为了实现对资源的统一调度及管理 建议采用基础架构层面的云计算平台 统一规划资源池平台 将更多的服务器和业务系统纳入资源池中 资源池规划分为主机资源池和存储资源池 主机资源池规划 建立 PC 服务器资源池 承载上层业务的应用 建立小型机刀片服务器资源池 承载具有大量数据运算采集类服 务 建立机架式小型机服务器资源池 承载基于数据库应用的服务 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 12 存储资源池规划 IO 密集型 面向数据库应用 由高端存储阵列提供 高吞吐量 面向文件服务 由低端存储阵列提供 本期基于替换设备并引入云计算技术进行网管支撑系统硬件资源池的搭建 实现资源池的统一管理和监控 后续新增硬件逐步纳入资源池管理 定期观测 资源池使用情况 根据预警进行扩容工作 现有应用及后续新增应用系统将陆 续迁移部署在资源池上 本次搬迁 基于替换设备引入云计算技术 采用 Ops Center 统一管理平台 进行网管支撑系统硬件资源池的搭建 通过虚拟化实现服务器资源池和存储资 源池的有效整合 Ops Center 统一管理平台 提供如下支持能力 完全支持网管中心现有的服务器资源 可以管理物理和虚拟服务器 对 Sun 的服务器提供更细致的管理服务 如监视预设的关键属性 提前预警 自动分发更新和定制的补丁管理等 提升运维效率 3 初步实施范围及能力说明 本次实施的硬件设备基于替换设备并引入云计算技术进行网管支撑系统硬 件资源池的搭建 初步实现服务器虚拟化 包括小型机和 X86 服务器 及存 储虚拟化 鉴于当前网络结构可以满足今后几年网络发展的需求 且网络虚拟 化改造复杂度高 成本大 本期暂缓考虑网络虚拟化建设 3 1 小型机虚拟化 一方面 考虑目前网管平台是以 SUN 的小型机为主 当前小型机的跨平 台云管理在技术还无法实现 管理服务器采用 SUN 的小型机为宜 另一方面 网管 2 台 HP N4000 小型机已经达到报废年限 需要更换 综合以上两点因素 并考虑小型机的处理能力及可扩容的潜力 建议使用 2 台 Sun M8000 小型机来 替换原有已过报废的 2 台 N4000 小型机 并承载其业务系统即数据集市数据 库 同时可以作为网管后台业务的小型机资源池 建议 2 台 Sun M8000 各配置 8 个 CPU TPMC 值大约为 3562195 CPU 满配时 1 台 M8000 的 TPMC 为 3562195 如下表所示 表表 4 1 小型机性能列表小型机性能列表 设备 台 设备 台 M8000M8000 处理器配置处理器配置16 4 核处理器 共 64 核 主频 2 52Ghz 内存配置内存配置最大 1024GB 单机最大带宽 单机最大带宽 GB sGB s 245 单机最大内存带宽 单机最大内存带宽 GB sGB s 184 单机最大单机最大 I OI O 带宽 带宽 GB sGB s 61 单机最大单机最大 PCIPCI 插槽数量插槽数量 112 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 13 满配满配 TPMCTPMC 总部集采备案值 总部集采备案值 估算 估算 3 562 1953 562 195 耗电量耗电量 10500w 服务器重量 服务器重量 kgkg 1020 kg 3 2 X86 服务器虚拟化 目前数据网管采集机共有 18 台机架式 x86 服务器 具体的清单如下表所 示 无法满足采集系统快速接入和灵活扩展的需求 且这批设备即将报废 因此建议搭建具有处理密度高 部署灵活等特点的 X86 服务器资源池 本次 需采购 14 台刀片服务器用以替换这些机架式服务器 组成 x86 服务器资源池 用来承载网管前台业务系统 包括原有设备上承载的采集系统 表表 4 2 x86 服务器清单服务器清单 序号序号设备名称设备名称设备用途设备用途备注备注 1SJLP1000APatrol Console 服务器 2SJV490B内网综合采集机 3SJV490C网管网 2 采集机 4FJFZ PS SV01 NMS专线 wlan 采集机 5FJFZ PS SV02 NMSCMNET 城域网 DNS 采集机公网采集机 6N2000ServerMDCN 采集机 7bmcconsoleIP 承载网软交换 CE 采集机 8FJDP MAS01MAS 采集机 1NT 系统 9FJDP MAS02MAS 采集机 2NT 系统 10FJ TEST采集测试机 11FJDPIPIP 承载网采集机 12FJDPNW01内网综合采集机 1 13FJDPNW02内网综合采集机 2 14FJDPNW03内网综合采集机 3 15FJDPNW04内网综合采集机 4 16FJDPll 流量采集机 大客户自服务主 机 17FJDPWW01外网综合采集机 1 18FJDPWW02外网综合采集机 2 另外考虑到还有 9 个报废的服务器设备 还需新购 6 台刀片服务器 组成 第二组的 x86 服务器资源池 用来承载这些报废设备上的原有业务系统 3 3 存储虚拟化 存储虚拟化采用 Storage Foundation 系统 对存储设备 DMX4 进行卷的管 理规划 按照一定的策略把所有磁盘阵列的裸盘组织成 LUN 由 LUN 组成一 个或者多个存储池 供部署使用 服务器均采用本地硬盘作为系统盘 外接 LUN 盘用作数据盘 对于 SUN 小型机 外接 LUN 被识别为物理盘 再分配给子 zone 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 14 图图 4 1 存储虚拟化组网示意图存储虚拟化组网示意图 本期利用现有的 1 台 EMC DMX4 存储 通过赛门铁克卷管理软件的特性 即可实现 本期新购 2 台 M8000 设备 因此采购此设备的 Storage Foundation 软件即 可实现存储虚拟化 服务器与存储设备通过 SAN 网相连 通过 Storage Foundation 软件对存储 设备进行 LUN 管理 实现存储虚拟化 4 系统部署方案 硬件基础架构部署示意图如下 图图 4 2 硬件基础架构部署示意图硬件基础架构部署示意图 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 15 对于 x86 服务器 需要部署 VMware ESX 作为虚拟化引擎 对于小型机 SUN M8000 部署最新的 Solaris 10 操作系统并且内置有 Solaris Containers 虚拟化支持 对于存储资源池 通过 Storage Foundation 对现有存储设备 EMC DMX4 管 理 实现存储虚拟化 5 软硬件配置清单 为了建设虚拟化架构平台 除了上面所说的对被管理软硬件的选型工作之 外 还需要部署相应的管理软件及硬件 表表 4 3 软件需求清单软件需求清单 产品类别产品类别描述描述数量数量备注备注 VMware ESX虚拟化引擎160 核 Sun Ops center 2 5管理软件85 个客户端 Veritas Storage Foundation统一存储管理软件2 套7 24 支持服务 表表 4 4 硬件需求清单硬件需求清单 类型类型产品产品描述描述数量数量 Sun 小型机Sun M8000小型机资源池 2 刀片服务器 双路四核 16G 内 存 带 14 刀片 X86 服务器资源池 14 X86 服务 器刀片服务器 双路四核 16G 内 存 带 6 刀片 X86 服务器资源池 6 表表 4 5 IT 架构平台建设需新购的软硬件清单架构平台建设需新购的软硬件清单 序号序号配置配置数量数量单位单位单价单价分项总价分项总价 1 PC 服务器刀片机 双路四核 16G 内 存 20片 60 000 00 1 200 000 00 2 SUN M8000 TPMC178 万 2架 1 600 000 00 3 200 000 00 3Sun Ops center 2 51套 500 000 00 500 000 00 4VMware ESX160CPU 10 000 00 1 600 000 00 5Storage Foundation2套 700 000 00 1 400 000 00 6合 计 7 900 000 00 五 搬迁方案 1 指导原则 本次项目实施的由于牵涉到系统的核心主机 出于网管系统对整个福建移 动业务正常运作的重要性 必须保证搬迁计划制定遵循以下几点原则 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 16 详细调研系统信息 全局规划搬迁方案 按系统特性及关联性 如按 共享磁阵 分批逐步搬迁 保障数据安全 平滑过渡业务系统 尽可能减少停机和搬迁的时间 利用新购 现有或者利旧设备搭建临时网络环境和硬件平台 以降低 系统中断时间 重要系统实现不间断业务搬迁 部分系统中断业务搬 迁 有效培训搬迁流程 严格演练搬迁过程 细致分工搬迁任务 保障搬 迁顺利进行 2 项目开展阶段 本期网管机房搬迁计划遵循搬迁指导原则 按照项目开展流程 分阶段实 施如下 1 1 评估阶段评估阶段 调研评估工作准备 应用系统关联分析调研和资料收集 2 2 设计阶段设计阶段 概要和详细设计 包括网管网络和硬件资源池 搬迁演练 方案设计 3 3 实施阶段实施阶段 物理准备阶段 机房建设 空调 UPS 监控配套等 在上街搭建与一厂网管机房互通的临时网络节点 利用现 有未上电设备搭建过渡应用环境 搬迁培训动员及搬迁演练 业务系统搬迁 包括临时节点的割接 业务系统搬迁测试 等 4 4 收尾阶段 收尾阶段 项目试运行及收尾 3 项目实施内容 本期网管机房搬迁项目主要涉及以下内容 机房及配套设备建设 机房及配套设备建设 UPS 空调 机架等 空调 机架等 主网络建设主网络建设 管理网络建设管理网络建设 资源管理平台建设资源管理平台建设 系统搬迁与业务测试系统搬迁与业务测试 4 搬迁风险管理简述 一般来说 网管机房搬迁计划经过详细安排后 已将风险降到最低 但为 了处理突发意外事故 我们还使用特定风险管理计划 简述如下 1 1 数据备份数据备份 在搬迁实施开始之前 为了进一步保证数据的安全性 建议首先按照日常 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 17 备份机制和流程 对需要搬迁的应用数据进行一次全备份 这为搬迁实施过程 中的数据安全提供了完备性基础 2 2 搬迁前系统硬件故障搬迁前系统硬件故障 在停机搬迁前 需要首先确认机器的状态是良好的 若发生硬件故障 必 须首先排除 为了不拖延本计划的执行 我们特别强调在搬运前一天进行机器 检查 若有问题越早发现可以越早解决 3 3 搬运后设备硬件故障搬运后设备硬件故障 贯彻每套应用系统的双机设备分开打包 同时如果有 2 台运输车辆 则把 双机设备分车运输的原则 另外 为了应对设备在下架 搬运或在新机房上架而导致故障的风险 建 议准备一定的备机备件 在紧急情况下可使用备机备件使关键设备恢复服务 4 4 软件故障软件故障 搬迁期间 建议各设备系统维护供应商 应用开发商提供现场技术支持 一旦出现系统层面或者应用层面的故障 可迅速介入解决 5 本次项目搬迁方案的建议 5 1 本次搬迁系统 本次项目搬迁总共涉及到 28 套系统 具体清单如下 序号序号系统名称系统名称序号序号系统名称系统名称 1 话务网管系统 15 网管应用整合平台 2 数据网管系统 16 网络业务资源管理系统 3 华为 OMCR 及 I2000 网管 17 能耗管理系统 4MT OMCS 18 TRAFFICA 系统 5 集中备份系统 19 G4 防病毒服务器 6 网优支撑平台 20 信令监测系统 7 电子运维系统 21 综合监控平台 8 动力综合管理平台 22 客服支持平台 9 OTDR 系统 23 合作伙伴管理系统 10 管线资源管理系统 24 4A 网管堡垒机 11 传输资源管理系统 25 防病毒服务器 12 传输线路资源管理系统 26 文件服务器 13 网络数据集市 27 AD 域管理服务器 14 集中用户权限管理系统 28 华为终端安全 6 网管网络搬迁方案 6 1 搬迁实施项目 搬迁实施项目搬迁实施项目步骤描述步骤描述 一厂核心交换区设备替换 1 用新增的两台 4503 交换机 替换原有核心 7606A B 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 18 搬迁实施项目搬迁实施项目步骤描述步骤描述 上街核心交换区设备搭建 2 将两台 7606A B 搬迁至上街 打通上街和一 厂两个核心之间的三层连接 远程接入区搬迁 3 将远程接入区的防火墙搬迁到上街与上街 DCN 核心互联 内联 DMZ 外联 DMZ 区搬迁 4 将新购置的四台 4503 防火墙部署在上街 搬 迁 ASA550 1 ASA5550 2 到上街 一厂省公司网元汇聚节点割接 5 将网元接入区域的 4503A B 直接跟核心区域 4503 设备相连 割接出来的 4507A B 搬迁至上 街 上街省公司网元汇聚节点搬迁6 将割接出来的 4507A B 搬迁至上街 上街网元 终端汇聚节点搭建 7 将利旧的 4507A B 在上街机房上架 做为网 元和终端汇聚核心 打通上街网元和终端汇聚与一厂网元和终端汇聚 之间的二层 TRUNK 用于后期的省公司终端的搬 迁 将新增的二层终端交换机接入到上街两台 4507A B 供上街终端接入 上街核心生产区设备搭建8 将新增的核心生产区交换机 6509 上线 一厂 4F 核心生产区与上街核心生 产区网络二层互联 9 打通上街 6509 与一厂 4F 6506 之间的二层 trunk 连接 一厂 4F 核心生产区服务器搬迁 10 打通上街 6509 与一厂 5F 6506 之间的二层 trunk 连接 一厂 5F 核心生产区与上街核心生 产区网络二层互联 11 逐个搬迁一厂 4F 核心生产区的服务器到上 街 一厂 5F 核心生产区服务器搬迁 12 逐个搬迁一厂 5F 核心生产区的服务器到上 街 OA 和网管接口防火墙搬迁 13 将新增的 Juniper SSG 550 火墙在上街上线 割接 OA BOSS 互联接口从一厂割接到上街 省公司终端网关迁移和地市终端及 地市网元网络割接 14 将全省终端和网元从一厂割接到上街 同时 搬迁两台 终端认证服务器 MA5200 安全 NAT 转换防火墙搬迁 15 将两台用于安全 NAT 的防火墙搬迁至上街 一厂 4F 网元汇聚区的 4507 交换机 替换 16 将原有网元汇聚区的交换机用 3550A B 替换 用于一厂 监控及厂家终端的汇聚 上街网元汇聚区搭建 17 将一厂 4F 的两台 4507 搬迁至上街 搭建上 街网元汇聚区 6 2 优先保障能力需求 由于一厂枢纽楼机房空间和电源的问题 08 年硬件平台扩容等项目共有 10 台设备未上电 网管系统硬件处于超负荷状态 一方面争取库存设备尽快 上架上电 另一方面提供支撑能力以减少搬迁中断时间 建议优先提供部分网 络设备及相应配套设备 2 台三层中端交换机 48 个以太网端口和 48 个 SFP 光口 兼容现有的 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 19 Cisco PVST 生成树协议 临时作为上街网管机房核心交换机使用 2 台三层高端交换机 240 个以太网端口和 96 个 SFP 光口 兼容现有 的 Cisco PVST 生成树协议 用于核心生产区的核心交换机 6 个列头柜 为了确保新机房网络 存储及部分 Sun 设备上架上电使 用 6 个列头柜动力环境监控 避免主设备投产后再次下电 优先安装 未上电设备 SUN E2900 3 台 SUN E4900 1 台 EMC DMX4 磁盘阵 列 1 台 光纤交换机 2 台 IVR 设备 3 台 6 3 网络搬迁费用 本期省网管中心搬迁费用预估为 160 万元 7 网管机房基础设施建设 7 1 基础设施建设原则 网管机房的基础设施建设是整个网管机房建设的重要部分 其设计必须满 足当前中国移动集团公司的各项需求应用 又面向未来快速增长的发展需求 因此必须是高质量的 灵活的 开放的 根据国际上著名的网管机房基础设施 建设的基础原则和经验 结合中国国情和福建公司现状 作为福建公司网管机 房基础设施建设的依据 在进行网管机房机房设计时 应遵循以下设计原则 1 实用性和先进性 2 安全可靠性 3 灵活性和可扩展性 4 标准化 5 经济性 投资保护 6 可管理性 7 2 综合布线系统的建设原则 网管机房的综合布线系统 是为了综合分布数据 语音 图像等信号线缆 到整个网管机房 福建移动网管机房的综合布线系统要求遵循如下的原则 1 标准化 综合布线系统要遵循国际 国内的布线规范 使得综合布线系统便于管理 维护和发展 2 实用性 实施后的通信布线系统 将能够在现在和将来适应技术的发展 并且实现 数据通信 语音通信和图像通信 3 灵活性 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 20 布线系统能够满足灵活应用的要求 即任一信息点能够连接不同类型的设 备 如计算机 打印机 终端或电话 传真机 4 模块化 布线系统中 除去敷设在建筑内的缆线外 其余所有的接插件都应是积木 式的标件 以方便管理和使用 5 扩充性 布线系统是可扩充的 以便将来有更大的发展时 很容易扩充新的设备到 现有系统中去 6 经济性 在满足应用要求的基础 尽可能降低造价 六 远期目标 1 机房远期目标 本次搬迁的远期目标是将整个网管支撑系统搬迁到上街 因此其他网管支 撑系统将在第二阶段搬迁至上街 安放在 5 层北机房 WPM 系统 现位于 5 楼网管机房 A11 A12 A13 A14 机柜 无线路测系统 现位于 5 楼网管机房 B04 机柜 拨测系统 数据网 现位于 5 楼网管机房 B03 机柜 拨测系统 GSM 现位于 5 楼网管机房 B05 B06 B07 B08 机柜 动环系统 现位于 5 楼网管机房 B09 B10 机柜 传输网管 现位于 4 楼网管机房 H02 机柜 两台 H03 H04 H10 H11 H12 H13 H14 机柜和 5 楼网管机房 C01 C07 C08 C09 C10 机柜 2 网络远期目标 以建设层次分明 功能明晰 流量可控 安全可靠的网络为目标 即便于 统一管理与维护 又能满足我省网管网络中长期发展的需要 功能区分块化且双设备保证冗余备份 功能区间使用防火墙来有效控制流量互访 实现各网元和终端流量分离 实施不同粒度的网络安全策略控制 能够自动安全防御能力的网管网络 核心路由区部署 IPS IDS 入侵检测防御系统 部署全网统一的 SYSLOG 日志服务器 在核心路由区 核心生产区 核心路由区 终端接入区设备上部 署 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 21 类 Sniffer 流量监控软件 实时 monitor 现网业务 图图 6 1 网络远期目标架构图网络远期目标架构图 3 硬件基础架构远期目标 未来硬件基础架构可以提升资源利用率 降低硬件投入 动态响应业务需 求 标准化的运维流程和管理工具得以实施 极大提升运维效率 降低维护成 本 同时 建立异地冗灾备份 能够快速恢复数据和系统的迁移 保证业务系 统的连续性 逐步将现有集中化管理的硬件基础平台向云计算平台架构演进 实现 跨平台 跨厂家集成 陆续将业务系统和网管支撑系统部署到云架构的基础平台上 统一规划物理资源池 包括主机资源池和存储资源池 主机资源池规划 主机资源池规划 建立 PC 服务器资源池 承载上层业务的应用 建立小型机刀片服务器资源池 承载具有大量数据运算的采集类服务 建立机架式小型机服务器资源池 承载基于数据库应用的服务 存储资源池规划 存储资源池规划 IO 密集型 面向数据库应用 由高端存储阵列提供 高吞吐量 面向文件服务 由低端存储阵列提供 中国移动福建公司上街网管机房设备改造暨搬迁工程项目建议书 22 图图 6 2 硬件基础架构远期目标图硬件基础架构远期目标图 七 投资估算 本工程投资主要有 1