版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
华为2010年4月构建掌上数字阅读世界
打造全新阅读产业-阅读基地三期建设及机房搬迁方案1目录三期扩容和搬迁总体方案12按照本次工程建设要求,在三墩机房1#4楼,建设一套1500万用户规模环境,提前完成业务安装及对外接口调测,准备搬迁后承担业务。三墩机房3#4楼的生产环境在目前800万基础上扩容到1500万对外提供业务服务至8月底,到期后割接到三墩1#4楼。割接完成后3#4楼设备搬迁至1#4楼,1#4楼阅读机房支撑3000万用户规模,满足2010年底业务发展需求。小型机到货时间较晚,本次方案暂时全部考虑ATAE方案,预计9月小型机到货后替换1#4楼数据库。总体说明3搬迁服务总流程图4搬迁总体计划为最大程度保证阅读业务延续性,搬迁分三个部分进行:一、适当扩容现网平台:考虑搬迁期间业务的增长,3#4楼的生产环境在目前800万基础上,将部分在线业务模块扩容到1500万;二、新建过渡平台,割接业务:在1#4楼新机房,建设一套1500万用户规模的平台(数据库全为ATAE板),将在线所有业务割接;三、整合所有设备,数据库替换为小型机1、割接完成后,3#4楼设备搬迁至1#4楼,所有硬件整合,新平台总体业务支撑能力不小于3000万用户规模,满足2010年底业务发展需求。2、在小型机到货后,将数据库替换为小型机。序号割接所需时间1适当扩容现网平台至少30个工作日(预计7月上旬完成)2新建过渡平台,割接业务至少110个工作日(预计8月底完成)3重新安装调测业务,接入手机阅读平台至少50个工作日(预计10月完成)在按时到货的前提下,预计6月开工,时间安排如下:5新平台实施计划序号工程实施内容达到目标工期需移动配合
1备货、到货三期扩容和搬迁新增设备到新机房30日机房环境具备2硬件安装和上电完成硬件安装、通过硬件质量检查、设备上电10日机房环境具备3操作系统和数据库安装
10日
4业务调测
20日
5和外部接口联调
20日需移动配合联调6业务测试
10日需移动基地人员进行业务测试7业务割接
10日
8原平台设备割接并入新平台
60日
6原平台设备搬迁计划序号工程实施内容工期需移动配合
1业务观察期15日
2原平台设备拆卸5日需移动先将设备下电3原平台设备硬件安装5日需移动先将设备打包并运输到新机房4原平台设备软件安装和系统调试25日
5质量检查5日
6原平台设备割接10日
7新建机房环境准备要求对新机房(1#4楼机房)要求:电源:交流、直流电源柜;机架:考虑阅读三期扩容和备份,以及冗余要求,阅读至少需要服务器机架60个、网络设备机架2个、传输配线机架2个室内走线架:上走线网络条件:CMNET:5对千兆光纤(或者直接连接骨干网)DCN:2对千兆光纤,需要和支撑DCN、网管DCN打通电信:需要电信2对千兆光纤 公网IP地址128个,其中24个白名单用户重点要求:割接业务的同时,为保证业务延续可用性,必须将原有分配给3#4楼在线设备的所有公网IP也一并割接到新平台上。
8新建系统周边网络和环境准备要求新建系统需要重新联调与平台接口网元,在网络环境要提前打通,要提前知会各个部门进行配合联调:省BOSS省GGSN集团BOSS集团VGOP短信网关彩信网关一级终端系统MM平台9目录适当扩容现有平台的硬件计算110现有平台扩容考虑要素扩容硬件配置需考虑要素:满足2010年8月底要支撑1500万月访问用户的规模需求。增加客户端BS架构、行业网关等新业务模块。根据业务发展需要改造现网关键模块,增加FTP服务器。11项目数值注册用户数(万)2000月访问用户数(万)1500日访问用户数(万)225WAP门户峰值每秒PV请求次数(次)8750峰值WEB门户每秒PV数(次)750手机客户端峰值每秒PV请求数(次)750G3阅读器行业应用峰值每秒PV请求数(次)375G3阅读器在线书城峰值每秒PV请求数(次)375无线网络带宽(Kbps)64话单在线保存时长(天)365日志原始文本文件保存时长(天)155报表数据保存时长(天)155杂志50000书籍数量300000动漫数量500001500万月访问用户系统配置需求12服务器名称现网当前部署R2调配R2三期扩容
新增R2+三期规划新增R2+及调配R2说明WEB门户服务器1
2
WAP门户服务器12
4
手机客户端/手持终端门户服务器与下载服务器4
0
短信门户服务器2
0
动漫服务器909块业务版支撑到年底,不按用户规模计算。门户引擎服务器6
4
radius服务器0
0
网管服务器1
0
计费服务器(BOSS话单)2
0
计费服务器(VGOP实时订购)1
0
结算服务器3
0
业务管理服务器
(固定配置)2
0
DRM服务器3
0
营销服务器(营销群发)1
0无高可靠性要求,使用单机营销服务器(单发)1
0暂时使用单机,搬迁后再组双机报表预统计服务器11新增一台服务器报表查询服务器1
0
智能分析服务器21新增一台服务器业务数据库服务器012已经借货7块R2+报表数据库服务器5
3
MCP自服务系统服务器1
0
现有平台扩容设备汇总(一)13服务器名称现网当前部署调配R2三期扩容
新增R2+三期规划新增R2+及调配R2说明日志文件服务器100
客服服务器1
0
行业接口机2-22使用新到R2+承载业务,已有R2替换下来给测试服务器使用行业管理门户1-11使用新到R2+承载业务,已有R2替换下来给测试服务器使用行业数据库服务器2-22使用新到R2+承载业务,已有R2替换下来给测试服务器使用行业报表数据库服务器0
0
行业代理网关0
5
OCF加密服务器01目前现网CP数量比较少,系统没有实时性要求,配置一套OCF加密服务器双机,暂时使用单机,搬迁后再组双机部署应用服务器及数据库。互动业务0
7
手机客户端端B/S架构0
5
测试服务器12+50将行业相关替换下来的5台R2服务器作为新业务测试服务器服务器总计77050
交换机S5624P------使用现网设备不变防火墙Edumon1000E------使用现网设备不变负载均衡F56900------使用现网设备不变存储1(S3200)5(S2300E)214(SAS300G)56(FC300G)3(S2300E)148(SAS300G)现有平台扩容设备汇总(二)共计:新增50块R2+板(已经借货7块),148块SAS300G硬件;14目录过渡平台的硬件计算115过渡平台配置考虑要素过渡平台硬件配置需考虑要素:满足支撑1500万月访问用户的规模需求,业务模块数及各模块服务器承载能力都要与现网机房相同,保障能够顺利承接现网业务。减少后期现网机房搬迁后的整合工作量,避免频繁迁移关键数据,FTP,业务管理等关键模块需要提前做好双机。数据库与内容库需要考虑冗余保护。16P590P570FC-SWFC-SW
S3200磁盘阵列硬件P570高端小型机*3HuaweiS3200DiskArray软件或6Oracel11gRAC集群(ASM)三期扩容后业务数据库系统组网P570OracleRAC集群17数据库可能遇到的风险分析硬件层面单台P570小机完全崩溃----不影响业务,数据库服务由其他两台服务器接管.
两台P570小机同时崩溃----极小出现几率,中等影响业务,数据库服务由最后1台服务器接管,但此时P570的处理负载偏高.
三台P570小机同时崩溃----此时已经发生整个机房整体的灾难,需要进行灾难切换.
单台光纤交换机损坏----不影响业务,服务器、存储将自动调整I/O路径到可用路径.
两台光纤交换机同时损坏----极小出现几率,数据不可用.业务中断.
存储单电源故障----不影响业务,单电源能够支撑整个存储的电力供应.
存储单控制器损坏----小影响业务,数据处理由单个控制器完成,能力下降.
存储整体损坏----影响业务,数据全部不可用,业务中断.软件层面AIX操作系统----IBMAIX经过十几年运营商的7*24小时运行考验,非常稳定,几乎很难出现系统级崩溃的事件.ORACLE数据库----通过3台P570组成的oracleRAC集群,RAC已经是ORACLE最高的业务连续性保护机制,单服务器/实例的故障,对数据库服务没有影响.
总结,对于双交换同时损坏和存储整体损坏的情形,需制订数据保护策略,实现业务的连续运行.
18风险情形出现几率解决思路投资情况双光纤交换机同时损坏极小(小于10万分之一)
1、每台P570增加2块HBA卡(总6块)2、额外增加1台光纤交换机
2个方案投资额均小于10万元,但对于十万分之一的几率来说,是不必要的,对于双交换机同时损坏的情况建议是不做考虑单台存储损坏小几率出现增加1台存储,并通过主机层的LVM逻辑卷镜像功能,实现oarcle数据库的数据完全一致的分布在两个存储上,即使有1个存储完全损坏,另外一台存储可以零时间接管业务,保证业务的连续性.增加一台存储,与现网数据库存储三期扩容后容量相同,数据写2份,一份到主存储,一份到备存储.数据库保护策略通过增加一台存储,形成前端服务器、SAN网络、后端存储前中后三端全冗余;通过LVM的逻辑卷镜像和ORACLERAC集群技术,从软件层面保证数据库的可靠性,降低数据库崩溃的几率.19P590P570FC-SWFC-SW
S3200磁盘阵列硬件P570高端小型机*3HuaweiS3200DiskArray软件或6Oracel11gRAC集群(ASM)LVM逻辑卷镜像组网图P570OracleRAC集群
S5600磁盘阵列数据保护通过AIX系统自带的LVM(逻辑卷管理)的镜像功能,将一份数据分裂为两份,分别写到两个存储上,即使一个存储损坏,也完全不影响业务.20FTP服务器FC-SWFC-SW集群NAS引擎硬件FTP服务器ATAER2单板*2N8000集群NAS系统引擎(4节点)后端存储(S5600)软件CFS并行集群系统包括SymantecSFW三期扩容后内容库系统组网FTP服务器
N8000后端S5600存储N8000NAS系统21内容库可能遇到的风险分析硬件层面
1-2个集群节点崩溃----不影响业务,数据库服务由其他两台服务器接管.3个集群节点同时崩溃----极小出现几率,中等影响业务,数据库服务由最后1个节点接管,但此时处理负载偏高.4个集群节点小机同时崩溃----此时已经发生整个机房整体的灾难,需要进行灾难切换.
单台光纤交换机损坏----不影响业务,服务器、存储将自动调整I/O路径到可用路径.
两台光纤交换机同时损坏----极小出现几率,数据不可用.业务中断.
后端存储单电源故障----不影响业务,单电源能够支撑整个存储的电力供应.
后端存储单控制器损坏----小影响业务,数据处理由单个控制器完成,能力下降.
后端存储整体损坏----影响业务,数据全部不可用,业务中断.文件系统层面文件系统整体损坏----此时内容库完全不可用,业务中断.文件系统需要修复----文件系统有时存在信息不一致,需要进行fsck,根据中央音乐平台经验,10TB的文件系统需要8小时左右.此时业务不可用.总结,对于内容库的风险保护,重点是文件系统层面及后端存储整体损坏发生时的应对措施.22风险情形出现几率解决思路投资情况单台存储损坏、(等同于文件系统损坏)小几率出现增加1台存储,并通过主机层的LVM逻辑卷镜像功能,实现oarcle数据库的数据完全一致的分布在两个存储上,即使有1个存储完全损坏,另外一台存储可以零时间接管业务,保证业务的连续性.增加一台存储,与现网数据库存储三期扩容后容量相同数据写2份,一份到主存储,一份到备存储.文件系统做fsck小几率出现在通过CFS的卷镜像功能分别写到两台存储时,通过使用快照技术,形成数据保护,将数据回滚到某一时间点(建议以1天为单位),通过快照卷来拉起业务,正常的逻辑卷在后台进行fsck,首先保证业务的及时恢复.
1、考虑到内容库未来可达到7TB的大小,卷大小不得小于8.75TB(卷空间使用率在超过80%时,性能会明显下降).2、快照卷需要考虑额外的空间,根据我们的经验,对于数据更新频繁的内容库,按照30%的比例,至少需要2TB的快照卷空间.内容库保护策略通过增加一台存储,形成前端服务器、SAN网络、后端存储前中后三端全冗余;通过CFS(N8000内置Symantec卷管理软件)的卷镜像,保证一台存储整体损坏或文件系统全部损坏时,能快速恢复系统.通过快照功能,保证文件系统需要在fsck需要花费比较长时间时,也能提供额外的保护,保证业务运行.23总结核心数据内容保护机制磁盘空间量投资情况数据库数据库完全镜像到另外一台存储或其他在线存储的磁盘空间1、按照磁盘空间利用率50%,3000万访问量时磁盘空间(5TB),2、考虑到数据库是做RAID10,则需要10TB,3、300GB磁盘使用空间为280GB,至少需要38块盘.增加一台存储或从其他存储中增加磁盘空间,处理性能不低于扩容后的S5600,否则数据在镜像写时容易出现性能瓶颈)50%的磁盘使用率38块300GBFC磁盘70%的磁盘使用率28块300GBFC磁盘内容库内容库完全镜像到另外一台存储或其他在线存储的磁盘空间内容库做卷快照,快照同时也镜像到两台存储
1、镜像存储不低于3000万访问量时磁盘空间(7TB)2、镜像存储做快照保护需要7*0.3=2.1TB3、三期扩容在N8000后端存储需增加2.1T的卷快照空间
4、总计增加11.2TB空间
5、考虑到内容库是RAID5,300GB
磁盘使用空间为280GB,
按300GBFC磁盘计算,至少需要增加42块盘
增加一台存储,或从其他存储中增加磁盘空间,存储处理性能不低N8000后端的S5600,否则数据在镜像写容易出现性能瓶颈50%的磁盘使用率84块300GBFC磁盘70%的磁盘使用率60块300GBFC磁盘
做为业务数据保护的数据空间,备用存储在保证性能不受影响的情况下,可以通过提高磁盘的利用率来减少投资,以磁盘空间利用率70%为宜241#4楼机房过渡平台新建设备汇总(一)服务器名称三期扩容
新增R2+说明WEB门户服务器4
WAP门户服务器9
手机客户端/手持终端门户服务器与下载服务器3
短信门户服务器1
动漫服务器5门户引擎服务器6
radius服务器0
网管服务器1
计费服务器(BOSS话单)1
计费服务器(VGOP实时订购)2预先做好双机,减少后期整改工作量结算服务器1
业务管理服务器
(固定配置)2预先做好双机,减少后期整改工作量DRM服务器2
营销服务器(营销群发)1
营销服务器(单发)1
报表预统计服务器1
报表查询服务器1
智能分析服务器1
业务数据库服务器12
报表数据库服务器5
MCP自服务系统服务器1
251#4楼机房过渡平台新建设备汇总(二)服务器名称三期扩容
新增R2+说明日志文件服务器1
客服服务器1
行业接口机2
行业管理门户1
行业数据库服务器2
行业报表数据库服务器0
行业代理网关5
OCF加密服务器1预先做好双机,减少后期整改工作量互动业务7
手机客户端端B/S架构5
测试服务器0
服务器总计85
N8000集群NAS系统1新增一台NAS系统做内容库集群使用交换机S9306使用二期发货的防火墙防火墙Edumon8080E三期新发货负载均衡器F56900三期新发货存储3(S2300E)5(S5600)98块SAS300G412块FC300G共计:新增85块R2+板,防火墙2台EDUMON808E,负载均衡器2台F56900,硬件98块SAS300G,412块FC300G;26目录整合的硬件计算127项目数值注册用户数(万)4000月访问用户数(万)3000日访问用户数(万)450WAP门户峰值每秒PV请求次数(次)17500峰值WEB门户每秒PV数(次)1500手机客户端峰值每秒PV请求数(次)1500G3阅读器行业应用峰值每秒PV请求数(次)750G3阅读器在线书城峰值每秒PV请求数(次)750无线网络带宽(Kbps)64话单在线保存时长(天)365日志原始文本文件保存时长(天)155报表数据保存时长(天)155杂志50000书籍数量300000动漫数量50000阅读3000万月访问用户系统配置需求28整合总数和3000万计算模型对比(一)
3000万建设现网机房新建机房整合合计相差服务器名称R2R2+R2R2+三期扩容
新增R2+合计(R2)合计
(R2+)合计(R2)合计
(R2+)WEB门户服务器161241600WAP门户服务器12111229121100手机客户端/手持终端门户服务器与下载服务器414034302短信门户服务器202012101动漫服务器909059505门户引擎服务器6864661002radius服务器000000000网管服务器101011101计费服务器(BOSS话单)202012101计费服务器(VGOP实时订购)111021201结算服务器313013100业务管理服务器
(固定配置)202022202DRM服务器303023202营销服务器(营销群发)010010100营销服务器(单发)202012101报表预统计服务器111011100报表查询服务器101011101智能分析服务器212012100业务数据库服务器0220121202402报表数据库服务器57535580129整合总数和3000万计算模型对比(二)
3000万建设现网机房新建机房整合合计相差服务器名称R2R2+R2R2+三期扩容
新增R2+合计(R2)合计
(R2+)合计(R2)合计
(R2+)MCP自服务系统服务器111011100日志文件服务器111011100客服服务器111011100行业接口机222222402行业管理门户121111200行业数据库服务器222222402行业报表数据库服务器02000000-2行业代理网关0505501005OCF加密服务器02001010-1互动业务01207701402手机客户端端B/S架构01005501000测试服务器120120012000总计771007745857713003030配置3000万建设现网扩容新建机房工程后多余硬件服务器R2:77块R2:78块R2:0块R2+:100块R2+:45块R2+:85块R2+:30块(替换小机数据库后还要多出24块)交换机S9306:2台S5624P:2台S9306:2台
防火墙Edumon8080E:2台Edumon1000EU3:2台Edumon8080E:2台Edumon1000EU3:2台负载均衡器F56900:2台F56900:2台F56900:2台F56900:2台存储S3200:1个S3200:1个
S2300E:8个S2300E:8个S2300E:3个S2300E:2个(其中一个S2300E给内容库冗余使用)S5600:5个
S5600:5个
N8000:1个
N8000:1个
磁盘SAS300G:317块SAS300G:362块SAS300G:98块SAS300G:143块FC300G:421块FC300G:56块FC300G:412块FC300G:47块整合总数和3000万计算模型对比(附表)多余硬件利用建议:根据现有模型,在不新增业务模块的情况下,多余54块ATAER2+可以满足6000万月访问用户数规模。6000万用户时需要1117块300G磁盘,除多余143块SAS及47块FC盘外还需要补充277块300G磁盘。多余2台Edumon1000EU3防火墙可以做安全加固隔离数据库使用。因搬迁导致多余2台F56900可以分站点建设时使用。31目录备份系统建设方案132现网系统架构33NeedBackup…内容库数据统计话单计费话单业务DB需要备份的业务模块备份数据库所有内容备份所有计费话单备份所有统计话单备份书籍/杂志/动漫等内容34业务系统子模块业务类型操作系统3000万/M访问量预测数据量业务数据库数据库(oracle11g)
Suselinux10
5161GB内容库书籍、动漫等文件
Suselinux10
7324GB计费话单
KB级小文件
Suselinux10
11591GB统计话单
KB级小文件
Suselinux10
23435GB总计
47511GB3000万时备份数据量统计根据业务模型,当达到3000万月访问量时,将达到备份的数据总量为47511GB35业务系统子模块业务类型数据重要/安全性要求数据恢复要求业务数据库数据库(oracle11g)非常重要/非常高数据不丢失最短时间恢复业务系统内容库书籍、动漫等文件重要/高数据不丢失,
快速恢复系统计费话单
KB级小文件中等/高
在线保存12个月
统计话单
KB级小文件一般/一般在线保存5个月数据重要程度分类业务数据库、内容库作为核心数据,不仅要保证数据备份的可靠性外,也需设计尽量短的数据恢复时间,话单类文件:对数据恢复的实时性要求不高,.计费话单在线保留12个月,统计话单保留6个月,考虑到数据已在线保留,而超过一定期限的话单数据使用频率几乎为零.备份系统上只保留最近3个月的最新数据,并通过数据压缩/重复数据删除技术,减少数据占用空间;36ITSupportSystem核心内容:根据运营规划,计费话单在线保存12个月、统计类话单保存5个月策略颗粒度以天为单位,保留计费话单最新的90天(3个月)相关数据,保留统计话单最新的90天(3个月)数据.计费、统计话单存放书籍、动漫等实际客户访问的内容业务特点:数据更新快、新增数据多,数据修改少备份/恢复策略颗粒度:
内容库可以恢复到1个月内的任意1天核心内容,提供所有用户信息&业务数据备份/恢复策略颗粒度:
数据库可以恢复到1个月内的任意1小时.数据库定义
指完成一次给定备份所需的时间备份窗口选择根据现网PV访问量,尽量在低业务量时进行操作,减少对业务系统影响。时间窗口选择根据PV访问量,我们定义晚上0点-6点进行备份。备份策略设计合理、可靠、贴合业务实际运营情况的备份策略是数据快速恢复、提升运营效率的基础内容库备份窗口37备份策略规划明细—数据库、内容库备份模块备份对象备份窗口备份周期备份方式备份保留周期说明业务数据库数据库0:00-6:00(6Hours)2周1次全备份1个月对整个数据库进行全备份,以周为单位,数据可恢复到2周的备份点数据库每日增量0:00-2:00(2Hours)每天1次增量备份1个月对数据库进行每日增量备份,以1自然天为单位,在全备份的基础上,数据可恢复到1月内的任意1天数据库归档文件每1小时(24Hours)每小时1次全备份1个月备份数据的归档日志,以小时为单位,在全备份、增量备份的基础上恢复到1个月内任意1小时的状态.内容库内容库全备份0:00-6:00(6Hours)每月1次全备份2个月对所有的书籍/杂志/动漫等内容进行备份,,以月为单位,保留2个全备份的内容.可恢复到1个月前.内容库每日增量0:00-2:00(2Hours)每天1次增量备份1个月对每天新上传的书籍/杂志/动漫等内容进行备份,以天为单位,在全备份的基础上恢复到1个月前的任意1天.38计费话单备份策略规划方案备份模块备份策略计费话单计费话单:包含3种内容:每章节、每本书、包月的订购关系查询,按照局方和整体运营要求,计费话单保留1年(基础配置计算模板V9)现网情况:每天生成96个话单文件计费话单已经在线在存储上保留12个月数据,而超过3个月话单文件的使用情况很少出现,
备份策略;介质循环使用、只备份最新的90天(3个月)所生成的话单文件数据,并通过重复数据删除减少数据空间的占用备份情况:1、day1对计费话单目录进行初始全备份,生成第一个备份集A1,备份完成后进行重复数据删除,减少空间2、day2:新增的96个话单文件,生成第二个备份集A2,一直到第90天,生成第90个备份集A903、第91天时:备份集A1失效,释放数据空间,并重新生成备份集A1’(第91天数据)4、第92天,备份集A2失效,释放数据空间,并重新生成备份集A2’(第92天数据)5、循环使用,每天新成一个备份集,90天前的备份集失效预计3000万时,每天计费话单文件为75GB,压缩后为37.5GB,1个月(30天)的数据总量为1.1TB,计费话单3个月数据备份所需总容量为:1.1*3=3.3TB,进行重复数据删除(1:5比例),所占空间为3.3TB*20%=675GB,则VTL保留最新3个月计费话单总计需要675GB空间39统计话单备份策略规划方案备份模块备份策略统计话单统计话单:包括用户登录记录、看书、浏览、评论、送花等操作记录.按照局方和整体运营要求,统计话单保留5个月统计话单的保存价值不大,只作为统计数据的挖掘源数据,
现网情况:多个目录,每个目录下一种信息(如登录、浏览内容等)对应生成对应的统计话单文件统计话单已经在线在存储上保留5个月数据,而超过3个月话单文件的使用情况很少出现,
备份策略;介质循环使用、只备份最新的90天(3个月)所生成的统计话单文件数据,并通过重复数据删除,减少数据空间的占用备份情况:1、day1对计费话单目录进行初始全备份,生成第一个备份集A1,备份完成后进行重复数据删除,减少空间2、day2:新增的96个话单文件,生成第二个备份集A2,一直到第90天,生成第90个备份集A903、第91天时:备份集A1失效,释放数据空间,并重新生成备份集A1’(第91天数据)4、第92天,备份集A2失效,释放数据空间,并重新生成备份集A2’(第92天数据)5、循环使用,每天新成一个备份集,90天前的备份集失效预计3000万时,每天统计话单文件为150GB,压缩后为75GB,1个月(30天)的数据总量为2.2TB,计费话单3个月数据备份所需总容量为2.2*3=6.6TB,进行重复数据删除(1:5比例),所占空间为6.6TB*20%=1.3TB,则VTL保留最新3个月计费话单总计需要1350GB空间40统计话单3000万访问量(保存3个月最新数据)75*GB/天*30day*3月*0.5=3375GB重复数据删除后3375*0.2=675GB考虑到数据在重删后,在需要恢复时,对数据要进行反向的数据组合需要1盘磁带空间800GB,总容量为675+800=1375GB计费话单3000万访问量7324GB*2Mouth=14648GB3000万访问量5.6*14day+11*14day*24H+5161*2week=14096GB考虑到数据恢复的快速,不建议对数据库数据进行压缩来节约空间业务数据库3000万访问量(保存3个月最新数据)150*GB/天*30day*3月*0.5=6750GB重复数据删除后6750*0.2=1350GB考虑到数据在重删后,在需要恢复时,对数据要进行反向的数据组合需要1盘磁带空间800GB总容量为1350+800=2150GB内容管理备份频率所需VTL磁盘空间3000万月访问量时,需要备份空间为32269GB,考虑VTL后端存储的RAID组格式化、热备盘的损耗,裸容量至少需要41数据恢复策略备份模块应用数据类型应用环境恢复方式数据恢复策略业务数据库数据库裸设备单条记录被删除操作数据库单独使用闪回查询恢复该记录(数据库操作)单个数据表空间被删除恢复单个表单独使用resyclebin方式(数据库操作)数据文件不一致全部恢复通过NBU备份软件RMAN对数据库进行全恢复.内容库文件单个文件(10M以上)单个文件中等大小文件数量百万级单个文件恢复如果单个文件需要恢复到某一时间点,Netbackup备份软件支持从备份集中找出该文件,进行单一文件的恢复.全部恢复通过对磁盘原始分区/卷级的备份,恢复所有数据空间,首先保证备份/恢复的速度.计费话单文件单个文件(KB级)单个文件很小,文件数量极多全量恢复通过NBUFlashBackup选件针对小文件备份与恢复,是将原始分区备份的速度与还原单个文件的能力融于一体的策略类型,相对标准文件顺序备份方法速提高备份/恢复速度.统计话单全量恢复数据保护除考虑备份的可靠性外,数据的恢复也需与业务系统需求、人员使用习惯相符,应满足以下需求:1、具备快速整体能力,针对不同的应用类型有对应的恢复策略组合.2、具备单个文件的恢复能力—既在备份集内找出单个文件定点恢复.3、具备单个数据库表空间的恢复能力4、兼容性好,具有图形化操作主控台推荐使用企业级备份软件42恢复时间估算备份模块恢复对象数据量恢复时间说明数据库数据库全恢复3000万访问量时5161GB小于6Hours1、相对于单条记录、单个表空间被误删除,这些操作均属于oracle的逻辑操作。2、对于数据库的全恢复,通过NBU调用ORACLE的RMAN接口进行数据恢复。对于5TB的ORACLE,经测试约5个半小时的恢复时间。内容库单个文件恢复MB级小于10min单个文件恢复,需要从文件所在介质集中去找到该文件,恢复时间中的大多数是用于寻找该文件。内容库杂志50000本书籍300000本动漫50000本7324GB小于5小时(416MB/S)文件类的恢复,由于NBU的flashbackup支持对裸盘/分区/卷的恢复,基本可以达到VTL单引擎的最大速度,既700MB/S,考虑到不可能第1秒就跑出700MB/S的速度,通常按照最大速度的80%进行计算.43备份系统设备清单备份系统设备3000万访问量备份系统设备清单32口光纤交换机两台16口满配交换机(双电源、sfp模块、光纤及线缆)NBU6.5备份软件1、MasterServer组件*12、11个enterpriseclient客户端,3个oralceAgent许可(按3个P570计算)3、虚拟磁带库组件许可(42TB),4、flashbackup功能许可VTL6000虚拟磁带库1套VTL6000(单引擎、配置重复数据删除功能),42TB后端存储容量,双端口4GHBA扣卡原生产中心ATAE数据库、内容库、计费、统计话单服务器改造,总计13块,后续无需增HBA扣卡备份管理服务器1台备份管理服务器,配win2003操作系统44总结在重新对话单文件的重要程度、原有备份策略、数据保存策略、使用频度、备份空间使用量进行评估后,根据局方、维优、开发、卓望等几方意见,结合实际及未来发展预期,重新对备份策略进行了规划.主要包括以下变更:1、在数据恢复时间差异非常小的情况下,数据库全备份从1周1次变更为2周1次,数据备份裸空间可缩减20TB备份裸空间..
2、数据库、内容库的数据考虑到极端情况下业务快速恢复的时间性要求,不建议对数据进行压缩.(在恢复时首先对数据有解压缩操作).3、话单文件备份策略变更
A:考虑到话单文件已经在线保存12个月(计费)、5个月(统计),重复投入意义并不大,固只对最近3个月的话单文件进行备份.B:计费话单在线保留(12月)、循环备份3个月共计90天的最新的数据,C:统计话单在线保留(5月)、.循环备份3个月共计90天的最新的数据
D:采用重复数据删除,节约了80%的空间,配合策略变更,减少数据备份裸空间30TB45备份网络架构示意图1构建LAN-Free的SAN网络通过2台4GbpsFC光纤交换机,将需备份的4个模块服务器、存储、VTL虚拟磁带库、备份管理服务器接入SAN网络满足LAN-Free的备份网络需求2通过D2D2T的模式利旧SUN磁带库,实现设备利旧及归档。
通过disk-disk-Tape的数据备份模式,可以将随时间增长价值变小,偶尔又需要恢复出来查看的数据类型(如电子邮件)归档到物理磁带库上。3、在备份管理服务器的NBU控制台上为各备份创建备份策略及介质资源池。通过备份管理服务器,为各备份模块规划介质资源池、备份策略。实施备份。46目录附件147当前业务系统架构业务数据库(RAC集群)管理平台客服平台计费服务器营销平台运维数据库统计服务器报表服务器Radius服务器VGOPBOSSGGSN短信网关彩信网关运营人员客服人员MCP运营人员门户引擎(集群)WAP门户(集群)Web门户(集群)客户端接口(集群)G3阅读器接口短信彩信(集群)DRMC(集群)48业务数据库(RAC集群)管理平台(双机)客服平台(双机)计费服务器(双机)营销平台(双机)运维数据库(分号段
单机群组)统计服务器(双机)报表服务器(双机)Radius服务器(双机)VGOPBOSSGGSN短信网关彩信网关运营人员客服人员MCP运营人员推荐引擎(集群)辅助业务数据库(RAC集群)WAP门户Web门户短信门户门户引擎(集群)DRMC(集群)直播间书友会博客投票短信祝福有奖答题行业门户G3阅读器接口客户端接口2010年计划业务发展系统架构492010年平台软件新增功能规划2010年平台计划分为三期两个阶段。第一阶段为1月到6月份,第二阶段为7月到12月份。主要实现行业应用、用户互动、数据挖掘、实体书销售、积分和全网支撑体系等终端适配实体书销售积分激励系统用户互动功能版本有声读物全流程编审发布作家创作结算管理G3阅读器行业定制全网支撑体系建设数据挖掘客户端B/S架构图文混排502010年建设模块新增模块内容描述G3阅读器行业定制提供G3阅读器行业用集成,通过G3阅读器可以访问炒股、资讯和手机邮箱,打通大型集团行业,为集团行业做办公内置。用户互动功能为四个门户向用户提供丰富的附加功能、名家直播室、评论、个人空间、答题、调查、书友会、俱乐部等产品互动功能。图文混排/报纸引入支持图文混排功能,可制作含有大量图表、公式的图书,同时支持报纸等内容的引入,为用户提供更为丰富的阅读内容。终端适配/WAP2.0版本提供终端适配,以及WAP2.0彩版功能。手机客户端B/S架构提供B/S架构的手机客户端,为手机客户端用户提供更好的业务体验全网支撑体系建设建设一套服务全网31省市的营销管理、营销实施和营销效果分析的营销体系管理数据挖掘提供全网用户数据、用户访问数据、业务运营数据的智能数据分析、数据挖掘。为业务营销、事件营销、重点用户营销、内容上架、Portal布局等关键运营动作提供数据支撑。实体书销售引入实体书MCP管理,提供实体书的订单管理、物流管理和结算功能有声读物全流程支持和发布增加有声读物的制作、编审和发布。作家创作结算管理建立作家平台创作以及独立结算的体系积分激励系统统计用户消费行为和互动行为,形成用户积分并作为站内消费卷使用,提高用户的活跃度。2010年平台软件主要新增功能规划(部分)51FTP服务器单独部署——内容库FTP服务器工作流程图存在的问题1、内容库FTP与业务管理平台在同一台服务器,存在系统单点隐患.如果该台服务器出现故障需要进行维护/更换硬件,业务将不能对外提供服务,直接影响客户感知,必须要进行高可用性、业务连续性保护.2、单台服务器难以满足业务增长的需要.
从目前来看,单台服务器能够满足200万访问量的需要,一旦业务增长迅速,服务器的处理性能将成为业务整体的”短木板”,缓存数据在大用户访问量时,,门户FTP客户端将频繁发出读写请求,形成数据堆伐,导致服务器系统资源被消耗完毕,系统冗机
52消除系统单点隐患提升业务处理性能FTP服务器单独部署——预期目标业务系统分离,防止单点损坏导致业务瘫痪通过数据割接,将内容库FTP服务从原有业务剥离到其他服务器提供服务.数据割接的要求1、熟悉现网架构
2、实施前必须对数据进行备份.1、数据割
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 防静电架空活动地板施工方案
- 2026广东江门开平市市属国有企业集中招聘高校毕业生11人农业考试备考试题及答案解析
- 2026年上海中医药大学附属曙光医院淮南医院招聘1名农业笔试参考题库及答案解析
- 2026年甘肃省兰州大学经济学院聘用制B岗人员招聘农业考试备考试题及答案解析
- 2026中央司法警官学院招聘27人(河北)农业考试备考题库及答案解析
- 2026北京大学环境科学与工程学院教学科研岗位招聘农业考试备考试题及答案解析
- 项目五教案2 图片批量加标题
- 2026福建漳州市卡迪夫高级中学招聘24人农业考试备考题库及答案解析
- 初中物理电路故障排查的趣味实验设计课题报告教学研究课题报告
- 2026年河北石家庄日报社公开选聘事业单位工作人员8名农业笔试参考题库及答案解析
- 《小兔子分萝卜》教学活动设计
- 辽宁大连市2025-2026年下学期高三综合模拟考试语文试题及参考答案
- (二模)宁波市2026届高三高考模拟考试语文试卷(含答案及解析)
- 2026春季学期国开机电专科《可编程控制器应用实训》一平台在线形考形成任务1至6答案
- 研发部保密工作制度
- 云投集团招聘笔试题目
- 仙人指路指标源码,号称20年16000倍收益通达信指标公式源码
- 3.12.2024新苏教版小学科学三年级下册第三单元第12课《石头上的植物》同步课件
- 2023年漯河职业技术学院单招职业适应性测试笔试模拟试题及答案解析
- 新人教版 三年级数学下册 连乘连除应用题
- 责任制整体护理-PPT课件
评论
0/150
提交评论