中国电信集团EDW-增值业务运营数据中心建设方案

中国电信集团EDW-增值业务运营数据中心建设方案目录平台可移植性2总体方案介绍3关键技术介绍4成功案例介绍5数据分析支撑工作方案6实施方案和平台发展方向7建设目标与重点11

公司研发实力形成了成熟的研发体系，具备快速反应及持续开发的能力在电信业务技术规范研究领域处于国内领先地位，编制标准与规范近15项国家专利2项，软件产品登记数13个，计算机软件著作权登记数9个，自主研发产品获多项国家级，省、市级和中国电信级奖项2规范管理专业实验室3G实验室增值业务实验室数据多媒体实验室软件评测实验室产品与中国电信广东研究院战略合作公司人才、技术优势开发知识库公共组件库技术规范质量控制业务优化UI设计以RUP指导项目管理、软件开发过程通过CMMI3级评估核心业务管理支撑系统(MSS）业务支撑系统(BSS）运营管理系统(OSS)业务交互平台行业应用产品质量控制

公司产品与服务3IP移动固定网络MSSOSS系统集成BSSEDA主机集成网络集成SAP二次开发计费帐务与结算IBSS/CRM余额管理平台宽带后台统一充值VC服务开通iSPPUMCCTMASODS增值业务平台转型业务平台统一支付移动支付DACS统一认证商企平台号百平台114搜索导航全球眼(手机全球眼)平安城市商务领航行业应用商务领航平台应用商务领航咨询服务视频监控自助建站数字校园IT监控金视通协同办公系统SAP实施咨询ICT业务与产品3G移动应用号百定制终端校园定制终端政企定制终端任翼行院线通演出票火车票生活搜订酒店框架桌面火讯影视音乐游戏词典QQ天气预报动漫图铃邮箱浏览器企业总机手机搜索189邮箱业务交互平台MBOSS本期项目建设目标本系统关注中国电信所有全国级增值业务的运营分析，实现原始业务运营平台系统的数据采集、数据整合和聚合。提供对用户消费行为、业务推广情况、SP/CP分析监控方面的应用，并实现跨业务、跨平台的融合分析，为增值业务的深度运营提供支撑。4本期项目建设重点技术方面信息组装与个性配数据质量的全程把控知识库的构建系统间互动加强流程的穿越数据运营的理念渗透到系统的技术实现中多维分析跨业务、跨平台融合业务分析对于业务运营全方位的支撑逐步增强构建基于云计算的数据平台实现增值业务统一数据视图技术方面数据质量的全程把控业务方面KPI、综合查询、报表分析5目录建设目标与重点1总体方案介绍3关键技术介绍4成功案例介绍5数据分析支撑工作方案6实施方案和平台发展方向7平台可移植性267平台可移植性说明层次产品名称适应软件平台适应硬件平台开发语言备注数据获取Informaticawindows/linux/unix等HP/IBM/DELL等JAVA第三方ETL产品数据存储EDW与平台无关与平台无关JAVA\PROC第三方产品DM与平台无关与平台无关JAVA\PROC第三方产品ORACLEwindows/linux/unix等HP/IBM/DELL等JAVA第三方产品[注:ORACLE和IBMDB2二者选一]IBMDB2windows/linux/unix等HP/IBM/DELL等JAVA第三方产品[][注:ORACLE和IBMDB2二者选一]数据应用BIwindows/linux/unix等HP/IBM/DELL等JAVA第三方BI产品IDAPwindows/linux/unix等HP/IBM/DELL等JAVA自主研发产品(自助取数)Tomcatwindows/linux/unix等HP/IBM/DELL等JAVA开源平台数据展现Portalwindows/linux/unix等HP/IBM/DELL等JAVA自主研发产品1)第三方软件（Informatica、Oracle、DB2、BI等）不直接依赖于具体的硬件平台、操作系统和特定的数据库；2)自研产品（Portal、IDAP、EDW、DM）是基于JAVA开发的，具有跨平台性；目录建设目标与重点1平台可移植性2关键技术介绍4成功案例介绍5数据分析支撑工作方案6实施方案和平台发展方向7总体方案介绍38数据采集：从NMSC、集团IT系统、全国接入及管理网管系统及全国和各省增值业务平台采集相关数据。

数据存储：对以上各数据源的数据经过清洗、转换，按照各数据域主题组织、存储，成为决策分析应用的基础。数据应用：从业务运营全流程的各个环节提供相关应用分析，为增值业务的深度运营提供全面的数据支撑。数据展现：为使用人员提供统一门户，通过报表、图形等形式简便、快捷地访问系统中的各种数据并进行各种分析预测操作。总体方案介绍-总体架构910总体方案介绍-功能架构总体方案介绍-设备逻辑架构VAS-ODMS基于PC云解决方案云内云外灵活部署、安全且易于扩展；采用数据按需服务思想，原始文件进去，分析报告出来；UNIX小型机按处理能力分成2个硬件分区，分别部署数据库和接口服务器，两台构成集群环境；多个PC服务器构成云计算环境，提供ETL数据整合服务和应用分析展现服务。总体方案介绍-设备逻辑架构-云计算PC云逻辑架构VMWARE虚拟化物理PC，构造多虚拟节点群，建议按1:2虚拟化；虚拟节点部署ETL、OLAP、REPORT、应用平台程序；配置ETL和应用平台软件，构成集群和高可用性能力；根据数据处理规模，配置8个虚拟节点构成计算云，4个集群，4个高可用性；根据系统用户和应用规模，配置6个节点构成应用云，实现负载均衡；可选用一台未作虚拟化PC，作为云计算管控平台及部署其它管控平台。13总体方案介绍-应用分布式架构LoadBalancingRedundantCluster作为应用集群请求指派，并根据应用节点访问压力的大小进行负载均衡；LoadBalancing分为主从两个实例，以备在运行的实例出现问题是可由后备实例接管；ApplicationServers包括Web应用、报表服务、OLAP服务等，都以冗余的方式进行分布式部署；DatabaseRedundantCluster冗余部署数据库。14总体方案介绍-设备部署架构分项设备型号配置要求数量数据库/接口服务器HPRX8640同档分区一：16c64G（100万tpmc）分区二：4c16G（20万tpmc）2应用服务器HPBL685c同档每台刀片服务器配置:4CPU(4Core)/64G内存/2*146G硬盘(其中4台刀片安装RedHat企业版5.3操作系统,另外4台安装windows2008server系统)8SAN交换机HP8/24SANSwitch同档24口光纤交换机2磁盘阵列HPEVA6400同档25T容量1磁带库HPMSL8096同档5个LOT4驱动器，55T容量,MSBF:200万次MTBF:100,000小时1防火墙华为1000E-U2同档每台配置4个多模GE光口2核心交换机华为9303同档每台8个多模GE光口，24GE电口2PC台式机普通PCIntel酷睿2代1.86GHz或以上，双核处理器，2MB缓存或以上；4GB或以上；320GB高速硬盘；19”LCD；32速DVDCOMBO；10/100/1000MB自适应以太网网卡2数据库ORACLE10g或DB2数据库(2cpulicenses)forRAC1Windows操作系统WinSvrEnt2008R2CHNSOLPNLwindows操作系统,25个CAL（连接许可License）6Linux操作系统RedHat企业版5.3Linux操作系统(4cpulicenses)4OLAPServerSQLSvrStd2008R2CHNSOLPNL1ProcOLAPServer,提供多维存储和OLAP操作底层支持1报表工具biV6.0OLTP和OLAP的前端报表应用和分析展示工具及门户平台1ETL工具InformaticaPowerCenter8.6ETL工具,数据集中整合、转换、清洗和装载1虚拟化软件Vmware虚拟化软件1备份软件HeartsOneBackupEnterpriseEditionV8.0备份软件1杀毒软件McAfee防病毒软件6WEB中间件Tomcat6.0Web应用平台（免费）1目录建设目标与重点1平台可移植性2总体方案介绍3成功案例介绍5数据分析支撑工作方案6实施方案和平台发展方向7关键技术介绍415关键技术介绍-数据模型16数据模型采用分层架构，分为缓存层、整合层、汇总层、视图层、应用层，元数据层对整个数据生命周期进行管控。关键技术介绍-Informatica(体系架构)RepositoryServicesGlobalRepositoryLocalRepositoryMetadataDirectoryEngineVisualizationServerPowerCenterRepositoryClientToolsDesignViewManageXML,Messaging,

andWebServicesPackagedApplicationsRelationalandFlatFilesMainframe

andMidrangeInformaticaDataIntegrationPlatformProviderXML,Messaging,

andWebServicesPackagedApplicationsRelationalandFlatFilesMainframe

andMidrangePortals,Dashboards,

andReportsConsumerIntegrationServiceUNIX(AIX,HPUX,Solaris,Linux)WindowsNT4.0,2000,2003DesignerNavigatorMetadataDiscoveryCollaborationToolsWorkflowMonitorDashboardsMetadataReporterVisualizationToolsRepositoryManagerMetadataAnalysisAdministrationConsoleWorkflowManagerPowerExchangePowerCenterConnectsSAPBWServiceWebServiceHub17关键技术介绍-Informatica(接口采集)抽取预处理加载NMSC网管WAP平台189平台工作流集中调度18关键技术介绍-Informatica(ETL工作流)19关键技术介绍-Informatica（网格）20关键技术介绍-Informatica（网格）通过ETL集群向导，对虚拟化出的四台ETL服务器进行网格化，设计集群服务。21关键技术介绍-Informatica(分区并向)22目录建设目标与重点1平台可移植性2总体方案介绍3关键技术介绍4数据分析支撑工作方案6实施方案和平台发展方向7成功案例介绍52324成功案例介绍－广东电信省ODS－总体介绍数据质量CRM系统计费系统结算系统ETL汇总数据域临时缓存域数据共享和数据访问域ODS核心层源系统映射层DM层(C网集市、各中心数据集市)EDW营销分析(整合TMAS和CMMS的统计功能)专题分析主题分析KPI统计报表渠道分析智能取数数据门户接入……ODSEDW用户资料数据量：支持全省5000万用户（含C网）；数据存储量：ODS15T左右；EDW40T左右；数据处理量：每天处理18000万条左右记录数，以提供管理层每日快报、关键业务日监测表等应用每月处理数据量：5亿条左右记录，在用功能点超千种：每月8日12点前提供管理层运营分析会材料－信息月报（白皮书共326张，其中业务量白皮书：193张，收入白皮书：133张）每月5日12点前完成全业务指标体系统计（统计指标：361299个，其中移动：111701个，固网：249598个）每月5日12点前整合全省BSS核心系统业务数据，为业务部门提供全省统一口径的固定报表及动态报表展示，提供全省统一报表658张，其中电定报表131张；多维分析主题共102个，其中移动：38个，固网：64个实用情况：每日点击率达到2万以上；报表日均访问次数：850次，高峰期报表日访问1713次，日均多维点击500人次；接口：对外系统接口有30个左右；成功案例介绍－广东电信省ODS－每日快报2526成功案例介绍－广东电信省ODS－管理层看数27成功案例介绍－广东电信省ODS－多维分析28成功案例介绍－广东电信省ODS－关联钻透分析29成功案例介绍－广东电信省ODS－多维分析30成功案例介绍－广东电信省ODS－元数据搜索31

客户关怀客户维系客户挽留数据仓库／客户集市闭环流程效果评估目标筛选方案审批营销执行策划执行客户理解数据集中方案设计脚本设计模型应用定义问题数据准备模型构建成功案例介绍－针对性营销及维系挽留系统－闭环流程根本上解决了分析决策与市场营销不畅的问题，业务分析/人工挖掘的有价值知识，能直达渠道一线，形成营销/维系具体工单，并跟踪评估，持续完善，实现“精准营销”。截至目前已完成移动/宽带客户细分、流失预警、欠费提醒、交叉销售、价值提升等多个模型，并在广东全省推广，均取得较好效果。32成功案例介绍－针对性营销及维系挽留系统－功能架构省维挽系统由客户挖掘、营销策划、工单流转和营销评估四个功能域组成客户挖掘和营销评估功能域由EDW系统实现营销策划、工单流转、客户管理、工作支持、营销共享池在省维挽系统实现在EDW系统上实现的功能，界面最终集成到省维挽系统，保证客户经理的使用感知33成功案例介绍－针对性营销及维系挽留系统－工作界面管理人员首页重点展示：团队任务、团队绩效指标VIP客户经理首页重点展示：待办工单、客户分布、个人绩效指标34成功案例介绍－针对性营销及维系挽留系统－价值提升模型我们面临的价值问题客户价值象限？客户潜在价值如何？如何提升客户价值？有哪些手段？能否提供高潜在价值客户名单和提升建议？能否提供当前高价值客户名单和关怀建议？价值提升模型能做什么模型分析报告会给出当前客户当前价值、客户潜在价值，客户价值象限分布；提供高潜在价值客户名单，并给出价值提升建议；提供高价值客户名单，并给出延长高价值建议；模型必备条件价值业务理解，给出当前价值、潜在价值业务定义；客户价值相关数据：基本资料、业务使用、客户出账、行为活跃趋势；35成功案例介绍－针对性营销及维系挽留系统－价值提升模型模型关键变量基础变量（输入）在网时长城乡标识服务分群会员级别服务等级行业分类套餐档次是否融合套餐余额积分衍生变量（输入）消费水平语音ARPU均值、趋势增值ARPU均值、趋势上网时长均值、趋势电信产品种类电信产品个数新业务接受度客服咨询次数异网ARPU均值、趋势短信发送次数、趋势彩信发送次数、趋势特征变量（输出）价值象限价值敏感度特征描述提升建议＋＝常用算法

Kohonen、Kmeans、时间序列36成功案例介绍－针对性营销及维系挽留系统－价值提升模型惠州政企客户价值提升模型根据“物以类聚，人以群分”的思想对惠州政企客户进行聚类；对客户价值象限进行分区，结合每象限客户使用业务的排名进行业务推送；政企客户经理根据目标客户名单和推荐列表展开提升工作；产品名称推荐群数推荐客户数互联星空371643企业信息上网服务321581查询转接301414CENTREX群组411400企业邮箱＋网络硬盘套餐261307企业总机311247工商电子黄页会员221224宽乐通信16779商务领航产品系列7531模型应用应用效果客户维系后，成功推荐产品的比例达到45％，大大提升营销效果客户价值平均ARPU上升了28％，效果明显；37成功案例介绍－东莞电信云CRM－总体介绍关键创新点1.云端服务提供模式，用户无需服务器，实现SaaS(软件即服务)，用户只需简单操作即可开户使用2.云计算可租赁服务模式，虚拟化资源，实现按需使用，资源合理分配3.可容纳百万级以上用户数据，具备高可扩展性、可用性及容灾性4.瘦客户端，用户可以通过普通廉价PC接入使用，同时提供手机终端应用，实现移动办公。38成功案例介绍－东莞电信云CRM－逻辑架构

为中小商企提供更好的服务提高用户粘性体现并发挥固定电话、宽带、手机移动终端三者结合的优势，提高竞争力合理营运模式下可直接增加营收通过增值服务增值为完善物联网提供补充，并从中获得更大价值39成功案例介绍－东莞电信云CRM－关键技术分布式文件系统TOMCAT集群数据库集群40成功案例介绍－东莞电信云CRM－示例目录建设目标与重点1平台可移植性2总体方案介绍3关键技术介绍4成功案