亚信移动决策支持系统BI交流文件(经营分析)

经营分析系统技术交流2002年4月

邦讯科技有限公司中国移动集团公司Agenda系统背景系统总体框架业务功能技术方案实施与发展建议电信行业背景及挑战新一轮电信业的竞争将全面展开WTO,国外电信运营商及资本逐步进入国内电信重组中国移动面临挑战ARPU逐步下降,用户数的高速增长如何转化为利润的增长业务受两面夹击,高端:CUCDMA,低端:CUGSM,“小灵通”经营理念的转变保障网络基础设施建设，重视业务经营与运行突出“以客户为中心，以市场为导向”中国移动业务发展战略实施业务领先，努力拓展市场积极扩张市场,保持话音业务的市场份额和移动数据业务领先实施服务领先，保持高端品牌优势抢夺高端细分市场，减缓ARPU下降，保持中国移动收入持续增长各省BOSS集中化改造在年内完成少数省已经开始建设经营分析系统试点集团公司一级业务支撑中心全国结算中心，国际清算门户...全国客服枢纽，全国帐务枢纽全国数据中心/经营分析系统业务支撑系统现状经营分析系统的必要性全面了解中国移动集团运营支撑系统状况了解宏观的，长期，全局的业务状况及发展规律对一些全国性业务的多角度分析分析用户、业务发展趋势,分析企业的KPI与BOSS相结合,是业务运营支撑系统发展的趋势支持市场营销与服务的工具，为运营决策提供支持有利对市场竞争快速反应，体现以客户为中心的经营理念提升内部信息化及管理水平Agenda系统背景系统总体框架业务功能技术方案实施与发展建议集团公司经营分析系统外部关系全国客服枢纽全国帐务枢纽全国清算中心国际清算门户集团公司经营分析系统省公司经营分析系统省公司经营分析系统省公司BOSS系统省公司BOSS系统集团一级BOSS中心集团公司数据中心集团接口元数据、系统管理、系统监控元数据集团公司经营分析系统体系结构清算中心客服枢纽账务枢纽省公司BOSS系统抽取清洗转换传输加载经营分析系统数据仓库规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型省公司经营分析系统元数据、系统管理、系统监控元数据计费系统结算系统营帐客服财务/OA抽取清洗转换传输加载经营分析系统数据仓库规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型网管系统省公司经营分析系统体系结构集团与省经营分析系统的区别

集团公司经营分析系统分析宏观的，全局的，长期的业务状况及趋势体现集中管理，发挥全局优势一些全国性的业务分析，如国际结算分析，漫游分析，集团大客户分析等。有利于促进全国性业务的发展对各省业务发展的评估及比较,监控各省的业务运营状况省经营分析系统侧重本辖区内的业务经营分析分析角度及层面相对较细与BOSS系统形成紧密的闭环,直接影响客户经营分析系统OmniVisionOmniVision是我公司针对移动的完善的电信级经营分析及决策支持系统平台。OmniVision采用数据仓库、ETL、OLAP、即席查询及数据挖掘等技术，结合移动业务的深厚经验，针对用户分析、业务分析、收益分析、大客户分析、营销分析、竞争分析、服务质量分析、合作方分析、新业务分析主题建立分析模型及专题分析Agenda系统背景系统总体框架

业务功能技术方案实施与发展建议应用服务器/WebServer集团经营分析系统业务功能模块漫游和高额数据结算数据BOSS系统数据省经营分析数据智能网数据外部系统数据网管MISOA数据数据转换ETL模块业务主题分析前端用户/浏览器市场服务质量模块全国用户分析模块全国业务分析模块全国收益分析模块营销分析模块市场竞争分析模块SP和结算分析模块漫游和欺诈分析模块增值和智能网业务分析模块全国大客户分析模块专题分析全国业务(含新业务)专题市场竞争、高额风险专题全国大客户发展、异动专题集团公司综合决策分析模块数据仓库OLAPServer集团公司分析主题（一）

各省经营情况分析客户发展情况分析业务发展情况分析收益情况分析市场竞争情况分析服务质量分析营销管理分析

分析重点时间地域特征……分析了解各省运营状况，制定宏观政策分析竞争对手动态，量身定制市场战略分析夹缝市场，及时推广新业务找出地区经济差异性、时间序列的趋势变化、群体特征分布、消费的季节变化集团公司分析主题（二）总部业务分析智能网业务分析SP、虚拟运营商分析全国结算分析国际结算分析运营商竞争分析漫游、高额分析IP、VOIP业务分析VPMN业务分析新业务分析

分析重点业务量发展趋势地域差异通话行为群体特征………..总部业务、资源合理控制发展调整结算结构，提高收益发展合作伙伴，战略联盟及时预防欺诈风险分析总部业务发展趋势、结算收益变化、地域通话特征、风险的地域时间分布全国大客户分析大客户构成分析大客户发展分析大客户异动分析大客户欠费分析

分析重点地域差异通话行为群体特征流失特征………..制定全国性集团大客户优惠政策刺激不同层次大客户，推荐大客户加盟提高大客户服务质量，预防流失推出大客户专项服务，提高收益集团公司分析主题（三）分析整体大客户发展趋势、地域通话特征、群体特征分布、集团公司专题分析全国业务(含新业务)专题漫游、欺诈、高额风险专题市场竞争专题全国大客户发展、异动专题

关注重点客户发展趋势的潜在规律业务发展趋势的潜在规律收益发展和风险预测的潜在规律…挖掘、刺激潜在集团大客户发布欺诈、流失告警通知营销策略(新产品、新业务)的评估…应用服务器/WebServer省经营分析系统业务功能模块结算数据BOSS系统数据外部系统数据MIS和OA数据数据转换ETL模块业务主题分析服务质量模块用户分析模块业务分析模块收益分析模块市场营销分析模块市场竞争分析模块SP和结算分析模块增值和智能网业务分析模块大客户分析模块专题分析业务(含新业务)专题市场、竞争专题大客户发展、异动专题省综合决策分析模块网管系统数据客户专题分析一级经营分析数据数据仓库OLAPServer前端用户/浏览器省经营分析系统功能主题分析客户情况分析业务发展分析收益情况分析市场竞争分析服务质量分析营销管理分析大客户分析新业务分析SP、虚拟运营商、结算分析专题分析客户分析大客户分析市场竞争分析营销策略评估结算分析省综合决策分析Agenda系统背景系统总体框架业务功能技术方案实施与发展建议集团公司经营分析系统建议拓扑结构省级经营分析系统建议拓扑结构数据仓库及工具软件主要使用支持数据（仓）库SybaseIQOLAPServerETL工具软件AscentialDataStagePowerMartCognos前端展现工具数据挖掘工具SASEMBOOracleWarehouseBuilderNCRTeradataIBMDB2WarehouseManagerIBMIntelligentMinerBrioIBMDB2OLAPServerIBMDB2UDB/InformixXPSOracleHyperionEssbaseOLAPCognos数据仓库逻辑结构DataWarehouseODS(StagingArea)StarSchema(Aggr)MiningDataModelReportDataModelInterface&ETLProcessOLAPCUBEDataMiningReport/Ad-hoc展示输出数据仓库设计9要素—RalphKimball业务需求分析以确定相应的Facttable(规范，设计）Facttable的粒度每个Facttable中的维度量,包括预计算的度量维的属性：完整的描述，确切的术语如何跟踪并处理缓慢变化的维聚集表，MiniDimension,物理存储策略等数据仓库的历史时间及相应处理策略(如CDR的保留时间等)哪些数据最迫切需要采集并装载到数据仓库中OmniVision数据仓库设计数据仓库分层设计,保证模型的稳定性及灵活性原始数据初步清洗，转换后的数据(OperationalDataStore)事实表及维表(SnowflakeSchema),以及历史数据DataMiningmodel,StarSchema,AggregateTable汇总聚集表

OLAPCube粒度的多重级别如：保存6个月内的CDR明细/6个月以上的CDR汇总保存动态维(DynamicDimension)灵活处理业务需求的变化动态增加组合条件的维度数据仓库设计—高性能的TB级电信级数据仓库参数化管理OLAP稀疏维，紧密维一般一个CUBE维数<=11DrillThroughdetaildatainDW数据分割，VLDB技术分表，分区设计,提高大数据量的处理效率Hash表分割，表达式表分割…按时间、地理、业务等分割…MiniDimension例如:客户维表可能达几百万条，join效率较低设置客户属性MiniDim，将客户属性拆分到多个较小的维表中，能极大地提高查询性能动态维技术维度1维度2…维度n动态维度量值维表1用户定义的加工、处理维表n动态维的含义在应用时定义,适应需求的灵活变化如选取连续3个月费用下降5%的客户分类，

作为一个维动态维的内容是经加工、处理后的聚合的增加动态维后，数据库结构不发生变化，前端展现程序不用修改…动态维表ETL子系统–数据源集团公司经营分析系统省BOSS系统：用户基本信息网间结算信息帐务信息…省经营分析数据业务主题数据(汇总)用户信息全国中心漫游清算信息,国际结算信息集团用户信息全国IP认证计费业务信息等…省经营分析系统计费/结算系统：计费详单结算数据…营帐系统用户基本信息帐务信息资源信息…客服系统投诉，查询等信息其他系统（逐步）MIS,OA网管等ETL子系统省公司经营分析数据ETL数据抽取引擎省公司BOSS数据集团公司BOSS系统数据●负责与源数据系统的接口●负责抽取规则的制定（源数据、目标数据、映射规则、清洗与转换规则、加载规则等）●负责抽取任务的调度、执行元数据管理、系统管理、系统监控P1P2P3FILE经营分析数据仓库ODSETL-接口方式业务系统数据库FILE经营分析数据仓库ODS1、经营分析系统发出数据请求.3、业务系统返回经营分析系统所需数据.2、业务系统执行数据提取任务:存储过程、触发器、SQL应用等缺点:对业务系统造成安全、性能等方面的问题、实现较麻烦。数据库接口方式1、业务系统定时将经营分析系统所需数据Export为数据文件.2、经营分析系统对数据文件进行ETL等后续操作.优点:不会对业务系统造成安全、性能等方面的问题、易于实现。数据文件接口方式ETL-抽取规则省公司经营分析系统数据ETL数据抽取引擎元数据管理、系统管理、系统监控省公司BOSS系统数据集团公司BOSS系统数据●抽取策略：支持增量抽取方式●抽取规则：用户可根据实际需要自定义抽取规则P1P2P3FILE定义好的抽取程序脚本，包括源数据项、目标数据项、映射规则、转换规则、加载规则等内容，可根据实际需要调整。经营分析数据仓库ODSETL-执行方式ETL数据抽取引擎●执行方式：定义好执行脚本，由系统调度、自动执行●采集周期：采集的周期可以是日、周、月或其他设定日期P1P2P3P1P2P323：3000：3001：30定义好的任务执行脚本，包括执行脚本的执行周期、时间等。业务系统数据库经营分析数据仓库ODSOLAP分析经营分析数据仓库OLAP分析Cube数据联机多维分析使用户在随机的环境中通过不同的角度快速分析数据仓库中的信息（Slice/Dice.Drill-down/Drillup)分析问题的多维视角多维矩阵管理数据(Cube,MOLAP)支持Drill-through,可直接由MDB钻取到RDBMS,平衡业务需求灵活性与性能即席查询模块经营分析数据库仓库1.选择查询内容查询结果2.选择查询条件3.设定显示方式查询目的：查看某类数据的历史状态进行随机统计、自由报表查询方式：GUI界面、支持用户鼠标拖拽用户自主设定查询内容、条件、结果显示方式系统自动生成SQL语句、执行查询统计、显示查询统计结果。支持用户自定义SQL语句监控子系统ETL数据抽取引擎元数据管理、系统管理、系统监控P1P2P3FILE●负责监控ETL阶段各任务执行情况：包含任务名称、开始时间、结束时间、当前状态等。●负责监控分析预处理阶段各任务执行情况，自动维护ETL与分析预处理阶段数据的依赖关系，将ETL的失败局限在一定范围内。●记录各阶段任务处理日志，支持回滚、断点重载功能。分析报表汇总数据数据挖掘集成数据OLAP分析Cube数据经营分析数据仓库ODS元数据管理管理数据仓库系统的数据贯穿经营分析系统的各个环节驱动数据的装载、存储管理和分析展现数据源的描述ETL调度,控制数据仓库字典管理OLAP结构描述系统的处理单元由元数据驱动系统管理●系统维护 包括功能模块数据抽取接口（数据源类型与数据格式）的定义功能、安全管理功能、数据备份策略的选择与实现等。●权限管理

对于普通用户来讲，可以管理其享有的资源及访问的范围等；对于系统管理员来讲，可以管理其拥有的权限，如：对信息发布、审批、撤消、编辑的权限等。●参数管理

参数管理主要是对系统中所需要的的各种参数及阈值进行管理，如进程调度参数、决策参数、数据管理参数等。理解业务关系、数据分布，组织挖掘数据建立挖掘模型，模型调优、评价，确定最佳算法应用模型于数据仓库对挖掘结果进行量化的评价将量化结果应用业务系统数据仓库MiningData挖掘模型评价应用时间序列预测分类……数据挖掘（寻找潜在规律）数据挖掘应用客户分类/价值评估(CustomerLifetimeValue)分析客户的综合价值，综合收益和风险对客户消费进行分群

客户信用模型客户流失分析(Churn)分析主动离网客户的特征及因素，离网客户在这些因素上的分布情况；得出潜在离网客户群(高离网概率的客户群)；客户挽留价值模型挽留的概念：两个高，高费用、高离网概率、低欠费概率；目的：挖出高消费群中主动拆机客户，这些客户能够带来高收益并且有离网趋势，最值得挽留

大客户分析模型潜在大客户模型

离网客户模型

产品分析（Cross/UpSell)哪些客户群体倾向于使用特定的产品增强客户分群及特征分析，及产品驱动的促销计划多年的移动业务的积累深刻理解移动业务，为挖掘提供优质的数据保证实际的业务应用积累大量的挖掘知识库数据挖掘业务经验为移动业务提供科学、合理、准确的挖掘模型和业务系统完整的结合利用多种分析手段方式，能过提供全面的信息数据挖掘的基础和应用前端展现系统的用户接口，最终用户采用浏览器界面位于B/A/S三层结构的瘦(Thin)客户端以图形或报表的方式显示或打印,EIS支持Dashboard(仪表板),告警等(2)时段分析(1)业务总量分析(3)竞争分析省经营分析系统存储容量估算(600万用户)总计：6.5TB注：如CDR按180字节算，保存6个月，则存储容量为5.5TB如CDR按180字节算，保存3个月，则存储容量为3.8TB省经营分析系统建议配置(600万用户)Agenda系统背景系统总体框架业务功能技术方案

实施与发展建议总体规划，分步实施，滚动发展建立集团公司经营分析系统平台体系及流程，包括硬件及软件框架建立集团公司经营分析系统逻辑模型（LDM），包括分析主题、数据层次、维度、颗粒度、结构，以及分析模型、挖掘模型等。逐步引入各省BOSS数据、经营分析系统数据、集团公司一级BOSS系统数据，不断丰富集团公司经营分析系统数据。逐步进行相关主题的分析,进一步完善经营分析模型。以经营分析系统及数据仓库为依托，加强各个系统之间的互动，开展新业务，提高企业核心竞争力。统一制定省与集团公司的接口规范规范数据内容及格式，便于实施省内BOSS与经营分析系统之间的接口规范由各省确定建设步骤与各省同步建设,互相呼应；协调及数据源问题,制定接口标准在各省之后建设?向分析型CRM方向发展，与BOSS及运作型CRM形成闭环系统实施建议移动运营商CRM总体架构建议数据仓库(DataWarehouse)分析模型（AnalyticalModel)客服代理商营业厅网上营业厅SMS\emailFax/Letter等OLAP分析报表/即席查询数据挖掘高层领导信息系统EIS/DSS交叉/升级销售营销活动管理CampaignMgmt客户流失管理市场自动化员工管理销售自动化大客户服务/管理营业/帐务DirectInteraction分析型CRM/经营分析系统BOSS平台及扩展代理商管理支持服务网管系统HR,MIS,OA,财务等ThePost计费/结算运作型CRMClosed-Loop闭环客户交流渠道分析型CRM与运作型CRM的关系数据采集/ETL分析报表&OLAP数据挖掘数据仓库代理商管理服务销售自动化活动执行营销活动设计/管理用户自助服务客户客户联系中心

BOSS平台及扩展

OmniCRMSolution(分析型)框架

(以OmniVision为核心)营销活动设计/管理(CampaignMgmt)客户流失管理(ChurnMgmt)交叉销售，Up-Sell业务系统数据数据抽取/转换/装载数据仓库及分析模型ETL传输抽取清洗装载转换元数据Metadata计费系统营帐系统HR,MIS,OA,财务等客服网管系统OLAP,分析报表,即席查询,数据挖掘O