移动决策支持系统BI交流文件经营分析

1、2002年年4月月邦讯科技有限公司邦讯科技有限公司 新一轮电信业的竞争将全面展开新一轮电信业的竞争将全面展开 WTO, 国外电信运营商及资本逐步进入国内 电信重组 中国移动面临挑战中国移动面临挑战 ARPU 逐步下降, 用户数的高速增长如何转化为利润的增长 业务受两面夹击, 高端: CU CDMA ,低端: CU GSM, “小灵通” 经营理念的转变经营理念的转变 保障网络基础设施建设，重视业务经营与运行 突出“以客户为中心，以市场为导向” 中国移动业务发展战略中国移动业务发展战略 实施业务领先，努力拓展市场 积极扩张市场,保持话音业务的市场份额和移动数据业务领先 实施服务领先，保持高端品牌优

2、势 抢夺高端细分市场，减缓ARPU下降，保持中国移动收入持续增长 各省 BOSS集中化改造在年内完成 少数省已经开始建设经营分析系统试点 集团公司一级业务支撑中心 全国结算中心，国际清算门户. 全国客服枢纽，全国帐务枢纽 全国数据中心/经营分析系统q 全面了解中国移动集团运营支撑系统状况 了解宏观的，长期，全局的业务状况及发展规律 对一些全国性业务的多角度分析q 分析用户、业务发展趋势, 分析企业的KPIq 与BOSS相结合, 是业务运营支撑系统发展的趋势q 支持市场营销与服务的工具，为运营决策提供支持q 有利对市场竞争快速反应，体现以客户为中心的经营理念q 提升内部信息化及管理水平 系统背景

3、系统背景 业务功能业务功能 技术方案技术方案 实施与发展建议实施与发展建议集团公司经营分析系统外部关系集团公司经营分析系统外部关系全国客服枢纽全国客服枢纽全国帐务枢纽全国帐务枢纽全国清算中心全国清算中心国际清算门户国际清算门户省公司省公司BOSS系统系统省公司省公司BOSS系统系统集团一级BOSS中心集团公司数据中心集团接口集团接口元数据、系统管理、系统监控元数据、系统管理、系统监控集团公司经营分析系统体系结构集团公司经营分析系统体系结构抽取清洗转换传输加载规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型元数据、系统管理、系统监控

4、元数据、系统管理、系统监控抽取清洗转换传输加载规划设计ThePost外部数据应用系统建模多维分析数据挖掘预定义报表即席查询数据源ETL数据存储数据展现应用模型省公司经营分析系统体系结构省公司经营分析系统体系结构 集团公司经营分析系统集团公司经营分析系统 分析宏观的，全局的，长期的业务状况及趋势 体现集中管理，发挥全局优势 一些全国性的业务分析，如国际结算分析，漫游分析，集团大客户分析等。有利于促进全国性业务的发展 对各省业务发展的评估及比较, 监控各省的业务运营状况 省经营分析系统省经营分析系统 侧重本辖区内的业务经营分析 分析角度及层面相对较细 与BOSS系统形成紧密的闭环, 直接影响客户

5、OmniVision是我公司针对移动的完善的电信级经营分析及决策支持系统平台。 OmniVision采用数据仓库、ETL、OLAP、即席查询及数据挖掘等技术， 结合移动业务的深厚经验，针对用户分析、业务分析、收益分析、大客用户分析、业务分析、收益分析、大客户分析、营销分析、竞争分析、服务质量分析、合作方分析、新业务分户分析、营销分析、竞争分析、服务质量分析、合作方分析、新业务分析析主题建立分析模型及专题分析 系统背景系统背景 系统总体框架系统总体框架F 技术方案技术方案 实施与发展建议实施与发展建议应用服务器应用服务器 /Web Server漫游和高额数据结算数据BOSS系统数据省经营分析数据

6、智能网数据外部系统数据网管MISOA数据数据转换数据转换ETLETL模块模块业务主题分析业务主题分析前端用户/浏览器市场服务质量模块市场服务质量模块全国用户分析模块全国用户分析模块全国业务分析模块全国业务分析模块全国收益分析模块全国收益分析模块营销分析模块营销分析模块市场竞争分析模块市场竞争分析模块SPSP和结算分析模块和结算分析模块漫游和欺诈分析模块漫游和欺诈分析模块增值和智能网业务分析模块增值和智能网业务分析模块全国大客户分析模块全国大客户分析模块专题分析专题分析全国业务全国业务( (含新业务含新业务) )专题专题市场竞争、高额风险专题市场竞争、高额风险专题全国大客户发展、异动专题全国大客

7、户发展、异动专题集团公司综合决策分析模块集团公司综合决策分析模块 各省经营情况分析 客户发展情况分析 业务发展情况分析 收益情况分析 市场竞争情况分析 服务质量分析 营销管理分析 分析重点 时间 地域 特征 分析了解各省运营状况，制定宏观政策分析了解各省运营状况，制定宏观政策分析竞争对手动态，量身定制市场战略分析竞争对手动态，量身定制市场战略分析夹缝市场，及时推广新业务分析夹缝市场，及时推广新业务找出地区经济差异性、时间序列的趋势变化、群体特征分布、消费的季节变化找出地区经济差异性、时间序列的趋势变化、群体特征分布、消费的季节变化 总部业务分析智能网业务分析SP、虚拟运营商分析全国结算分析国际

8、结算分析运营商竞争分析漫游、高额分析IP、VOIP业务分析VPMN业务分析新业务分析 分析重点 业务量 发展趋势 地域差异 通话行为 群体特征 .总部业务、资源合理控制发展总部业务、资源合理控制发展调整结算结构，提高收益调整结算结构，提高收益发展合作伙伴，战略联盟发展合作伙伴，战略联盟及时预防欺诈风险及时预防欺诈风险分析总部业务发展趋势、结算收益变化、地域通话特征、风险的地域时间分布分析总部业务发展趋势、结算收益变化、地域通话特征、风险的地域时间分布 全国大客户分析 大客户构成分析 大客户发展分析 大客户异动分析 大客户欠费分析 分析重点 地域差异 通话行为 群体特征 流失特征 .制定全国性集

9、团大客户优惠政策制定全国性集团大客户优惠政策刺激不同层次大客户，推荐大客户加盟刺激不同层次大客户，推荐大客户加盟提高大客户服务质量，预防流失提高大客户服务质量，预防流失推出大客户专项服务，提高收益推出大客户专项服务，提高收益分析整体大客户发展趋势、地域通话特征、群体特征分布、分析整体大客户发展趋势、地域通话特征、群体特征分布、全国业务(含新业务)专题漫游、欺诈、高额风险专题市场竞争专题全国大客户发展、异动专题 关注重点关注重点 客户发展趋势的潜在规律 业务发展趋势的潜在规律 收益发展和风险预测的潜在规律挖掘、刺激潜在集团大客户挖掘、刺激潜在集团大客户发布欺诈、流失告警通知发布欺诈、流失告警通知

10、营销策略营销策略( (新产品、新业务新产品、新业务) )的评估的评估应用服务器应用服务器 /Web Server结算数据BOSS系统数据外部系统数据MIS和OA数据数据转换数据转换ETLETL模块模块业务主题分析业务主题分析服务质量模块服务质量模块用户分析模块用户分析模块业务分析模块业务分析模块收益分析模块收益分析模块市场营销分析模块市场营销分析模块市场竞争分析模块市场竞争分析模块SPSP和结算分析模块和结算分析模块增值和智能网业务分析模块增值和智能网业务分析模块大客户分析模块大客户分析模块专题分析专题分析业务业务( (含新业务含新业务) )专题专题市场、竞争专题市场、竞争专题大客户发展、异动

11、专题大客户发展、异动专题省综合决策分析模块省综合决策分析模块网管系统数据客户专题分析客户专题分析一级经营分析数据前端用户/浏览器 主题分析主题分析 客户情况分析 业务发展分析 收益情况分析 市场竞争分析 服务质量分析 营销管理分析 大客户分析 新业务分析 SP、虚拟运营商、结算分析 专题分析专题分析 客户分析 大客户分析 市场竞争分析 营销策略评估 结算分析 省综合决策分析省综合决策分析 系统背景系统背景 系统总体框架系统总体框架 业务功能业务功能 实施与发展建议实施与发展建议省级经营分析系统建议拓扑结构省级经营分析系统建议拓扑结构数据仓库及工具软件数据仓库及工具软件主要使用主要使用支持支持数

12、据（仓）库数据（仓）库 Sybase IQOLAP ServerETL 工具软件工具软件AscentialDataStagePowerMartCognos 前端展现工具前端展现工具数据挖掘工具数据挖掘工具SAS EM BO Oracle Warehouse BuilderNCR TeradataIBM DB2 Warehouse ManagerIBM Intelligent MinerBrioIBM DB2 OLAP ServerIBM DB2 UDB/Informix XPSOracleHyperion Essbase OLAPCognos数据仓库逻辑结构数据仓库逻辑结构Data Wareh

13、ouseODS(Staging Area)Star Schema(Aggr)Mining Data ModelReport Data ModelInterface & ETL ProcessOLAP CUBEData MiningReport/Ad-hoc展示输出展示输出n业务需求分析以确定相应的Fact table( 规范，设计）nFact table的粒度n每个Fact table中的维n度量,包括预计算的度量n维的属性：完整的描述，确切的术语n如何跟踪并处理缓慢变化的维n聚集表，MiniDimension, 物理存储策略等n数据仓库的历史时间及相应处理策略(如CDR的保留时间等)

14、n哪些数据最迫切需要采集并装载到数据仓库中 数据仓库分层设计, 保证模型的稳定性及灵活性 原始数据 初步清洗，转换后的数据(Operational Data Store) 事实表及维表(Snowflake Schema), 以及历史数据 Data Mining model, Star Schema, Aggregate Table 汇总聚集表OLAP Cube 粒度的多重级别 如：保存6个月内的CDR明细 / 6个月以上的CDR汇总保存 动态维(Dynamic Dimension) 灵活处理业务需求的变化 动态增加组合条件的维度高性能的高性能的TB 级电信级数据仓库级电信级数据仓库 参数化管理

15、 OLAP 稀疏维，紧密维 一般一个CUBE维数=11 Drill Through detail data in DW 数据分割， VLDB技术 分表，分区设计, 提高大数据量的处理效率 Hash 表分割，表达式表分割 按时间、地理、业务等分割 MiniDimension 例如:客户维表可能达几百万条，join效率较低 设置客户属性MiniDim，将客户属性拆分到多个较小的维表中，能极大地提高查询性能 动态维的含义在应用时定义,适应需求的灵活变化如选取连续3个月费用下降5%的客户分类， 作为一个维 动态维的内容是经加工、处理后的聚合的 增加动态维后，数据库结构不发生变化，前端展现程序不用修改

16、集团公司经营分析系统集团公司经营分析系统 省BOSS系统： 用户基本信息 网间结算信息 帐务信息 省经营分析数据 业务主题数据(汇总) 用户信息 全国中心 漫游清算信息, 国际结算信息 集团用户信息 全国IP认证计费业务信息等 省经营分析系统省经营分析系统 计费/结算系统： 计费详单 结算数据 营帐系统 用户基本信息 帐务信息 资源信息 客服系统 投诉，查询等信息 其他系统（逐步） MIS,OA 网管等省公司省公司经营分析数据经营分析数据ETL数据抽取引擎数据抽取引擎省公司省公司BOSS数据数据集团公司集团公司BOSS系统数据系统数据负责与源数据系统的接口负责抽取规则的制定（源数据、目标数据、

17、映射规则、清洗 与转换规则、加载规则等）负责抽取任务的调度、执行元数据管理、系统管理、系统监控元数据管理、系统管理、系统监控P1P2P3FILE业务系统业务系统数据库数据库FILEODS1、经营分析系统发出数据请求.3、 业务系统返回经营分析系统所需数据.2、业务系统执行数据提取任务:存储过程、触发器、SQL应用等缺点缺点:对业务系统造成安全、对业务系统造成安全、性能等方面的问题、性能等方面的问题、实现较麻烦。实现较麻烦。 数据库接口方式数据库接口方式1、业务系统定时将经营分析系统所需数据Export为数据文件.2、经营分析系统对数据文件进行ETL等后续操作.优点优点:不会对业务系统造成不会对

18、业务系统造成安全、性能等方面的安全、性能等方面的问题、易于实现问题、易于实现 。 数据文件接口方式数据文件接口方式省公司省公司经营分析系统数据经营分析系统数据ETL数据抽取引擎数据抽取引擎元数据管理、系统管理、系统监控省公司省公司BOSS系统数据系统数据集团公司集团公司BOSS系统数据系统数据抽取策略：支持增量抽取方式抽取规则：用户可根据实际需要自定义 抽取规则P1P2P3FILE定义好的抽取程序脚本，包括源数据项、目标数据项、映射规则、转换规则、加载规则等内容，可根据实际需要调整。ETL-ETL-执行方式执行方式ETL数据抽取引擎数据抽取引擎执行方式：定义好执行脚本，由系统调度、 自动执行采

19、集周期：采集的周期可以是日、周、月 或其他设定日期P1P2P3P1P2P323：3000：3001：30定义好的任务执行脚本，包括执行脚本的执行周期、时间等。业务系统业务系统数据库数据库经营分析经营分析数据仓库数据仓库联机多维分析使用户在随机的环境中通过不同的角度快速分析数据仓库中的信息（ Slice/Dice. Drill-down/Drill up )分析问题的多维视角多维矩阵管理数据(Cube, MOLAP )支持Drill-through, 可直接由MDB钻取到RDBMS, 平衡业务需求灵活性与性能1.选择查询内容选择查询内容2.选择查询条件选择查询条件3.设定显示方式设定显示方式查询

20、目的：查看某类数据的历史状态进行随机统计、自由报表查询方式：GUI界面、支持用户鼠标拖拽用户自主设定查询内容、条件、结果显示方式系统自动生成SQL语句、执行查询统计、显示查询统计结果。支持用户自 定义SQL语句ETL数据抽取引擎数据抽取引擎元数据管理、系统管理、系统监控元数据管理、系统管理、系统监控P1P2P3FILE负责监控ETL阶段各任务执行情况：包含任务名称、开始时间、结束时间、当前状态等。负责监控分析预处理阶段各任务执行情况，自动维护ETL与分析预处理阶段数据的依赖关系，将ETL的失败局限在一定范围内。记录各阶段任务处理日志，支持回滚、断点重载功能。分析报表分析报表汇总数据汇总数据数据

21、挖掘数据挖掘集成数据集成数据OLAP分析分析Cube数据数据 管理数据仓库系统的数据 贯穿经营分析系统的各个环节 驱动数据的装载、存储管理和分析展现 数据源的描述 ETL调度,控制 数据仓库字典管理 OLAP结构描述 系统的处理单元由元数据驱动系统维护系统维护包括功能模块数据抽取接口（数据源类型与数据格式）的定义功能、安全管理功能、数据备份策略的选择与实现等。权限管理权限管理对于普通用户来讲，可以管理其享有的资源及访问的范围等；对于系统管理员来讲，可以管理其拥有的权限，如：对信息发布、审批、撤消、编辑的权限等。参数管理参数管理参数管理主要是对系统中所需要的的各种参数及阈值进行管理，如进程调度参

22、数、决策参数、数据管理参数等。 理解业务关系、数据分布，组织挖掘数据 建立挖掘模型，模型调优、评价，确定最佳算法应用模型于数据仓库对挖掘结果进行量化的评价将量化结果应用业务系统数据仓库Mining Data挖掘模型评价应用时间序列预测分类客户分类客户分类/价值评估价值评估( Customer Lifetime Value) 分析客户的综合价值，综合收益和风险 对客户消费进行分群 客户信用模型客户流失分析客户流失分析(Churn) 分析主动离网客户的特征及因素，离网客户在这些因素上的分布情况； 得出潜在离网客户群(高离网概率的客户群)；客户挽留价值模型客户挽留价值模型 挽留的概念：两个高，高费用

23、、高离网概率、低欠费概率； 目的：挖出高消费群中主动拆机客户，这些客户能够带来高收益并且有离网趋势，最值得挽留 大客户分析模型大客户分析模型 潜在大客户模型 离网客户模型 产品分析（产品分析（Cross/Up Sell) 哪些客户群体倾向于使用特定的产品 增强客户分群及特征分析，及产品驱动的促销计划多年的移动业务的积累多年的移动业务的积累深刻理解移动业务，为挖掘提供优质的数据保证深刻理解移动业务，为挖掘提供优质的数据保证实际的业务应用实际的业务应用积累大量的挖掘知识库积累大量的挖掘知识库数据挖掘业务经验数据挖掘业务经验为移动业务提供科学、合理、准确的挖掘模型为移动业务提供科学、合理、准确的挖掘

24、模型和业务系统完整的结合和业务系统完整的结合利用多种分析手段方式，能过提供全面的信息利用多种分析手段方式，能过提供全面的信息系统的用户接口，最终用户采用浏览器界面位于B/A/S三层结构的瘦(Thin)客户端以图形或报表的方式显示或打印,EIS支持Dashboard(仪表板), 告警等(2)(2)时段分析时段分析(1)(1)业务总量分析业务总量分析(3)竞争分析竞争分析总计：6.5TB注：如CDR按180字节算，保存6个月，则存储容量为5.5TB 如CDR按180字节算，保存3个月，则存储容量为3.8TB 系统背景系统背景 系统总体框架系统总体框架 业务功能业务功能 技术方案技术方案F 总体规划

25、，分步实施，滚动发展总体规划，分步实施，滚动发展建立集团公司经营分析系统平台体系及流程，包括硬件及软件框架建立集团公司经营分析系统逻辑模型（LDM），包括分析主题、数据层次、维度、颗粒度、结构，以及分析模型、挖掘模型等。逐步引入各省BOSS数据、经营分析系统数据、集团公司一级BOSS系统数据，不断丰富集团公司经营分析系统数据。逐步进行相关主题的分析,进一步完善经营分析模型。以经营分析系统及数据仓库为依托，加强各个系统之间的互动，开展新业务，提高企业核心竞争力。 统一制定省与集团公司的接口规范统一制定省与集团公司的接口规范规范数据内容及格式，便于实施省内BOSS与经营分析系统之间的接口规范由各省

26、确定建设步骤建设步骤与各省同步建设, 互相呼应；协调及数据源问题, 制定接口标准在各省之后建设? 向分析型向分析型CRM方向发展，与方向发展，与BOSS及运作型及运作型CRM形成闭环形成闭环分析型分析型CRM/经营分析系统经营分析系统BOSS 平台及扩展平台及扩展网管系统HR, MIS, OA,财务等The Post运作型运作型CRMClosed-Loop 闭环闭环客户交流渠道客户交流渠道数据采集数据采集/ETL分析报表分析报表 & OLAP数据挖掘数据挖掘数据仓库数据仓库代理商管理服务代理商管理服务销售自动化销售自动化活动执行活动执行营销活动设计营销活动设计/管理管理用户自助服务用户自助服务 BOSS 平台及扩展平台及扩展营销活动设计/管理(Campaign Mgmt)客户流失管理(Churn Mgmt)交叉销售，Up-Sell业务系统数据数据抽取/转换/装载数据仓库及分析模型E T L传输抽取清洗装载转换元数据元数据 Metadata计费系统营帐系统HR, MIS, OA