移动决策支持系统BI交流文件经营分析(ppt 54页).ppt

经营分析系统技术交流 2002年4月邦讯科技有限公司 中国移动集团公司 Agenda 系统背景系统总体框架业务功能技术方案实施与发展建议 电信行业背景及挑战 新一轮电信业的竞争将全面展开WTO 国外电信运营商及资本逐步进入国内电信重组中国移动面临挑战ARPU逐步下降 用户数的高速增长如何转化为利润的增长业务受两面夹击 高端 CUCDMA 低端 CUGSM 小灵通 经营理念的转变保障网络基础设施建设 重视业务经营与运行突出 以客户为中心 以市场为导向 中国移动业务发展战略实施业务领先 努力拓展市场积极扩张市场 保持话音业务的市场份额和移动数据业务领先实施服务领先 保持高端品牌优势抢夺高端细分市场 减缓ARPU下降 保持中国移动收入持续增长 各省BOSS集中化改造在年内完成少数省已经开始建设经营分析系统试点集团公司一级业务支撑中心全国结算中心 国际清算门户 全国客服枢纽 全国帐务枢纽全国数据中心 经营分析系统 业务支撑系统现状 经营分析系统的必要性 全面了解中国移动集团运营支撑系统状况了解宏观的 长期 全局的业务状况及发展规律对一些全国性业务的多角度分析分析用户 业务发展趋势 分析企业的KPI与BOSS相结合 是业务运营支撑系统发展的趋势支持市场营销与服务的工具 为运营决策提供支持有利对市场竞争快速反应 体现以客户为中心的经营理念提升内部信息化及管理水平 Agenda 系统背景系统总体框架业务功能技术方案实施与发展建议 集团公司经营分析系统外部关系 全国客服枢纽 全国帐务枢纽 全国清算中心 国际清算门户 集团公司经营分析系统 省公司经营分析系统 省公司经营分析系统 省公司BOSS系统 省公司BOSS系统 集团一级BOSS中心 集团公司数据中心 集团接口 元数据 系统管理 系统监控 元数据 集团公司经营分析系统体系结构 清算中心 客服枢纽 账务枢纽 省公司BOSS系统 抽取清洗转换传输加载 经营分析系统数据仓库 规划设计 外部数据 应用系统建模 多维分析 数据挖掘 预定义报表 即席查询 数据源 ETL 数据存储 数据展现 应用模型 省公司经营分析系统 元数据 系统管理 系统监控 元数据 计费系统 结算系统 营帐客服 财务 OA 抽取清洗转换传输加载 经营分析系统数据仓库 规划设计 外部数据 应用系统建模 多维分析 数据挖掘 预定义报表 即席查询 数据源 ETL 数据存储 数据展现 应用模型 网管系统 省公司经营分析系统体系结构 集团与省经营分析系统的区别 集团公司经营分析系统分析宏观的 全局的 长期的业务状况及趋势体现集中管理 发挥全局优势一些全国性的业务分析 如国际结算分析 漫游分析 集团大客户分析等 有利于促进全国性业务的发展对各省业务发展的评估及比较 监控各省的业务运营状况省经营分析系统侧重本辖区内的业务经营分析分析角度及层面相对较细与BOSS系统形成紧密的闭环 直接影响客户 经营分析系统OmniVision OmniVision是我公司针对移动的完善的电信级经营分析及决策支持系统平台 OmniVision采用数据仓库 ETL OLAP 即席查询及数据挖掘等技术 结合移动业务的深厚经验 针对用户分析 业务分析 收益分析 大客户分析 营销分析 竞争分析 服务质量分析 合作方分析 新业务分析主题建立分析模型及专题分析 Agenda 系统背景系统总体框架业务功能技术方案实施与发展建议 集团经营分析系统业务功能模块 数据转换ETL模块 业务主题分析 前端用户 浏览器 专题分析 全国业务 含新业务 专题 市场竞争 高额风险专题 全国大客户发展 异动专题 集团公司综合决策分析模块 数据仓库OLAPServer 集团公司分析主题 一 各省经营情况分析客户发展情况分析业务发展情况分析收益情况分析市场竞争情况分析服务质量分析营销管理分析 分析重点时间地域特征 找出地区经济差异性 时间序列的趋势变化 群体特征分布 消费的季节变化 集团公司分析主题 二 总部业务分析智能网业务分析SP 虚拟运营商分析全国结算分析国际结算分析运营商竞争分析漫游 高额分析IP VOIP业务分析VPMN业务分析新业务分析 分析重点业务量发展趋势地域差异通话行为群体特征 分析总部业务发展趋势 结算收益变化 地域通话特征 风险的地域时间分布 全国大客户分析大客户构成分析大客户发展分析大客户异动分析大客户欠费分析 分析重点地域差异通话行为群体特征流失特征 集团公司分析主题 三 分析整体大客户发展趋势 地域通话特征 群体特征分布 集团公司专题分析 全国业务 含新业务 专题漫游 欺诈 高额风险专题市场竞争专题全国大客户发展 异动专题 关注重点客户发展趋势的潜在规律业务发展趋势的潜在规律收益发展和风险预测的潜在规律 省经营分析系统业务功能模块 结算数据 BOSS系统数据 外部系统数据 MIS和OA数据 数据转换ETL模块 业务主题分析 服务质量模块 用户分析模块 业务分析模块 收益分析模块 市场营销分析模块 市场竞争分析模块 SP和结算分析模块 增值和智能网业务分析模块 大客户分析模块 专题分析 业务 含新业务 专题 市场 竞争专题 大客户发展 异动专题 省综合决策分析模块 网管系统数据 客户专题分析 一级经营分析数据 数据仓库OLAPServer 前端用户 浏览器 省经营分析系统功能 主题分析客户情况分析业务发展分析收益情况分析市场竞争分析服务质量分析营销管理分析大客户分析新业务分析SP 虚拟运营商 结算分析 专题分析客户分析大客户分析市场竞争分析营销策略评估结算分析 省综合决策分析 Agenda 系统背景系统总体框架业务功能技术方案实施与发展建议 集团公司经营分析系统建议拓扑结构 省级经营分析系统建议拓扑结构 数据仓库及工具软件 主要使用 支持 数据 仓 库 SybaseIQ OLAPServer ETL工具软件 AscentialDataStage PowerMart Cognos 前端展现工具 数据挖掘工具 SASEM BO OracleWarehouseBuilder NCRTeradata IBMDB2WarehouseManager IBMIntelligentMiner Brio IBMDB2OLAPServer IBMDB2UDB InformixXPS Oracle HyperionEssbaseOLAP Cognos 数据仓库逻辑结构 DataWarehouse ODS StagingArea StarSchema Aggr MiningDataModel ReportDataModel Interface ETLProcess OLAPCUBE DataMining Report Ad hoc 展示输出 数据仓库设计9要素 RalphKimball 业务需求分析以确定相应的Facttable 规范 设计 Facttable的粒度每个Facttable中的维度量 包括预计算的度量维的属性 完整的描述 确切的术语如何跟踪并处理缓慢变化的维 聚集表 MiniDimension 物理存储策略等数据仓库的历史时间及相应处理策略 如CDR的保留时间等 哪些数据最迫切需要采集并装载到数据仓库中 OmniVision数据仓库设计 数据仓库分层设计 保证模型的稳定性及灵活性原始数据初步清洗 转换后的数据 OperationalDataStore 事实表及维表 SnowflakeSchema 以及历史数据DataMiningmodel StarSchema AggregateTable汇总聚集表 OLAPCube粒度的多重级别如 保存6个月内的CDR明细 6个月以上的CDR汇总保存动态维 DynamicDimension 灵活处理业务需求的变化动态增加组合条件的维度 数据仓库设计 高性能的TB级电信级数据仓库 参数化管理OLAP稀疏维 紧密维一般一个CUBE维数 11DrillThrough detaildatainDW数据分割 VLDB技术分表 分区设计 提高大数据量的处理效率Hash表分割 表达式表分割 按时间 地理 业务等分割 MiniDimension例如 客户维表可能达几百万条 join效率较低设置客户属性MiniDim 将客户属性拆分到多个较小的维表中 能极大地提高查询性能 动态维技术 维度1维度2 维度n动态维 度量值 维表1 用户定义的加工 处理 维表n 动态维的含义在应用时定义 适应需求的灵活变化如选取连续3个月费用下降5 的客户分类 作为一个维动态维的内容是经加工 处理后的聚合的增加动态维后 数据库结构不发生变化 前端展现程序不用修改 ETL子系统 数据源 集团公司经营分析系统省BOSS系统 用户基本信息网间结算信息帐务信息 省经营分析数据业务主题数据 汇总 用户信息全国中心漫游清算信息 国际结算信息集团用户信息全国IP认证计费业务信息等 省经营分析系统计费 结算系统 计费详单结算数据 营帐系统用户基本信息帐务信息资源信息 客服系统投诉 查询等信息其他系统 逐步 MIS OA网管等 ETL子系统 省公司经营分析数据 ETL数据抽取引擎 省公司BOSS数据 集团公司BOSS系统数据 负责与源数据系统的接口 负责抽取规则的制定 源数据 目标数据 映射规则 清洗与转换规则 加载规则等 负责抽取任务的调度 执行 元数据管理 系统管理 系统监控 P1 P2 P3 FILE ETL 接口方式 业务系统数据库 经营分析数据仓库 ODS 1 经营分析系统发出数据请求 3 业务系统返回经营分析系统所需数据 2 业务系统执行数据提取任务 存储过程 触发器 SQL应用等 缺点 对业务系统造成安全 性能等方面的问题 实现较麻烦 数据库接口方式 1 业务系统定时将经营分析系统所需数据Export为数据文件 2 经营分析系统对数据文件进行ETL等后续操作 优点 不会对业务系统造成安全 性能等方面的问题 易于实现 数据文件接口方式 ETL 抽取规则 省公司经营分析系统数据 ETL数据抽取引擎 元数据管理 系统管理 系统监控 省公司BOSS系统数据 集团公司BOSS系统数据 抽取策略 支持增量抽取方式 抽取规则 用户可根据实际需要自定义抽取规则 P1 P2 P3 FILE 定义好的抽取程序脚本 包括源数据项 目标数据项 映射规则 转换规则 加载规则等内容 可根据实际需要调整 ETL 执行方式 ETL数据抽取引擎 执行方式 定义好执行脚本 由系统调度 自动执行 采集周期 采集的周期可以是日 周 月或其他设定日期 P1 P2 P3 定义好的任务执行脚本 包括执行脚本的执行周期 时间等 业务系统数据库 OLAP分析 经营分析数据仓库 OLAP分析Cube数据 联机多维分析使用户在随机的环境中通过不同的角度快速分析数据仓库中的信息 Slice Dice Drill down Drillup 分析问题的多维视角多维矩阵管理数据 Cube MOLAP 支持Drill through 可直接由MDB钻取到RDBMS 平衡业务需求灵活性与性能 即席查询模块 经营分析数据库仓库 1 选择查询内容 查询结果 2 选择查询条件 3 设定显示方式 查询目的 查看某类数据的历史状态进行随机统计 自由报表查询方式 GUI界面 支持用户鼠标拖拽用户自主设定查询内容 条件 结果显示方式系统自动生成SQL语句 执行查询统计 显示查询统计结果 支持用户自定义SQL语句 监控子系统 ETL数据抽取引擎 元数据管理 系统管理 系统监控 P1 P2 P3 FILE 负责监控ETL阶段各任务执行情况 包含任务名称 开始时间 结束时间 当前状态等 负责监控分析预处理阶段各任务执行情况 自动维护ETL与分析预处理阶段数据的依赖关系 将ETL的失败局限在一定范围内 记录各阶段任务处理日志 支持回滚 断点重载功能 分析报表汇总数据 数据挖掘集成数据 OLAP分析Cube数据 元数据管理 管理数据仓库系统的数据贯穿经营分析系统的各个环节驱动数据的装载 存储管理和分析展现数据源的描述ETL调度 控制数据仓库字典管理OLAP结构描述系统的处理单元由元数据驱动 系统管理 系统维护包括功能模块数据抽取接口 数据源类型与数据格式 的定义功能 安全管理功能 数据备份策略的选择与实现等 权限管理对于普通用户来讲 可以管理其享有的资源及访问的范围等 对于系统管理员来讲 可以管理其拥有的权限 如 对信息发布 审批 撤消 编辑的权限等 参数管理参数管理主要是对系统中所需要的的各种参数及阈值进行管理 如进程调度参数 决策参数 数据管理参数等 理解业务关系 数据分布 组织挖掘数据 建立挖掘模型 模型调优 评价 确定最佳算法 应用模型于数据仓库对挖掘结果进行量化的评价 将量化结果应用业务系统 数据仓库 MiningData 挖掘模型 评价 应用 时间序列预测分类 数据挖掘 寻找潜在规律 数据挖掘应用 客户分类 价值评估 CustomerLifetimeValue 分析客户的综合价值 综合收益和风险对客户消费进行分群客户信用模型客户流失分析 Churn 分析主动离网客户的特征及因素 离网客户在这些因素上的分布情况 得出潜在离网客户群 高离网概率的客户群 客户挽留价值模型挽留的概念 两个高 高费用 高离网概率 低欠费概率 目的 挖出高消费群中主动拆机客户 这些客户能够带来高收益并且有离网趋势 最值得挽留大客户分析模型潜在大客户模型离网客户模型产品分析 Cross UpSell 哪些客户群体倾向于使用特定的产品增强客户分群及特征分析 及产品驱动的促销计划 多年的移动业务的积累深刻理解移动业务 为挖掘提供优质的数据保证 实际的业务应用积累大量的挖掘知识库 数据挖掘业务经验为移动业务提供科学 合理 准确的挖掘模型 和业务系统完整的结合利用多种分析手段方式 能过提供全面的信息 数据挖掘的基础和应用 前端展现 系统的用户接口 最终用户采用浏览器界面位于B A S三层结构的瘦 Thin 客户端以图形或报表的方式显示或打印 EIS支持Dashboard 仪表板 告警等 2 时段分析 1 业务总量分析 3 竞争分析 省经营分析系统存储容量估算 600万用户 总计 6 5TB 注 如CDR按180字节算 保存6个月 则存储容量为5 5TB如CDR按180字节算 保存3个月 则存储容量为3 8TB 省经营分析系统建议配置 600万用户 Agenda 系统背景系统总体框架业务功能技术方案实施与发展建议 总体规划 分步实施 滚动发展建立集团公司经营分析系统平台体系及流程 包括硬件及软件框架建立集团公司经营分析系统逻辑模型 LDM 包括分析主题 数据层次 维度 颗粒度 结构 以及分析模型 挖掘模型等 逐步引入各省BOSS数据 经营分析系统数据 集团公司一级BOSS系统数据 不断丰富集团公司经营分析系统数据 逐步进行相关主题的分析 进一步完善经营分析模型 以经营分析系统及数据仓库为依托 加强各个系统之间的互动 开展新业务 提高企业核心竞争力 统一制定省与集团公司的接口规范规范数据内容及格式 便于实施省内BOSS与经营分析系统之间的接口规范由各省确定建设步骤与各省同步建设 互相呼应 协调及数据源问题 制定接口标准在各省之后建设 向分析型CRM方向发展 与BOSS及运作型CRM形成闭环 系统实施建议 移动运营商CRM总体架构建议 数据仓库 DataWarehouse 分析模型 AnalyticalModel 客服 代理商 营业厅 网上营业厅 SMS emailFax Letter等 OLAP 分析报表 即席查询 数据挖掘 高层领导信息系统EIS DSS 交叉 升级销售 营销活动管理CampaignMgmt 客户流失管理 市场自动化 员工管理 销售自动化 大客户服务 管理 营业 帐务 DirectInteraction 分析型CRM 经营分析系统 BOSS平台及扩展 代理商管理 支持服务 网管系统 HR MIS OA 财务等 计费 结算 运作型CRM 客户交流渠道 分析型CRM与运作型CRM的关系 BOSS平台及扩