经分数据模型层级.ppt

经营分析系统数据模型层级经营分析系统数据模型层级 2009年12月 （二）数据模型完善1-Modified q 修订目标 q 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 q 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业 务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统生产系统 ODS EDW DWA DM STAGE 现有数据模型层级专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW 2 2 明确各层名称及功能 （二）数据模型完善2-Modified q 修订目标 q 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 q 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业 务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统生产系统 ODS EDW DWA DM 现有数据模型层级专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW 3 3 明确各层名称及功能 （二）数据模型完善3-Modified q 修订目标 q 规划：将ODS与DWD分离，明确ODS为生产系统模型，统一各数据源数据口径 q 目标：在现有数据模型的基础上，完善数据模型，明确数据模型对3G、固网、融合业 务的支撑，加强数据约束 STAGE ODS/DWD MID DM 生产系统生产系统 ODS EDW DWA DM 现有数据模型层级专题规划中数据模型层级 DWD 轻度汇总层 明细数据层 数据集市 运营数据存储 DW 4 4 明确各层名称及功能 数据分层架构-Modified 分层特征 在线存储周期 （省分参考） 支撑应用 数据集市 (DM) 面向经分应用构建数据模型 具有独立的存储区域，支撑经分应用开发 固化成熟经分应用数据模型 部门和地市级数据集市 数据获取时间间 隔：天/月 同应用生命周期 支持KPI（如总部上传日 月报）、省分或集团报 表 、多维分析等经分应用 支撑部门和地市分析应用 需求 DW 轻度 汇总层 (DWA) 统一数据模型，按分析主题域划分 数据按分析主题域进行多维度汇总 扩展核心业务实 体的衍生信息，如客户视 图、产品视图 、渠道视图 、流失预测 等 统一数据标准（维度/指标） 轻度汇总 数据的长期存储，满足用户粒度 的查询 需要 数据获取时间间 隔：天/月 月、年汇总 5年 ，超期离线存储 日汇总 36+1个月 衍生数据12+1个 月 支撑DM数据集市 支撑业务 人员自助取数 作为焦点应用的数据源 支撑趋势 分析与问题发 现 支撑深度数据挖掘和统计 分析 与源系统的业务 互动 明细 数据层 (DWD) 明细数据，与ODS粒度相同 统一数据模型 统一数据标准（维度/指标等） 明细数据的长期存储，满足最细粒度的查 询需要 数据获取时间间 隔：天/月 客户资 料永久 详单 24+1个月 其它36+1个月 支撑DW的轻度汇总层 支撑专业 人员自助取数 作为焦点应用的数据源 支撑趋势 分析与问题发 现 支撑深度数据挖掘和统计 分析 ODS 数据整合：统一数据模型、统一数据标准 、统一数据视图 数据共享：统一准实时 共享数据接口、对 外数据提供 数据质量：数据稽核、质量管控 数据获取时间间 隔：准实时 /天/月 客户资 料永久 详单 13个月（ 如果承担详单查 询,则需6个月） 其他12+1月 支撑DW的明细数据层 支撑准实时 的跨系统查 询与统计 支撑跨系统数据的批量计 算 STAGE 与业务 系统保持一致 临时 存储从源系统抽取的数据 数据获取时间间 隔：准实时 /天/月 日：7+1日 月：1+1月 CRMPRMBilling 综合结 算系统 OCS 综合缴费 卡系统 客服 系统 集成定单 管理系统 服务开 通系统 . 源系统 STAGE 数据仓库 DWD DWA DM 业务应用 报表 KPI 指标 焦点 应用 集市 应用 ETL ETLETL ODS ETL DW 数据集市 数据 接口 运营 数据 存储 数据架构数据分层说明-Modified ODS 明细细数据层层 (DWD) 轻轻度汇总层汇总层 (DWA) 数据集市 (DM) 多维应用数据 发展类 收入类 使用类 服务类 结算类 衍生数据 财务类 客户分群流失预测 渠道视图 DW 信息层 汇总数据 发展类使用类收入类 财务类结算类服务类 客户视图 产品视图 KPI指标 上报指标 指标库 本地报表数据 集团报表数据 报表数据 地市数据集市 部门数据集市 数据集市 客户 主题域 产品/服务 主题域 计费/帐务 主题域 市场营销 主题域 网络/资源 主题域 合作伙伴 主题域 企业管理 主题域 事件 主题域 客户 主题域 产品/服务 主题域 计费/帐务 主题域 市场营销 主题域 网络/资源 主题域 合作伙伴 主题域 企业管理 主题域 事件 主题域 渠道 主题域 渠道 主题域 ODS和DW构成企业级数据仓库核心数据存储中心， 形成企业级统一分析数据模型；与DM一起构成完整的企