中文les17_管理数据仓库_ 数据仓库教学课件 中文oracle99版

Copyright Oracle Corporation, 1999. All rights reserved. 1717 管理数据仓库 17-17-2 2Copyright Oracle Corporation, 1999. All rights reserved. 总述 项目管理 (方法论, 维持元数据) 定义数据仓库的 概念及术语 规划一个成功 的数据仓库 分析用户 查询需求 选择一个处理 体系结构 建模数据仓库 规划仓库存储 ETT (Building the Warehouse) 满足业务需求 支持最终 用户存取 管理数据仓库 17-17-3 3Copyright Oracle Corporation, 1999. All rights reserved. 目标 完成本课后,你应该能够做到以下几点: 为数据仓库由开发到运行的转换制定一个管理规划 确定数据仓库的增长所带来的挑战 描述文件备份和归档文件机制 确定数据仓库的性能问题 17-17-4 4Copyright Oracle Corporation, 1999. All rights reserved. 管理向产品的转换 提升转变的支持度 对大规模运行的指导 文档 测试 培训 运行后的支持 维护数据仓库 17-17-5 5Copyright Oracle Corporation, 1999. All rights reserved. 提升转变的支持度 支持 不支持 管理 竞争 改变的风险 业务的优点 风险的避免 开发者 新技术 过时的技术 领先的前沿 最终用户更快更灵活的系统瓦解 改良的工具改变 增加的工作量 17-17-6 6Copyright Oracle Corporation, 1999. All rights reserved. 提升支持的方法 了解 反馈 通告 技术 教育 方向 控制 17-17-7 7Copyright Oracle Corporation, 1999. All rights reserved. 在导向和大范围运行之间选择 导向 大范围运行 17-17-8 8Copyright Oracle Corporation, 1999. All rights reserved. 仓库导向 被证实的优点: 管理 用户 IT 职员 与业务相关 低技术风险 小并且可行 可预期增长的使用 集中在最初的业务问题上 保持上下文统一 17-17-9 9Copyright Oracle Corporation, 1999. All rights reserved. 仓库导向 设计者 检验模型，数据和访问工具 用户 检验工具的使用情况 核对数据和查询性能 确定培训要求 开发者 解决 ETT 和元数据问题 确定用户数据和培训要求 测试安全性和访问级别, 监控性能 17-17-1010Copyright Oracle Corporation, 1999. All rights reserved. 文档 制作文本交付: 术语表 用户和技术文档 联机帮助 元数据参考指南 仓库管理参考 新特征指南 17-17-1111Copyright Oracle Corporation, 1999. All rights reserved. 测试仓库 测试每个阶段. 使用现实世界中的数据测试数据库和环境. 17-17-1212Copyright Oracle Corporation, 1999. All rights reserved. 培训 用户 元数据 DSS 工具 特别查询 获得帮助 登记增加的请求 信息系统开发者: 分析技术 硬件技术性问题 联网 运行, 构建和支持 DSS 17-17-1313Copyright Oracle Corporation, 1999. All rights reserved. 评价和审查运行情况 监控仓库: 对问题的响应 进行性能调优 展开元数据，查询，过滤器以及条件 运行的安全性 一体化新的用户 分配数据集市和目录 从 IT中转移所有权 运行支持 17-17-1414Copyright Oracle Corporation, 1999. All rights reserved. 管理的增长 扩大的用户数量 用户数量用户数量 交付后的阶段交付后的阶段 来源来源: : 数据仓库协会数据仓库协会 Flash Flash 报告，报告， 20042004年，年，1 1月月 17-17-1515Copyright Oracle Corporation, 1999. All rights reserved. 类型的增长 越来越多的用户 广泛使用 数据容量的增加 17-17-1616Copyright Oracle Corporation, 1999. All rights reserved. 扩张和调整 不断的评估: 变化 新增量 多余的组件 策略 确保开放的系统 求证未来的发展过程: 计划编制 成本分析 问题评估和修正 性能评估 17-17-1717Copyright Oracle Corporation, 1999. All rights reserved. 控制扩充 受以下几点控制： 确保工作人员的连续性 证明方法、过程和规律 为进一步的改进建立可运行的测试和产品的体系结构 为维持数据的改变建立策略 17-17-1818Copyright Oracle Corporation, 1999. All rights reserved. 存储大小 考虑不同的方法. 决定你所需要的最佳的方法. 了解业务需求. 不要低估需求. 为增量做好计划. 考虑多余数据的空间. 17-17-1919Copyright Oracle Corporation, 1999. All rights reserved. 估计存储 实际容量 实际生命周期 技术的有效性 技术购买 存储前期摘要数据 镜像或其他技术要求的磁盘存储 17-17-2020Copyright Oracle Corporation, 1999. All rights reserved. 需要空间的对象 ODS 索引和元数据 概要数据 归档日志 反转信息 排序区 临时空间 备份和恢复的工作区 17-17-2121Copyright Oracle Corporation, 1999. All rights reserved. 测试加载样本 分析统计有意义的数据样本 使用不同的方法对加载进行实验 反映日常的运作 包括周期性的数据和最坏情况的特定情 节 计算交易的数量 使用平均销售额方法 17-17-2222Copyright Oracle Corporation, 1999. All rights reserved. 平均销售额 假定交易水平所得. 公司的总收入 每个排列项的平均销售额 一年中排列项的数量 基础记录的数量 关键字段 实际字段 基础事实表的大小 $20 billion $5 $20 billion / $5 = 4 billion 4 billion x 3 yrs = 12 billion 4 (x 4 bytes) 4 (x 4 bytes) 12 billion x 8 fields x 4 bytes = 385 GB 17-17-2323Copyright Oracle Corporation, 1999. All rights reserved. 平均销售额 使用其他方法: 很难获得精确的平均值 你的计算结果可能不准确 不要原来的方法 17-17-2424Copyright Oracle Corporation, 1999. All rights reserved. 其他技术和需要考虑的事项 排队模型 单凭经验的方法 所有的数据库的大小是基本实际表的3-4倍 需要考虑的事项: 稀疏 维数 索引 概要 排序操作的空间 17-17-2525Copyright Oracle Corporation, 1999. All rights reserved. 空间管理 监控 避免破碎 测试负荷数据 为增长作好打算 熟悉业务模式 决不使空间成为一个问题 17-17-2626Copyright Oracle Corporation, 1999. All rights reserved. 管理备份和恢复 有效的业务需求 快速的恢复实质 策略: 定义 测试 论证 进化 17-17-2727Copyright Oracle Corporation, 1999. All rights reserved. 备份策略 基于业务需求和成本收益 包括大容量的数据: 除了临时表空间外所有的对象 增加的 包括第一次加载和更新的 17-17-2828Copyright Oracle Corporation, 1999. All rights reserved. 定义策略 任务评价体系 SLAs: 定义停工期 可接受的 MTBF 有效率的备份和恢复 不同技术的评价 17-17-2929Copyright Oracle Corporation, 1999. All rights reserved. 备份规划 在每个设计阶段进行规划 为 VLDBs使用热备份 备份必不可少的组件: 事实和多维数据 仓库模式 元数据模式 元数据 输出/输入效用: 磁盘空间 时间 17-17-3030Copyright Oracle Corporation, 1999. All rights reserved. 备份工具 Oracle8 企业备份组件 Oracle9 恢复管理器 效用: 输入和输出 操作系统 第三方 17-17-3131Copyright Oracle Corporation, 1999. All rights reserved. 并行备份和恢复 并行备份 从任一节点同时运行 脱机 联机 并行恢复 从归档日志同时运行 17-17-3232Copyright Oracle Corporation, 1999. All rights reserved. 系统缺陷 过程 数据库实例 媒体 自然灾害 失败是昂贵的 17-17-3333Copyright Oracle Corporation, 1999. All rights reserved. 灾难性恢复要求 复位和备用机器 磁带和磁盘容量 用户和数据之间的通信线路 软件拷贝 数据库备份 管理部门和操作人员 文件 17-17-3434Copyright Oracle Corporation, 1999. All rights reserved. 灾难性恢复规划 建立策略 准备策略 维持策略 审核策略 有规律的测试恢复规划 得到用户的赞成 17-17-3535Copyright Oracle Corporation, 1999. All rights reserved. 归档数据 确定数据的平均寿命. 确定归档的频率. 使用只读的表空间. 规划和设计早期的说明书. 17-17-3636Copyright Oracle Corporation, 1999. All rights reserved. 清洗数据 减少数据容量: 创建概要. 移出不必要的基础数据. 选择最优效率的方法. 17-17-3737Copyright Oracle Corporation, 1999. All rights reserved. 改善查询效率 改进数据库设计 使用索引 使用管理人员 使用准备好的经过测试的查询 在上班时间外运行大的工作 Oracle 8i 资源管理器可以保证特殊组资源的有效性 使用数据集市 17-17-3838Copyright Oracle Corporation, 1999. All rights reserved. 网络性能 提供足够的带宽 为访问提供最佳的配置 确定中间件的需求 了解更新容量 考虑作业调度软件的交互作用 使用客户端处理 配置数据集市 分析通信量 17-17-3939Copyright Oracle Corporation