中文les09_规划数据仓库的存储_ 数据仓库教学课件 中文oracle99版

规划数据仓库的存储 总述 项目管理 方法论 维持元数据 定义数据仓库的概念及术语 规划一个成功的数据仓库 分析用户查询需求 选择一个处理体系结构 建模数据仓库 规划数据仓库存储 ETT 构建数据仓库 满足业务需求 管理数据仓库 支持最终用户存取 目标 在完成这一课后 你应该能够做到以下几点 讨论不同的分割方法和索引方法考虑不同的RAID 廉价冗余磁盘阵列 等级在保护数据库方面的好处和局限性 数据分割 数据分割使得它们成为能够独立处理的物理单位 容易做 重构重组删除恢复监视管理存档索引 Feb98 Mar98 添加 丢弃 命令表 其它数据不受影响 Jan98 分割的对象 表 事实表维表索引 水平分割 表和索引数据按以下形式分割 时间销售区域或人地理位置组织机构业务流程WHERE子句中包含的候选列分析决策需求 垂直分割 你可能会使用垂直分割的时候 为改善查询和更新速度用户需要存取特定的列一些数据不是频繁地被改变去除维本身的文本描述信息 分割方法 范围分割 Oracle8和Oracle8i 哈希分割 Oracle8i 复合分割 Oracle8i 范围分割 哈希分割 复合分割 星型查询的最佳化 星型模型的最佳性能1 创建用来被查询的维表2 使用笛卡尔积 逆向计算3 更小的参考表4 结果被进行连接操作5 事实表产生查询结果 查询结果 12345 星型转换 STAR TRANSFORMATION ENABLED Key1 Key2 Key3 Key1 Key2 Key3 Product Table Market Table Time Table Dollars Fact Table Year Month Stat Brand 1002 1001 1003 March 1998 ABC SF 6000 索引 使用索引是因为 节省巨大的成本 极大地提高性能和可测量性可通过只读一个包括所需行的磁盘块指引的索引代替一个整表的扫描通过读索引 而不是查询整张表 可以快速地找到需要查询的行在磁盘中的位置 B 树索引 最普通的索引类型被用于具有较多的列返回行数少 位图索引 优化性能和节省存储空间存储值仅为1和0当出现以下情况时 通常使用位图索引而非B 树索引 表很大列数相对低维 位图索引的产品颜色 Blue 1000100100010010100 Green 0001010000100100000 Mauve 0100000011000001001 Gold 0010001000001000010 Oracle8和Oracle8i索引的改进 Oracle8索引改进 分割索引被组织的索引表Oracle8i索引改进 基于功能的索引改进的新位图索引联机索引创建和重建降序索引当索引建立时可收集统计数据 保护数据库 大型数据库必须有RAID 廉价冗余磁盘阵列 RAID改善了 可靠性存储管理RAID有不同的级别可以通过磁盘分块避免磁盘使用的竞争 RAID0 分块 文件被写到一个四驱动器的磁盘序列中 块1在驱动器1块2在驱动器2 块5在另一个扇区的驱动器1上 文件A a 文件A e 文件A b 文件A f 文件A c 文件A d 磁盘阵列控制器 RAID0 分块 优点 对同时读写有益无冗余可升级局限 不推荐用于关键任务系统数据丢失的时候不能恢复一个坏扇区影响到整个磁盘的数据 RAID1 镜像 复制的文件存储在镜像磁盘里 磁盘阵列控制器 磁盘1 磁盘1Mirror 磁盘2 磁盘2Mirror 文件A a 文件A b 文件A a 文件A b RAID1 镜像 优点 完全的数据冗余无性能损失改善读取具有可测量性局限 在RAID的所有配置中成本最高 RAID5 独立的磁盘阵列 使用奇偶交叉排序使数据分块 FileC b FileC e P d e f g h FileC a FileC d File h P i j FileC c FileC f FileC i P a b c FileC g FileC j 磁盘阵列控制器 磁盘1 磁盘2 磁盘3 磁盘4 RAID5 独立的磁盘阵列 优点 有效的数据整合数据重建多并发寻求交叉阵列可升级的局限 磁盘重叠数据写入比率 仓库典型的使用RAID0 1 or5 备份 在设计阶段规划为VLDBs使用热备份备份必需的构件 事实表和维表中的数据仓库模式元数据模式元数据 输入 输出工具磁盘空间时间 总结 本节讨论了以下课题 解释垂直分割和水平分割区分不同类型的