企业数据仓库数据库规划概要设计说明书.doc

XXXX数据仓库数据库规划概要设计说明书XXXX企业的数据仓库数据库概要设计说明书（文档编码：OM-BIDW-C008）（版本01.00.000）未经许可，不得以任何形式抄袭XXXX版权所有，翻板必究OM数据仓库短彩技术部数据组2009年5月短彩技术部数据组文档变更历史日期版本作者修改内容评审号变更控制号发布日期2009-05-0201.00.000黄浩建立初始版本2009-05-02目录1概述32用户管理52.1虚拟用户62.1.1运作型用户62.1.2存储型用户62.2开发用户73权限管理73.1权限类型73.2用户权限74表空间管理91 概述 XXXX企业的数据仓库的后台数据库是ORACLE数据库管理系统。根据ORACLE数据库系统的特性，作为数据仓库的ORACLE数据库系统管理的逻辑图如下： 从上图可以看出，数据库管理分三个模块： 用户管理。根据开放无限基于短彩技术部的数据仓库概要设计说明书.doc中的设计，数据仓库中数据库用户分两种类型：u 虚拟用户，系统用户包括：ETL、DSS、STAGE、ODS、EDS、DM、 REFu 开发用户，开发用户即数据仓库开发人员数据开发的帐户 权限管理，数据库系统权限管理是基于用户管理的，包括两个方面u 系统权限，即每个用户实现功能完成角色的必须权限u 用户间权限，即每个用户之间数据的访问及操作权限的界定及管理 表空间管理，根据数据仓库中对象容量的不同，表空间分三类：u 针对用户的表空间管理，一般而言，必须要为每个用户指定一个默 认的表空间，表空间可以是共享的，即不同的用户可以指定同一个表空间u 针对表的表空间管理，某些特定的大容量的表（比如原始上下行表）需要针对每个表建立表空间u 索引表空间管理，根据索引容量的大小需要建立专门的索引表空间。2 用户管理根据开放无限基于短彩技术部的数据仓库概要设计说明书.doc中的设计模式，如果不考虑访问层，就数据仓库本身而言，整个数据仓库是不与视图级用户发生任何交互。即视图级用户从提出业务需求到获取最终数据是不需要关心数据仓库内部的运作，整个数据仓库后台运作对视图级用户是隐藏的。数据仓库的全部后台运作都是通过开发型用户、外围型用户及存储型用户协作完成的，三者之间的关系如下图所示： 在数据仓库中，根据开发型用户的存储过程，经过运作型用户执行存储过程，终将数据存储在开发型用户指定的粒度用户模式下2.1 虚拟用户 与事务性数据库不同，在数据仓库中，由于不与视图级用户交互，数据仓库必须要借助虚拟用户来完成所有的后台运作。根据虚拟用户的性质不同，分为运作型用户和存储型用户。2.1.1 运作型用户运作型用户分ETL、DSS两个用户序号用户名描述1WELSETL主要完成ETL中的LOAD操作2WELSDSS系统调度监控由该用户实施完成2.1.2 存储型用户 数据仓库中的表有两种：事实表及维度表；而事实表中根据粒度不同又会有不同的层次，因此根据这些特性，存储型用户有如下6个用户 序号用户名描述1WELSREF存储所有维度表数据2WELSSTAGE存储所有原始数据源数据，即通过LOAD进入数据仓库的数据3WELSODS存储经过横向合并（日合并为月）、纵向合并（表连接）及横向切片（按照业务主题抽取）的数据4WELSEDS存储经过轻度聚集的数据5WELSDM存储经过高度聚集的数据，即面向用户的视图级数据2.2 开发用户开发用户即为每个数据仓库开发人员创建的数据库登录用户。与虚拟用户不同，开发用户是实名制的，并且是根据开发人员的实际情况而变化的。开发用户名命令规则： 开发人员实名中姓氏第一个字的全拼+开发人员实名中第二及后面拼音简写，比如“黄浩”的登录名为“huangh” 如果出现重名，则在名称后面加序号，比如huangh2，序号依次递增3 权限管理3.1 权限类型 根据数据仓库中用户的类型，数据仓库的角色如下： Execute any procedure：执行所有用户的存储过程 Connect、resource：基本的角色权限 Select/update/delete any table but DSS and ETL：能操作除了DSS及ETL模式外的所有模式的表 Debug connet session：DEBUG调试权限 DBA：DBA权限3.2 用户权限用户权限如下图所示： ETL用户：ETL用户要求具有DBA权限。因为ETL需要调用JAVA类执行SQLLDR加载数据。 DSS用户：DSS用户主要的职责是调度并执行DW系统中的所有存储过程，因此除了基本的开发权限外，还需要存储过程的执行权限 开发型用户：开发型用户除了基本的基本的开发权限外，还需要所有表的操作（DELETE、SELECT、UPDATE）权限，但是由于DSS、ETL两个模式属于系统级权限，因此开发用户不能访问这两个模式下的数据库对象 存储型用户：存储型用户是虚拟用户，基本上不需要额外的权限，只需要基本的开发权限即可 DW用户：DW用户在权限上与开发型用户是一样的，不用的是DW用户是虚拟用户。4 表空间管理数据仓库的一个特点就是数据量非常大，而大数据量又集中在少数的主体表中，比如原始上下行等，而维度表的数据则非常少。因此数据仓库中表空间是以表为主线，结合用户进行管理的。 表类型表空间。主要是针对DW中大数据量的表创建表空间 用户类型表空间。在DW中，DSS、ETL、REF、DM四个模式的数据相对较少，因此可以针对这些用户创建表空间。另外，STAGE、ODS、EDS三个模式中也需要分别创建用户级表空间，用来存储这些模式下数据量小的表数据 临时表空间。在DW数据处理过程中会出现非常多的中间步骤，需要非常多的辅助性临时物理表，因此需要针对这些临时性物理表创建表空间。 提数表空间。该表空间是为开发型用户创建的，主要是用来存储开发型用户在数据处理过程中产生的临时或结果数据。软件分