基于CWM的数据仓库体系结构设计

1、基于CWM的数据仓库体系结构设计我的工作作提出了一一个基于CWM的数据仓仓库体系系结构基于该体体系结构构，参与与设计和和实现了了一个电信综合合业务信信息服务务平台提纲背景介绍绍数据仓库库、元数数据理论论介绍CWM、MOF、UML、XMI规范介绍绍基于CWM的数据仓仓库体系系结构设设计电信综合合业务信信息服务务平台设设计背景介绍绍数据仓库库的应用用越来越越广泛不同数据据仓库工工具之间间无法进进行数据据交换企业的应应用受到到工具的的限制利用元数数据可以以实现数数据交换换提纲背景介绍绍数据仓库库、元数数据理论论介绍CWM、MOF、UML、XMI规范介绍绍基于CWM的数据仓仓库体系系结构设设计电信综合

2、合业务信信息服务务平台设设计数据仓库库理论数据仓库库的定义义数据仓库库的建设设数据仓库库的应用用国内数据据仓库建建设的问问题元数据定义描述数据据的数据据研究元数数据的原原因管理、使使用数据据的需求求系统分布布和互通通的要求求元数据重重用、共共享的要要求元数据的的建模和和标准化化建模的两两大方向向元数据参参考模型型元数据模模型标准化OMGMDC提纲背景介绍绍数据仓库库、元数数据理论论介绍CWM、MOF、UML、XMI规范介绍绍基于CWM的数据仓仓库体系系结构设设计电信综合合业务信信息服务务平台设设计元数据的的层次Student（“张东”，“男”，）Student（“李芳”，“女”，）Record

3、（“Student”，Field（“name”，String），(Field（“sex”，String）) MetaClass（“Record”，MetaAttr(（“name”）,String),MetaAttr(“fields”),list)MetaClass（“Field”，）通用的元元模型信息，数据（M0）模型（M1）元模型（M2）元元模型（M3）OMG规范和元元数据层层次的关关系元数据层次MOF术语示例M3元元模型MOF模型M2 元模型，元元数据 UML元模型，CWM元模型M1 模型，元数据 UML模型，CWM模型M0对象，数据数据仓库数据CWM和相关规规范的关关系CWM和MOF的关

4、系CWM和UML的关系直接继承承了UML核心元模模型使用UML图形标记记使用UML中的OCL（对象约约束语言言）CWM和XMI的关系CWM的组成CWM元模型基础包资源包分析包管理包CWMDTD和CWMXMLCWMIDL提纲背景介绍绍数据仓库库、元数数据理论论介绍CWM、MOF、UML、XMI规范介绍绍基于CWM的数据仓仓库体系系结构设设计电信综合合业务信信息服务务平台设设计基于CWM的数据仓仓库体系系结构数据源OLTP数据库遗留数据据内部办公公系统数数据外部数据据数据源多种类型型：关系系型、多多维、记记录、XML以及其它它一些工工具类型型关系型：模式，物物理表， 视图图，字段，索引，触发器器，

5、外关关键字，主关键键字，数据类类型，字字段值，数据记记录，记记录的集集合Relational元模型Relational元模型（续1）Relational元模型（续2）关系型数数据源的的主要接接口BaseTable：查询和和修改表表的属性性、触发发器和结结构Catalog：查询和和修改包包含的元元素Column：查询和和设置属属性Row：查询和和修改一一条记录录的内容容RowSet：查询和和修改包包含的记记录ETL读取数据据清洁数据据转换数据据装载数据据ETL组件的接接口黑盒变换换：Transformation，DataObjectSet，TransformationUse白盒变换换：Featu

6、reMap，ClassifierMap，ClassifierFeatureMap，TransformationMap变换的执执行顺序序控制：TransformationTask，TransformationStep，TransformationActivity，StepPrecedence，PrecedenceConstraint中央数据据仓库数据粒度度最细且且多层次次数据是历历史的数据是时时间相关关的大数据量量数据是整整合的通用的、全局的的操作数据据存储ODS操作型系统O D S1/21/2企 业数据仓库数据集市市企 业数 据仓 库最细粒度数据集市部门2粒度2数据集市部门1粒度1部门3粒度3

7、外 部数据源数据集市数据集市市的特点面向部门门应用规模小，投资少少使用方便便且成本本低元数据库类型：中央元数数据库本地元数数据库内容：抽取过程程：任务、执执行顺序序、映射射关系、转换规规则描述数据据：方位图图、数据据之间的的商业关关系、商商业规则则、数据据的改变变数据仓库库管理：安全性、运行状状态、抽抽取过程程的调度度、I/O对象及其其关系数据仓库库管理访问控制制和安全全性管理理数据增长长管理抽取过程程的管理理性能管理理故障恢复复扩充和演演变管理理数据仓库库管理接接口抽取过程程的调度度（WarehouseProcess，WarehouseEvent，InternalEvent，Schedule

8、Event，ExternalEvent）抽取过程程的执行行（TransformationExecution，StepExecution，ActivityExecution）数据元素素的变化化（Measurement，ChangeRequest）OLAP组件接口口立方体的的定义：Cube，CubeDimAssoc，CubeRegion，Dimension，Hierarchy，Level，Mearsure，LevelBasedHierarchy，HierarchyLevelAsso，ValueBasedHierarchy，MemberSelection，MemberSelGrp，立方体到到物理数数

9、据源的的映射StructureMap，LevelBasedHierarchy，ValueBasedHierarchy数据挖掘掘组件的的主要类类及接口口MiningModel：模型属属性和模模型的输输入MiningSettings：对象属属性，输输入参数数的说明明ApplicationInputSpecification，ApplicationAttribute：使用模模型时的的参数MiningModelResult：挖掘的的结果SupervisedMiningModel:描述预言言性算法法产生的的模型StatisticsSettings, AssociationRulesSettings,ClusteringSettings,ClassificationSettings,RegressionSettings：对应模模型的设设置基于CWM的数据仓仓库体系系结构的的特点及优优点统一的数数据集市市和数据据仓库中央元数数据库驱驱动机制制灵活高效效的数据据交换方方式易于升级级高度的可可集成性性高度的可可扩展性性基于CORBA的企业数数据仓库库扩展结结构