元数据管理-实用ppt课件.ppt

元数据管理 冷鹏 2006年编写 1 数据集成技术 数据展现分析 数据仓库建模 厂商解决方案 谈元数据管理 数据仓库基础 项目开发管理 元数据管理工具 InformaticaMetaManagerDAGMetaCenterIBMMetaStageOracleOWBCADecisionbaseTransformer 元数据 MDC的开放信息模型分析与设计 AnalysisandDesign 对象与组件 ObjectandComponent 数据库与数据仓库 DatabaseandWarehousing 业务工程 BusinessEngineering 知识管理 KnowledgeManagement OMG组织的CWM模型UMLMOF 元对象设施 XMI XML元数据交换 元数据的重要性 及时发现系统变化找出需要调整的ETL程序给出仓库中数据和指标的来源及规则调整仓库的数据模型促进项目组成员的沟通监控数据质量采用元数据跟用户确认新的需求 技术元数据 业务元数据 谁需要元数据 谁需要元数据 开发人员 谁需要元数据 谁需要元数据 业务经理 项目经理 谁需要元数据 架构师 谁需要元数据 元数据的存储区 数据仓库元数据结构图 元数据管理示意图 源数据 EDW ODS DW DM 前端工具 connections 暂存区 元数据数据库 InformaticaMetadataManger InformaticaMetadataManager InformaticaMetadataManager onOracle8 1 7andabove SQLServer2000SP3andDB27 xEE EEEandabove Sourcedefinition 源系统地址 网络连接 访问方式Location networkconnection accessmethods计算机系统 操作系统Computerplatformdefinition operatingsystemdefinition数据库服务器名 访问方式 数据结构 有关的表 列Databaseservername accessmethods schema table elementsofinterests源数据库链接说明Sourcedatabaselinks逆工程与源系统设计获取定义说明Reverseengineeringandsourcedesigncapturespecification元数据交换说明Metadataexchangedefinition Stagingareadefinition 源至暂存区映像 Source stagingmapping 暂存区至目标区映像Staging targetmapping中间文件的传输说明Filetransportspecification中间文件的说明及使用Filespecificationandusage中间文件的前后处理 清理与压缩 说明Filepre posteventprocessingspecification暂存区数据库的前后处理及中间处理说明及使用Stagingdatabaseusageandpre postprocessspecification Targetmodelingdefinition 星结构Starschema事实表定义说明Facttabledefinition度量Measurement数字键Numerickey交替键Foreignkey索引Indexdefinition定义数据 如数据类型 数值大小和省缺值 有效性制约Validationconstraint数据域值定义Datarangevalidation分区定义说明Partitionspecification存储说明Storagespecification 维表定义与说明Dimensiontabledefinition主键Primarykey缓慢变化的维Slowlychangeddimension维的等级 层次Dimensionhierarchy维的共享Dimensionsharing维的版号化Dimensionversioning数据库完整性限定Databaseintegrityconstraints Targetmodelingdefinition 维表定义与说明Dimensiontabledefinition主键Primarykey缓慢变化的维Slowlychangeddimension维的等级 层次Dimensionhierarchy维的共享Dimensionsharing维的版号化Dimensionversioning数据库完整性限定Databaseintegrityconstraints Mappingdefinition 源至目标映像Source targetmapping基本数据到综合数据的映像Basicdata summarymapping标准字典Standarddictionary转换字典Conversiondictionary参照表Lookuptables映像表Mappingtables ETLdefinition 转换规则和方法Conversionruleandmethod数据清洗说明Datacleaningspecifications批作业说明Batchjobspecification加载频率Loadingfrequency累加时间片控制说明Incrementaltimeslicecontrolspecification回退说明与准则Rollbackspecificationandpolicy剥离与修改数据准则Stripandmodificationinbounddatapolicy转换函数库Conversionfunctionlibrary传输定义与说明Transportationdefinition加载定义与说明Loadingdefinition ETLdefinition 会期 对话管理定义与说明Sessionmanagementdefinition预定作业排时Scheduling批作业前后事件说明及处理方法Pre batchandpost batchjobevents批作业日志Batchlogging会期 对话日志Sessionlog拒收日志Rejectedlog坏数据日志Baddatalog Summarymanagementdefinition 事实表 维表至总计方阵映像Fact dimension summarycubemapping总计至总计映像Summary summarymapping总计方阵设计Summarycubelayout聚合定义说明Aggregatedefinition实体化视图 方阵定义说明Materializedview cubedefinition方阵间关系Relationshipsbetweencubes嵌入式实体化视图 方阵之间的依赖性Dependencyofnestedmaterializedviews cubes方阵组Groupingofcubes Summarymanagementdefinition 刷新过程的定义与说明Refreshingdefinition刷新前后事件处理说明Pre refreshingandpostrefreshingevents刷新方法Refreshingmethods刷新组Refreshinggroups刷新执行顺序Refreshingsequence刷新频率Refreshingfrequency刷新过程处理软件Refreshingprocedures刷新作业的监控检查Refreshingmonitoring OLAPdefinition 查询机制Queryengine虚拟方阵 视图定义Virtualcube viewdefinition访问权限管理说明Privilegemanagementspecification用户接口定义与说明Userinterfacedefinition访问方式Accessmethod结果数据提交方法Deliverymethodanddefinition结果数据传输定义与说明Resultsettransportationdefinition用户登入 登出Userlogin logoff用户活动日志以及出错处理Userlogginganderrorhandling联机分析用户手册OLPAUsermanual ApplicationSoftwareSpecification 软件版号管理与说明Versioncontrol数据库应用版号Databaseapplicationversion软件与程序版号Softwareandprogramversion程序与数据的参照所名Function dataobjectreferences包 过程软件 函数Packages storedprocedures functions函数库Functionlibrary元件Components程序调用层次模型定义与说明Hierarchicallevelmodel2 3级结构Architecture 2 3 tierstructure程序库Library业务规则定义说明BusinessRuledefinition业务规则表Businessruletables业务规则表与业务政策的联系AssociationbetweenBusinessruleandbusinesspolicies Qualitycontrolandsecuritydefinition 安全政策Securitypolicy审