元数据管理与数据质量监控概要.ppt_第1页
元数据管理与数据质量监控概要.ppt_第2页
元数据管理与数据质量监控概要.ppt_第3页
元数据管理与数据质量监控概要.ppt_第4页
元数据管理与数据质量监控概要.ppt_第5页
已阅读5页,还剩31页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

元数据管理&数据质量监控,北京瑞斯泰得数据技术开发有限公司,项目背景,功能概览,五大类元数据,管理型,数据库,业务,操作型,VSS文档,ServerApplicationftptelnet,指标维度纬表字典基本表字典数据表,数据库表视图物化视图存储过程字段,ETL报表数据接口接口文件,元数据的类型,元数据管理,元数据管理-数据库元数据,基本操作增、删、改、查加入到“个人文件夹”加入到“公共文件夹”表存在性实时查询字段备注查询字段备注保存表数据预览影响分析血统分析,元数据管理-管理型元数据,基本操作编辑、删除加入到“个人文件夹”加入到“公共文件夹”工作桌面支持自动登录netterm自动登录plsql,元数据管理-业务元数据,增加步骤添加对象类别,例如:“统计周期”添加对象属性类别,例如:“字符型”添加对象属性,例如:“描述”新增一个具体的元数据,例如:“月”,元数据管理-数据字典,基本操作浏览增加编辑删除,元数据管理-SQL脚本元数据,基本操作编辑删除工作桌面支持用UltraEdit打开脚本文件和日志文件,血统分析,功能描述:通过对元数据关系的回溯,以图形方式展现指定元数据的数据血统和加工过程。作用:通过该功能,业务人员可以清楚的了解指标等关键数据的来龙去脉。,影响分析,功能描述:通过分析元数据之间的关系,以图形方式直观展现指定实体对全局的影响,如某数据库表的变更将影响到哪些ETL、数据库表等。作用:通过影响分析,技术人员可掌握各程序、数据之间的关系和相互影响,更好确定系统变更所涉及的范围,避免遗漏和误操作,从而降低维护人员的工作量和出错的机率。,数据质量六大评估标准,哪些数据是以非标准格式存储的?,哪些数据值提供了冲突信息?,哪些数据不能正确描述对象的属性或已经过期?,那些数据根本就不存在?,关键数据是否及时传送到目标应用?,哪些数据记录时重复的记录?,数据质量监控,数据质量监控-质量点监控,功能描述监控某个生产流程环节,查看该环节的质量指标是否符合要求。作用保证数据在生产过程的某个生产环节的正确性和一致性。规则维护定义SQL告警条件任务调度,数据集维护规则维护标准探测模式探测分布探测日期探测任务调度,数据质量监控-数据剖析,探测出检查对象的数据模式,方便做数据分析,并能根据探出的数据模式自动生成数据规则表达式,产生数据校验规则。,数据质量监控-数据指标,数据集维护规则维护统计周期度量设定告警条件任务调度,数据质量监控-表空间监控,功能描述监控数据库表空间使用量是否超过指定的限额或百分比。作用提前获得表空间不足的信息,以便及时处理,防止由于空间不足引起的异常发生。告警条件可用空间小于N兆使用率超过M%告警责任人任务调度,表空间监控结果,数据质量监控-表监控,表选择任务调度,数据质量监控-SQL脚本监控,告警条件错误关键字、过滤关键字超时设置超时时长任务调度,任务调度中心,任务中心,日志中心,系统管理,工作区,版本控制元数据搜索分主题

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论