数据管理知识体系.pdf

数据管理知识体系数据管理知识体系 DMBOK 功能框架功能框架 2 0 版版 2007 年年4 月月 5 日日 International Foundation 2007 DAMA International All Rights Reserved 目 录目 录 目 录 2 文 档简介 2 修 订历史 4 1 简介 5 1 1 数 据管理专业 5 1 2 数 据管理知识体系 DMBOK 6 1 3 DAMA 数 据管理字典 10 1 4 为 什么需要这个框架 10 1 5 为 什么会有版本 2 0 11 2 概述 15 2 1 数 据管理功能 15 2 2 环 境元素 18 3 DMBOK 功能框架 24 文 档 简 介文 档 简 介 本文档针对数据管理知识体系 DMBOK 功 能框架的第 2 0 版进行描述 该框架是由 MAMA 国 际提供的 用于协助对本专业的最佳实践方法 进行规范化的工作 2007 DAMA International All Rights Reserved Deborah Henderson DAMA 国际教育 服务副主席 DAMA 基金会主 席 Mark Mosley DMBOK编辑 DAMA 国际 DAMA 基 金会 3 修 订 历 史修 订 历 史 Version 日期作者描述 1 02006 3 27Mark Mosley 由芝加哥分会给DMBOK 委员会提交的 建议书原始草稿 1 12006 4 10Deborah Henderson 被DMBOK 委员会采用的推荐修订本 1 22006 4 17Mark Mosley 改写后的草稿 作为DMBOK 委员会提 供给DAMA 国际 基金会的建议书 1 32006 4 20Mark Mosley 芝加哥DAMA 采用后的修订本 1 42006 5 3Mark Mosley 2006 年科罗拉多州丹佛地区讨论会后 DAMA 国际采用的修订本 1 52006 6 12Deborah Henderson 作了一些修订 2 02007 4 5Mark Mosley 做了一些修订 以反映2007年马萨诸塞 州波士顿DAMA 国际会议上所做的一些 修改 4 1 简 介简 介 1 1 数 据 管 理 专 业数 据 管 理 专 业 在这个信息时代 对于每一个组织机构来说 信息管理功能都是至关重要的 不管把对数据 进行管理的工作称为数据管理 或者是数据资 源管理 还是企业信息管理也好 机构们已经 越来越意识到他们所拥有的数据是很有价值的 资源 就像任何贵重资产一样 他们也认识到 必须对他们的数据资源进行管理 如果企业 政府和其它组织机构能更有效地去使用他们的 数据资产 他们将会变得更有效率 数据管理 功能的目的就是去寻找手段 以有效的控制数 据资源 并提升数据资源的利用率 业务数据管理员是企业数据资产的保管人 技术数据管理员是这些资产的专家性质的管理 人和监护人 对于这两类人员来说 数据管理 是他们的共同责任 数据管理功能的实施对IT 和企业之间的这种合作能起到协调作用 在IT领域 数据管理一个新兴专业 在过去 的30年里 数据管理的概念和支撑技术发展得 非常快 建立一个正式的 有认证的 公认的和受尊 5 重的数据管理专业并不是一个简单的事情 当 前的环境尚处于一种混乱状态 各种术语 方 法 工具 观点和夸大言词混杂在一起 为了 使数据管理专业能成熟起来 我们需要一些专 业标准 标准术语与定义 标准功能 过程和实践方法 标准角色和职责 标准交付结果和度量 这些标准和最佳实践方法将提高数据管理专 业人员的工作效率 另外 它们也使得我们能 与我们的队友 经理和总经理更好地交流 特 别是总经理们 他们需要更充分地理解数据管 理及其价值 这样他们才能充分地支持数据管 理功能 并投入资金和人员 DAMA 是数据管理 协会的简称 是世界上最 杰出的为数据管理专业人员服务的专业组织 DAMA 国际和 DAMA 基 金会正在为本专业制定一些 标准 1 2 数 据 管 理 知 识 体 系数 据 管 理 知 识 体 系 DMBOK DAMA 国际和 DAMA 基 金会正在编写数据管理 知识体系指南 DMBOK 指南 DMBOK编委会已 6 经成立 并作为工作委员会指导 DMBOK 指南和 相关出版物的编写工作 其中包括一本 DAMA 数 据管理字典 编委会成员包括各地 DAMA 分会的 参与会员 DAMA 会员们已经自愿地投了许多稿 件 并对这些稿件进行了检查 有关数据管理的整个知识体系是相当大的 并在不断地发展着 DMBOK 指南将会针对数据 管理给出一个权威性介绍 它将给出数据管理 的功能 术语和最佳实践方法的标准行业解释 DMBOK 指南不会尝试在任意一个具体的数据管 理功能方面都去成为权威 但将会给读者指出 一些被广泛认可的出版物 文章和网站 以作 进一步的阅读 DMBOK 指南将介绍一些有效的 其它观点和一些被业界所接受的方法 在这些 观点或方法里 会存在一些明显的意见分歧 DMBOK 指南的目标包括 1 在数据管理功能的通常应用环境方面建立 共识 2 为通常使用的数据管理功能 交付结果 角色和其它术语提供标准定义 3 明确数据管理的指导原则 4 对被广泛接受的好实践方法 广泛采用的 方法和技术以及有意义的其它方法给出一 7 个概要介绍 但并不涉及特定的技术供应 商或他们的产品 5 简要地指出常见的组织上和文化上的问题 6 厘清数据管理的范围和边界 7 给读者指出一些其它学习资源 以作进一 步的阅读 DMBOK指南的读者包括如 下 有认证的和热心的数据管理专业人员 与数据管理专业人员一起工作的其它IT专 业人员 所有层次的业务数据管理员 有志于将数据作为企业的资产进行管理的 总经理们 将数据作为企业的资产并在其上进行增殖 应用的知识工作者 对客户的数据管理功能进行评估并协助这 些客户实施和提升数据管理的咨询人员 负责开发和提交数据管理课程的教师 数据管理领域的研究者 8 DAMA 预计了 DMBOK 指 南的几个潜在用途 包 括 针对各种不同的读者 宣扬数据管理的特 性和重要性 协助数据管理界内部建立各种共识 帮助数据管理员和数据专业人员理解他们 的职责 为数据管理的有效性和成熟度评估提供一 个基准 为实施和提高数据管理功能的工作提供指 导 给读者指出一些有关数据管理知识的其它 资源 指导用于更高级教学的数据管理课程内容 的开发和交付工作 提示在数据管理领域里需要进一步开展的 研究范围 帮助数据管理专业人员准备数据管理专业 人员认证 CDMP 考试 9 协助各种组织机构制定企业的数据战略 DMBOK 指 南的参考模型包括由项目管理协会 发布的PMBOK1 项目管理知识体系 文档和由 IEEE 发布 的 SWEBOK2 软件工程知识体系 DAMA 坚信 DMBOK 指 南将会很好地被广大的经 理们 总经理们和高层教育界所接受 DAMA 预 期将于2008年发布 DMBOK 指 南 1 3 DAMA数 据 管 理 字 典数 据 管 理 字 典 DAMA 数据管理 字典是 DMBOK 指 南的配套书籍 该书内容最初是作为 DMBOK 指 南的详细术语表 编写的 考虑到它的内容规模和商业价值 DAMA 正将其单 独发行 该字典中的术语定义与 DMBOK 指 南中的相应术语的使用是完全一致的 DAMA 预期于 2007年发布数据管理字典 1 4 为 什 么 需 要 这 个 框 架 为 什 么 需 要 这 个 框 架 本文档所描述的 DMBOK 功 能框架的存在目的 在于如下几 点 为数据管理知识体系 DMBOK 指 南 文档 的组织提供一个紧凑的结构 1 项目管理协会的商标 2 IEEE 的商标 10 为 DMBOK 指 南通篇所引述的数据管理过程 角色和交付结果定义出标准术语和定义 指导组织机构的数据管理功能和数据战略 的评估工作 并建议和指导刚起步的机构 去实施和提升数据管理 1 5 为 什 么 会 有 版 本为 什 么 会 有 版 本2 0 1 0 版 的 DMBOK 功 能框架于2006年 4 月由 DAMA 执 行委员会通过 并于2006年 7 月发布在网站 www dama org 上 在世界范围内 在过去的 8 个月时 间里 已经有1000多人下载了本框架论文 在这段时间 在编写 DMBOK 指南的过程中 也对本框架进行了一些修改 需要特别指出的是 我们对如下的数据管理 功能重新进行了命名 数据管理工作和控制 Data Stewardship Governance 改 称为简称为数据控制 Data Governance 因为 考虑到数据管理活动 stewardship 的活动和 职责涉及到所有的 9 个功能 数据体系结构和设计改称为数据体系结构 分析和设计 以更全面的描述数据建模和 说明规范编写活动 11 数据库管理的英文名称由 Database Administration 改 称为 Database Management 以更清楚将该功能从数 据库管理员的角色中分离出来 考虑到其 它角色涉及到数据库管理功能 数据质量提升改称为数据质量管理 以更 广泛地反映该功能的工作范围 数据仓库和商务智能改称为数据仓库和商 务智能管理 以更清楚地指明该功能包括 促进商务智能的开发和支持活动 但是并 不包括由知识工作者所执行的商务智能活 动 非结构数据管理改称为文档 记录和内容 管理 因为我们认识到处于数据库之外的 数据内容仍然存在某种程度的结构 考虑到商标限制 元数据管理 Metadata Management 在英文写法 上改为 Meta Data Management 这 9 个功能的叙述顺序也作了如下调整 数据质量管理移到参考数据和主数据管理 之前 因为我们意识到参考数据和主数据 12 管理是数据质量管理的一种特殊形式 参考数据和主数据管理移到数据仓库和商 务智能管理之前 因为我们意识到它的关 注点在于针对为数据仓库提供数据源的操 作型数据库的数据集成 元数据管理移到第 9 个位置 以反映它在 为其它数据管理提供基础架构方面所担当 的基础角色地位 如下的环境元素已经重新命名 两种目标 Goals Objectives 在英文上改称为 目的和原则 Goals Principles 因为我们意 识到 1 DMBOK 指 南将为每个功能给出一个方 向性的目标 goal 但并不是一个具体 的目标 objective 目标 objective 反映了 一个特定组织机构的当前可测量的具 体目标 2 原则 Principles 部分已经包括了目的 Goals 部分 从实践方法 Practices 部分移动到更前的叙述位置 13 过程和活动 Process Activities 已改为只叫活 动 因为我们意识到功能 Functions 和活 动 Activities 是两种不同的过程 原则和实践方法 Principles Practices 已经改称 为实践方法和技术 Practices Techniques 以 反映原则 Principles 和目标的组合 Goals 组织上和文化上的问题 Organizational Cultural Issues 已经改 称为组织和文化 Organization Culture 另外 我们标识出了更详细的活动 交付结 果和角色 虽然 DMBOK 指 南仍在编写当中 但 对于经理们 数据管理员和数据管理专业人员 来说 这些细节将会被证明是很有用的 最后 本文第一版的许多冗长的介绍文字多 数被去掉了 虽然我们已经尊重了本文最初作 为一个建议书提交给执行委员会时的形式 但 是 对于本文的当前读者来说 冗长的介绍已 经不再必要了 这些读者是 DAMA 会员和其它对 DMBOK 框 架内容感兴趣并且有志于将其用于指 导他们的组织机构的数据管理事务的人员和团 14 体 2 概 述概 述 DMBOK 功 能框架标识出了 9 个主要的数据管理 功能 并通过 7 个环境元素对每个功能进行描 述 如下的矩阵以图示方式给出 DMBOK 功 能框 架 图 1 DMBOK 功 能框架 这个矩阵是描述整个框架的一个非常有用的 形式 2 1 数 据 管 理 功 能数 据 管 理 功 能 这 9 个数据管理功能是 15 数据控制 对数据管理和使用进行规划 监督和控制 数据体系结构 分析和设计 数据建模 和规范说明 数据库管理 数据库设计 实施和支持 数据安全管理 确保隐私 机密性和合 适的访问控制 数据质量管理 定义 监控制和提高数 据质量 参考数据和主数据管理 管理珍贵版本 和复制品 数据仓库和商务智能管理 支持报表处 理和分析 文档 记录和内容管理 管理数据库之 外的数据 元数据管理 集成 控制和提供元数据 16 图 2 9 个数据管理功能 上图单独给出了这 9 个功能 暗示了这样一 个叙述顺序 即从中心开始 然后按顺时针转 圈 从 1 00 的位置到 11 00 的位置 下图给出了每 个功能在一般意义上的涉及范围 17 图3 数据管理功能 概要范围 2 2 环 境 元 素环 境 元 素 这 7 个环境元素提供了一个逻辑的和一致的 方法 用来描述每个功能 这些元素为如下工 作提供了一个结构体系 DMBOK 指 南里每章内的一致的叙述 评估的问题 结论和建议的组织 每个功能的战略规划的指导 环境元素的思想并不是新东西 通用的参考 结构标识出了三个元素 过程 技术和人 我 们相信 在过程 过程 交付结果 方法和技 术 和人 角色和责任 组织上和文化上的问 题 的范畴下 可以涉及东西相当多 这个框架标识出如下 7 个元素 18 图4 环境元素 上图给出的这 7 个元素 暗示了这样的一个 叙述顺序 也就是从中间开始 然后顺时针转 圈 从 1 点的位置转到12点的位置 下图给出 了在通常意义上每个环境元素的涉及范围 19 图5 环境元素 概要范围 基本的环境元素有 目标和原则 每个功能的方向性业务 目标以及功能履行中的基本指导原则 活动 每个功能都被进一步分解成更 低层次的活动 一些活动组合在一起构成 子功能 活动能被进一步分解成任务或步 骤 交付结果 被作为每个功能的中间结 果或最终结果建立起来的输出信息 物理 数据库和文档 其中的一些被认为是基本 的 有一些一般情况只作推荐 另外一些 是根据具体环境可选的 20 角色和责任 在执行一个功能和对功 能进行监督过程中所涉及的业务角色和IT 角色 以及在该功能中每个角色所涉及的 具体责任 很多角色可能会参与多个功能 实践方法 具体技术 Techniques 用于执 行这些过程和生成交付结果的常见和流行 的方法和具体技术 也可能包括常见的约 定 推荐的最佳实践方法和简要介绍的候 选方法 技术 Technologies 各种支撑技术 主要是软件 工具 标准和协议 产品选择标准和常 见学习曲线 与 DAMA 的方针一致 这里不 会提及具体的供应商和产品 组织和文化 这些问题包括 o 管理度量标准 规模 精力 时间 代价 质量 有效性 生产率 成功和商业价值的度量标准 o 关键成功因素 o 汇报体系 o 合同策略 Contracting Strategies o 预算和资源分配 o 团队和小组动力 o 权威和授权 21 o 共同价值和理念 o 期望和态度 o 个人风格和喜好差别 o 文化习俗 礼仪和象征标志 o 企业传统 o 企业 文化变化管理 在DMBOK指南中 每个功能都会有一章进行 论述 每章都会讨论这 7 个元素 各章讨论的 内容各有长短 与每个具体涉及的问题有关 每章都会遵从一个一致的结构 包括 对每个功能的一个简介简介 包括 关键术语定义 该功能的业务目标列表 每个功能的上下文图 内外关系 图 总结该功能的目标 活动 输入和交付结果 角色和支撑技术 一个概念和活动概念和活动 Concepts and Activities 小节 或 者针对子功能 有多个这样的小节 包括涉及到如下方面的介绍性的叙述性 讨论 22 每个功能执行的活动 相关的交付结果 负相应责任的角色和责任 个了 组织 最佳实践方法和通用的具体技术 支撑技术 有一章总结 包 括 一个指导原则复述表 一个表格 扼要复述活动 交付结 果和负责角色 相关的组织上和文化上的问题的讨 论 选出一书和文章列表 标明为建议读物 23 3 DMBOK 功 能 框 架功 能 框 架 本章叙述功能 子功能和活动的框架 功能 和子功能以名词命名 而活动则以动词命名 另外 每个活动会被归入四个活动组的一个之 中 每个活动会归入如下四个活动组之一 规划活动 P 为其它数据管理活动树立 战略和战术方针的活动 规划活动可以重 复执行 控制活动 C 以 持续进行的方式执行的监督 活动 开发活动 D 项目内部所发生的活动 被认为 是系统开发生命周期 SDLC 的一部分 通过分析 设计 连编 测试和实施过程 建立数据交付结果 操作型活动 O 以持续的方式执行的服务和 支持活动 下面给出的框架在每章的草稿出来以后将作 相应变动 但我们希望跟现在这个框架相比 变动尽量不要太大 24 1 数据控制数据控制 1 1 数据管 理规划数据管理规划 1 1 1 明确战略性的企业数据要求 P 1 1 2 开发和维护数据策略 P 1 1 3 建立数据管理专业部门 P 1 1 4 明确和委任数据管理员 P 1 1 5 建立数据控制和管理部门 P 1 1 6 建立 复查和批准数据策略 标准和 过程 P 1 1 7 复查和批准数据体系结构 P 1 1 8 规划和资助数据管理项目和服务 P 1 1 9 估计数据资产价值和相关成本 P 1 2 数据管 理监督和控制数据管理监督和控制 1 2 1 监督数据管理专业职员和部门 C 1 2 2 协调数据控制活动 C 1 2 3 管理和解决数据相关问题 C 1 2 4 监督和保证规章制度的遵守 C 1 2 5 传达 监督和加强与数据策略 标准 过程和体系的一致性 C 1 2 6 检查数据管理项目和服务 C 1 2 7 传达和宣扬数据资产的价值 C 25 2 数据体系结构 分析和设计数据体系结构 分析和设计 2 1 企业数 据体系结构企业数据体系结构 2 1 1 建立企业数据模型 P 2 1 2 结合其它业务模型 P 2 1 3 定义数据库体系结构 P 同 3 3 2 2 1 4 定义数据集成 MDM 体系结构 P 同 6 2 2 1 5 定义数据仓库 商务智能体系结构 P 同 7 2 2 1 6 定义元数据体系结构 P 同 9 2 2 1 7 定义企业术语和命名空间 P 2 2 数据建 模和规范说明数据建模和规范说明 2 2 1 定义信息要求 D 2 2 2 建立和维护逻辑数据模型 D 2 2 3 建立和维护物理数据模型 D 2 3 数据模 型质量管理数据模型质量管理 2 3 1 建立数据建模标准 P 2 3 2 检查数据模型质量 C 2 3 3 管理数据模型版本和集成 C 3 数据库管理数据库管理 3 1 数据库 开发数据库开发 3 1 1 定义数据库设计标准 P 3 1 2 设计物理数据库 D 3 1 3 检查数据库设计质量 C 26 3 1 4 开发数据访问服务 D 3 1 5 开发信息产品 D 3 1 6 实施开发 测试数据库变化 C 3 1 7 建立和维护测试数据 D 3 1 8 迁移和转换数据 D 3 1 9 测试和确认数据需求 D 3 2 数据库生产运作支持数据库生产运作支持 3 2 1 实施生产数据库变化 C 3 2 2 获得外部数据源 数据 O 3 2 3 规划数据恢复 P 3 2 4 备份与恢复数据 O 3 2 5 设置数据库性能服务水平 P 3 2 6 监控和调整数据库性能 O 3 2 7 数据保存规划 P 3 2 8 归档 检索和清除数据 O 3 2 9 管理特殊数据库 O 3 3 数据技 术管理数据技术管理 3 3 1 理解数据技术需求 3 3 2 定义数据库体系结构 同 2 1 3 3 3 3 实施和维护数据库环境 C 3 3 4 评估数据技术 P 3 3 5 安装和管理数据技术 O 3 3 6 编目和跟踪数据技术许可 C 27 3 3 7 支持数据技术使用情况和问题 O 4 数据安全管理数据安全管理 4 1 理解数 据隐私 机密性和安全要求 P 4 2 定义数 据隐私和机密性标准 P 4 3 定义口令标准和过程 P 4 4 实施数 据安全控制 D 4 5 管理用 户 口令和用户组 C 4 6 管理数 据访问视图 C 4 7 管理数 据访问许可 C 4 8 监督用 户身份验证和访问行为 C 4 9 分类信 息机密性 C 4 10 数据安全性审计 C 5 数据质量管理数据质量管理 5 1 提出和 提升数据质量意识 O 5 2 定义数 据质量度量标准 P 5 3 定义数 据质量需求和业务规则 D 5 4 对数据 质量进行分析 建立概要文档 测 量和监督 C 5 5 设置数 据质量服务层次 P