总体数据规划1.ppt

总体数据规划,主题,至少包括企业数据架构示例和定义总体数据规划过程（从业务流程开始）数据标准化工作,信息资源管理的理论,威廉-德雷尔的数据管理（DataAdministrator：ApracticalGuidetoSuccessfulDatamanagement）,詹姆斯-马丁的信息工程方法论（IEM）,三种类型总体（或战略）规划的关系,新的业务方面,企业战略方向和目标,影响企业发展的新技术,未来的技术战略规划,从何处得到技术,信息工程的数据模型（与技术无关）,企业构成实体是不怎么变化的，变化快速的是业务处理过程,应用开发策略,数据管理策略,整体网络设计,分布处理策略,办公自动化策略,信息中心开发与维护,未来技术估计,总体业务规划,总体IT技术规划,总体数据规划,决定技术和数据；但数据规划可以与技术规划无关；物理软件技术怎样变化，数据作为描述企业资源、结构和能力的对象，自身及其关系可以是相对稳定的；时代的技术总在变化，但企业的基本要素是相对稳定的,企业数据架构,企业数据架构,原则,目标/战略,术语,数据结构/设计,数据存储,数据迁移,数据使用,数据质量,元数据,数据管理原则（职责、最佳实践、审核等）,数据一致性（Alignment）,数据调用,典型的企业数据架构模型,数据源,数据准备,数据管理/信息加工,数据准备,信息交付,直接查询,EA数据架构,数据架构内容,创建所需要的信息需要什么数据?数据分析交易数据分析数据绩效数据转换数据测试数据非结构化数据,考虑数据生命周期数据管理数据清洗数据迁移数据治理,数据架构的交付物当前数据模型R/ASWOT分析R/A新的/改进的数据模型R/A数据路线图R/A,输出,更新愿景更新ADD更新需求,8,输入,外部参考资料架构参考资料非架构的输入架构工作需求能力评估沟通计划架构的输入企业架构组织模型定制的架构框架数据原则架构工作说明书架构愿景架构储藏库(可重用构建块、组织特定参考模型、组织标准）架构定义文档的草稿架构需求规格书草稿架构路线图的业务架构构件,输出,步骤,见下页,优化和更新架构愿景阶段的交付物:更新的架构工作说明书架构定义文档草稿基线目标数据架构1.0版(业务数据模型、逻辑数据模型、数据管理流程模型、数据实体/业务功能矩阵)数据架构相关视图架构需求规格书草稿差距分析结果技术需求对将要设计的技术架构的约束更新的业务需求架构路线图的数据架构构件,数据架构阶段的输入输出,9,下面是完成数据架构的活动列表，在实际架构开发中，可能有不同的顺序。这些活动有选择参考模型、视点和工具开发基线数据架构描述开发目标数据架构描述进行差距分析，安全和私有性影响分析定义路线图构件解决跨架构图景的影响进行利益相关者的正式审查最终确定数据架构建立架构定义文档,更多活动,SWOT分析业务流程改进对数据的影响细节数据模型的类型,步骤数据架构,数据架构阶段的步骤,10,总体数据规划工作过程,第一步:进行业务分析建立企业模型主要依靠企业高层领导和各级业务人员，来分析企业的现行业务和长远的发展目标，按照企业内部各种业务的逻辑关系,将他们划分为若干职能区域,然后，弄清楚各职能区域中所包含的全部业务过程，再将业务过程细分为一些活动。第二步：进行实体分析建立主题数据库重点分析这些实体之间的联系按照业务人员的管理经验和一些形式化方法，对实体进行聚集分析，把联系密切的实体划分在一起，形成实体大组，作为划分主题数据库的根据，从而建立起主题数据库模型企业中针对不同的职能区域和业务过程，提供必要的数据共享的总体数据模型。第三步：进行数据分布分析结合数据存储地点，进一步调整、确定主题数据库的内容和结构，制定数据库开发策略。根据这些调整实体大组的结构，制定主题数据库与应用项目的开发顺序。,数据规划过程,准备条件调研,业务模型-概念数据,用户视图-逻辑数据,数据流,IT系统结构流程流向物理数据,业务分析阶段主要成果,业务模型（全域、业务域）按“业务域-业务过程-业务活动”建立的业务模型，是对现有业务需求的梳理与优化，可作为业务系统应用的需求规范业务模型划分为最小的业务单元业务活动后，具有相对的稳定性，可根据具体需求进行灵活配置与组合实现业务过程与其对应的用户视图的关联，使得理解业务的同时，能够获得相关的数据项用户视图（登记、规范化）在业务梳理的过程中，对每项业务需要的或产生的数据（包括单证、报表、账册、其他）进行收集、整理、归类，并将电子文件保存在元库中，作为业务系统原型开发的基础对用户视图中的栏目内容进行分析，整理形成数据项集，逐渐消除同义异名的情况，统一规范用户视图的数据项信息流分析（1-DFD、2-DFD）识别出与业务域有信息流向关系的外单位（包括上级部门、供应商、客户等）以及用户视图，产生上下级、部门间的交换信息不同业务系统间横向信息流及上下级单位间的纵向信息流分析结果，为建立信息交换平台、共享数据模型等奠定基础,13,建模阶段主要成果,数据模型（）系统数据建模是将功能模型产生的数据进行分析归类，按数据库规范化的要求组成基本表的结构，形成业务主题数据库主题数据库的建立，反映了用户的综合性信息需求，是数据中心建设中数据库设计的原型按业务需要对主题数据库的分析，经过讨论和全局协调，识别实体的属性并规范化数据结构产生基本表，作为业务系统的数据库设计原型数据元素/项()用户视图规范的过程产生数据项，基本表属性的识别过程中产生数据元素，通过计算机自动匹配或根据经验人机交互查找两种方式进行规范，形成统一的数据元素集数据元素是数据库建立的基本元素，按不同用户需求形成数据项，组织形成业务系统的界面信息分类编码(目录)根据信息内容的属性或特征，将信息按一定的原则和方法进行区分和归类，并建立起一定的分类系统和排列顺序，构成信息分类编码标准通过建立数据元素与信息分类编码的关联，使编码规范落实到主题数据库的基本表中，同时通过对用户视图的分析和基本表的建立也补充了一些编码信息分类编码标准化是进行信息交换和实现信息资源共享的重要前提，是实现管理工作现代化的必要条件,14,企业模型(业务模型),企业模型是对企业结构和业务活动本质的、概括的认识，是用“职能区域-业务过程-业务活动”这样的层次结构描述的。企业模型的建立：企业职能范围：是指一个企业中的主要业务领域。在信息资源规划中，第一阶段就是确定企业的各个职能范围，以便了解企业的概貌。业务活动过程：每个职能范围都要实现一定数量的业务活动过程，企业的职能和业务活动过程应该是企业的最基本的决策范围和最基本的活动，应该独立于任何组织机构和管理制度，以求尽量避免当企业的组织结构被调整或管理层次发生变动时，信息系统所提供的信息不再适合需要。业务活动可以用简明的文字加以定义，JamesMartin方法一般将一个机构建立的产品/服务、支持性资源的生命周期划分四个阶段：计划、获得、管理、分配。,职能区域识别,识别方法的要点组织架构图注意规划涉及的职能区域及边界独立或交叉涉及范围的广与窄分散与集中自顶向下（不能太窄）注意职能交叉实际存在，但违背应用组件重用或共享的要求,职能区域与业务过程,一个中型制造厂的职能区域和业务过程,职能区域或职能范围、业务范围，是指一个企业或组织中的一些主要业务活动领域，如工程、市场、生产、科研、销售等,现行组织机构的业务职能范围与业务过程对应关系,M：主要负责人和决策者T：业务过程主要参与者P：业务过程部分参与者,业务过程与所在地对应表,通过企业模型分析,可发现各种业务过程必然发生在一定的部门或地点,这样可做一张业务过程与所在地点的对应表如图.,企业模型图：即一张表明该企业职能和活动的图，其特征有：完整性：模型应提供组成企业的各个职能范围、各种业务互动过程、各种活动的一个完整的图表；适用性：该模型是人们合理地、有效地去理解企业的途径，在分析的每一层上所确定的过程和活动对所涉及的管理工作来说应是自然和确切的；持久性：只要企业的目标保持不变，该模型就应该保持正确和有效，只要企业执行的职能相同，企业模型就依然适用。,企业模型图,数据模型：管理信息相关的业务规则,业务规则问题描述：简要描述数据源和目的地数据源：C的产生过程、地点等发送（或传输）：目的地（U）数量和品质准确性/质量：信息质量的说明（置信度或获取的途径等交叉证明）数量：单位时间内的数据量（读取、访问等）时间：对该数据产生（获得）的频率和潜在规律的描述与数量结合安全性：CIA冗余：是否和别的数据冗余，冗余的理由使用：该数据的使用方法和使用者业务过程、角色、读取频率等维护管理生命周期数据老化：老化的状态、导致丢失？数据维护消除老化的影响维护：维护该数据的工作,主题数据库,主题数据库的概念其设计目的是为了加速应用项目的开发，程序人员使用的数据应已存在于有关主题数据库中，它把企业的全部数据划分为一些可管理的单位主题数据库。其设计应尽可能的稳定，能在较长的时间内为企业的信息资源提供稳定的服务。稳定并非限制主题数据库永不发生变化，而是要求变化后不会影响已有的应用项目的工作。主题数据库的选择：列出企业所涉及的产品和机构的组成内容；可以考察业务活动过程，然后记录下每一个过程的输入和输出数据属于哪个数据库，这样得到一个数据分类表。将前两种得到的数据分类表互相对照来建立一个联合的数据分类表，从而形成主题数据库的基础。,实体间的对应关系,实体单一实体和复合实体（不能直接由单一实体组合而成）关系一对一一对多互斥：同时与一个实体相连，但不能同时相连依赖：同时与一个实体相连，但必须是同时相连关系强度极弱联系：必须在不同的大组中或数据类较弱联系：可以在不同的大组中一般联系：可在也可不在一个大组中较强联系：可以在一个大组中强联系：必须在一个大组中,关系强度计算,实体之间的相关性矩阵表示两个实体没有被同一个活动是使用过，则关系系数为0每个活动都同时使用这两个实体，则关系系数为1具体计算A(E1）使用实体E1的活动的数目A(E1,E2)同时使用二者的活动的数目两个实体间的关系系数：E1对E2的相关系数A(E1,E2)/A(E1）考虑活动对数据的使用频度一个实体Ei和另外两个实体相关度都高，Ei要合在另外两个实体组成的分组中吗？需要考虑该实体对Ej和Ek的加权相关系数（A(Ei,Ej）A(Ej）A(Ei,Ek）A(Ek）/（A(Ej)A(Ek)）,系统结构设计方法U-C矩阵,C=建立并使用U=使用,UC矩阵画法和特点,UC矩阵的优点企业生成某一数据类的点只能是一个各类系统之间的关系接口清晰最大限度的减少系统之间的信息交互功能与数据实现紧密结合使功能体系和数据体系更加一致利用价值链和数据分类分析（思维导图）先完成数据和过程数据正确性分析数据守恒原则上每一列只能有一个C（否则是多个数据源）每一列至少有一个U不能出现空行或空列子系统间的数据流方框之外的U代表不同子系统间的数据流，箭头代表数据流向去掉UC，可以初步命名子系统,U-C-D：增加一个维度分布,赋值结果M主数据，唯一存放在一个地点V=变体数据，在不同的地点有不同的存放模式P分区数据，相同的模式，不同的值R复制数据，相同的数据存放在不同的地点S子集数据RG重组织数据T远程处理：数据不存放在本地分布式还是集中式赋值C强集中式理由，c若集中式理由D强分布式理由，d若分布式理由DC中心与当地小组协作,主题数据库与所在地对应表,通过数据模型分析,可以发现各个主题数据库所在的职能区域和产生或使用他们的业务过程的所在地点。,数据类型的分布,每个部门或地点使用的主题数据库,业务过程与主题数据库对应关系,企业信息系统的总体结构,由业务过程与所在地对应关系和主题数据库与所在地对应关系得出业务过程与主题数据库对应关系,在此表的基础上再加上一维，以表示地理位置，构成三维矩阵图表，就完成了数据分布的初步规划,蓝色框内的表示职能区域,分析,分析总体数据规划是宏观的，便于确定主要数据实体、关键属性、用户视图；明确主要业务模块、数据往来、接口等尽可能发现可能被忽略的安全保护之处也算是逆向工程，广义的，推导可能的安全策略！业务和数据的实时性为可用性指标提供依据ITIL等知识可以丰富安全保障体系的内容流程细节被隐藏既有的流程和访问路径是细节，在实践中不可能一一检查，因此，抽样检查是可能的行为总体数据规划中的业务过程细化为流程，业务过程的绩效指标与流程绩效指标取决于数据处理的效率取决于软硬件的支持,主题数据库数据类型分布情况,M主数据，唯一存放在一个地点V=变体数据，在不同的地点有不同的存放模式P分区数据，相同的模式，不同的值R复制数据，相同的数据存放在不同的地点S子集数据,分布类型的数据使用特征,Q=快M=中S慢,I=立即S=尽量快（同一天）O过夜L长,其他：H高M中L低,读取与更新特征影响到数据是否能采取复制数据类型,如果数据更新不频繁,可复制;如果更新是晚间成批进行,也可复制.,分布式设计因素表,数据的定性分析,顾客信贷账目系统的因素表,C强集中式理由c若集中式理由D强分布式理由d若分布式理由DC中心与当地小组协作,数据的定性分析,系统繁忙程度分析,繁忙的系统日常事务处理系统其数据库与综合信息系统或决策支持系统的数据库分开存取工作量大系统分类综合信息系统决策支持系统优化计算日常,四类系统,日常处理系统预定的任务和事务流、处理量大；批量的传统数据处理效益：事务处理效益高、周转快、从主题数据库中获益综合信息系统非结构化的和难以预计的查询、报表、功能强大的用户语言、友好用户界面和管理操作的有效性效益：为决策者提供更好的信息、从第四类数据库获益决策支持系统非结构化的应用、不能完全预见，对决策工作提供支持可能涉及大量计算；效益：更好的做出决策、可以拥有自己的数据库优化计算系统为某些类型问题提供解答、良好的结构化的效益：处理复杂问题提供新的方法；可以使用从数据库中导出的文件,日常/非日常事务处理子系统的标注,数据架构的作用,对管理层信息或数据资源企业有价值的资源人财物之外的业务对接、集成的瓶颈如何开发利用对IT人员数据规划是IT规划的核心内容企业实体对象的映射，决策的基础数据库设计的基础应用系统设计的基础系统分布的基础,参考模型、标准化,参考模型举例：TOGAF的集成信息基础设施参考模型FEA的数据参考模型行业参考模型数据标准：数据元标准信息分类编码作用：利用成熟模型可以在数据建模中避免设计缺陷和不足在系统集成中提供标准，规范数据接口,39,数据标准化,企业数据标准化是构成集团IT管制策略的重要组成部分，其过程也是一个长期的循环积累，不断提升的过程,建立数据标准化框架,分项目数据标准化,标准化数据体系,确定数据标准化工作的规范、组织、制度、方法、工具培训人员,在项目进程中规范完成相关部分的数据标准化工作，纳入集团数据标准化体系，积累、提升数据标准化水平,维护、控制、应用已经完成的标准化成果,配合项目建设进程，分析标准化建设要求，制订进一步标准化建设的计划,数据标准化（续）,管理决策集成层面,基础应用系统层面,数据管理的基础层面,通过数据接口实现各现有业务系统之间、业务系统与管理系统之间的数据集成，确保各关键应用之间的数据同步与一致,结合投资项目管理与关键信息等管理与决策对数据的要求，借助数据仓库技术，实现各业务系统及管理系统的数据集成，实现对公司管理层进行辅助决策的需求,数据标准化是数据管理的基础工作，规范并建立数据的基础管理工作，包括数据的编码体系，数据的名称相关术语、数据维护的相关制度等,主要思路,途径,数据仓库技术,基于数据仓库技术的Portal技术,数据接口,数据标准化,数据标准化（续）,信息资源是企业最重要的资源之一开发信息资源既是企业信息化的出发点，又是企业信息化的归宿数据标准化是开发信息资源的基本工作,通信网,计算机网络,信息资源网,集成化信息系统,基础设施建设,数据标准化,应用系统建设,主要工作,用户视图定义描述企业数据流模型的建立数据库结构规范数据字典的规范统一管理数据管理制度与组织的建立,数据标准化（续）复杂的接口,河南煤业集团现有部分信息系统需要完善，但接口过多必将导致复杂、不可控制的局面，因此大量建立“接口”来实现各应用间的数据集成不是根本的解决之道项目组将在对现有应用的数据进行分析的基础上判定那些应用模块，那些关键数据需要通过接口来进行协同与共享并制定信息集成方案,示意,数据元标准化的作用,信息化的目标:实现各种不同业务系统间跨地域、跨行业、跨部门的信息共享和业务协同。,数据名称的不一致数据长度的不一致数据表示的不一致数据含义的不统一,正确和适当的数据使用和解释的先决条件之一是，这两个数据的使用者和所有者对数据有一个共同的理解和描述,44,信息分类的标准化,信息分类编码classifyingandcoding根据信息内容属性或特征，将信息按一定的原则和方法进行区分和分类，并建立一定的分类系统和排列顺序，以便管理和使用编码可分为三类C类编码对象：应用系统