数据治理数据资产盘点及治理的路径与方法_第1页
数据治理数据资产盘点及治理的路径与方法_第2页
数据治理数据资产盘点及治理的路径与方法_第3页
数据治理数据资产盘点及治理的路径与方法_第4页
数据治理数据资产盘点及治理的路径与方法_第5页
已阅读5页,还剩52页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

数据资产盘点及治理的路

径与方法目

录C

0

n

t

e

n

t

S01

数据资产管理背景

02

数据资产管理体系03

数据资产管理平台

04

数据资产管理案例05

数据资产管理总结数据资产管理背景数字资源肆全球数字发展道路(2021.09.26-世界互联网大会)创新发展机制,盘活五大要素(2020.03.30某省市场化配置)土地

劳动力

数据

技术

国家战略实现2030碳达峰、2060碳中和,并实现2035远景目

标和第二个一百年目标,

数据经济是唯一的选择,数

字文明是必然的形态人类认知客观世界三要素:

物质、能量、信息。数据

是信息要素的基础载体和呈

现亿信华圆1

数据资产入表系列直播以数据要素为核心,促进要素间的融合,线上线下相互融合构建数据产权制度,构建数据基础建设,促进数据开放交换(2022.

12.

19《数据基础制度》)数字文明(2021.09.26-世界互联网大会)数字中国建设布局(2021.09.26-世界互联网大会)数字经济(2016.10-二十国峰会)五位

一体

数字

发展数据进发数字趣共享数字趣共享数字

共建数字

国际

合作数字

治理体系数字

技术

创新数淙

共建共享

基础李

保障全18世纪60年代,第一次工业革命农业文明进入工业文明电气时代19世纪70年代,第二次工业工业革命发电机的问世,影响了世界政治、经济秩序20世纪40年代,第三次工业工业革命原子能、航天、电子计算机技术突破智能时代

目前未进行权威定义德国“工业4.0”,欧洲和中国采用这个概念

美国“再工业化”日本“工业智能化”各国的工业、制造业大数据发展战略都是一个庞大复杂的系统工程,既要构建工业大数据采集、汇聚、流通、分析、应用的价值闭环,

推动创新发展,也要提升数据治理和安全防护能力,

保障发展安全;

既要宏观层面建立工业大数据生态,也要微观层面务实着力,提升企业的数据管理能力;既要重视需求侧大数据与实际业务深度融合,也要在供给侧推动大数据技术和产业创新发展。2009年,开通政府数据网站,要求各联邦机构依法公开数据,实现政府信息的集中、开放和共享。2019年,《联邦数据战略合和2020年行动计划》,描绘政府十年数据愿景、

关键行动计划,涵盖一系列支持美国工业大数据的举措,涉及大中小初创企

业,各类企事业单位、研究机构、供应商。数据能重塑生产、消费和生活方式。2020年发布了《欧洲数据战略》,

积极推进数字化转型,打造欧盟单某省市场,强化技术主权,提升企业竞争

力,在工业金融行政交通等领域的应用,在新一轮的数字化革命中先发制人。日本2019年,强调“经济增长的动力不再是汽油,而是数字数据”提出建立针

对DFFT(DataFreeFlowwithTrust)的体制。

国外现状:信息时代蒸汽时代亿信华|数据资产入表系列直福美国欧盟数字化

认知不够找不到价值切入点业务流程固化信息化存在短板不知道数字化是什么,为什么要做数字化,数字化和信

息化的区别是什么,是不是做个系统,上一套软件就是

数字化成功了数字化转型是需要投入的,不仅是资金的投入,更多的

是资源的投入,人才的投入,那么从哪里开始才能够有

较高的投入产出比,成为了企业的首要问题传统企业经过过去多年的沉淀,有的已经设置了非常多

的业务流程,层层关联,与组织架构结合形成了比较固

化的体系传统企业的信息化水平和人才无法匹配数字化转型的速

度和节奏,这也成为了传统企业数字化转型的一大共性

挑战数据服务不数据服务手段单一,数据服务开发效率低,不能及时满足多样的数据需

求缺少数据运营架构数据价值难体现,数据流转

流程难管控,数据应用闭环

不完整数据安全隐患敏感数据缺少管控策略,增高法律法规风险,制约数据服务普及数据无法统筹管理数据孤岛依然普遍存在,对

海量数据的管理缺乏健全的

数据架构设计数据问题难定位诊断问题成本高、解决问题效率低数据质量不足数据质量难保障,数据产出

难把控,影响战略决策分析

和一线业务数据支撑

企业数据资产管理面临的问题管理层面--数字化转型过程中的诸多难点数据管理--

数字化转型过程中的诸多难点亿信华疆1数据资产入表系列直播数据资产管理体系数据资源(Data

Resources)是指企业或个人在运作中累积的各类数据记录,包括但不限于客户记录、销售数据、人事信息、采购记录、财务报表及库存数据等。这些数据是原

始的、加工的,但却蕴含了大量的信息和潜在价值。数据资源作为大数据领域的新词,在2020年7月被大数据战略重点实验室全国科学技

术名词审定委员会研究基地审定并发布。随着数字化和数据化的发展,数据资源的价

值和应用将越来越受到重视数据资产

(DataAsset)是指由个人或企业拥有或控制的,能够为企业带来未来经济利益的,以物

理或电子方式记录的数据资源。它是网络空间中的数据集,具有数据权属(如勘探权、使用权、所有权),

具有价值、可计量、可读取。近年来,随着数据经济的发展和技术的进步,

数据资产的价值逐渐被认可。数据资源被视为一种资产纳入企业财务报表,这为企业利用数据资产提供了更多的机会和方式。数据治理(Data

Governance)是组织中涉及数据使用的一整套管理行为,由企业数据治理部门发起并推行。它主要关注如何制定和实施针对整个企业数据的商业应用和技术管理的一系列政策和流程。数据治理的目标是提升数据的价值,并确保数据在整个企业中得到有效的使用和管理。数据治理通常包括以下几个方面:·

数据架构组织:定义数据的所有权、责任和管理结构。·

数据模型:确定数据的结构、关系和属性。·

政策及体系制定:制定数据使用、存储、共享和保护的规则和标准。·

技术工具:利用先进的技术工具来支持数据治理的各个方面。·

数据标准:确保数据的准确性和一致性,避免数据歧义。·

数据质量:监控和管理数据的质量,确保数据的准确性和完整性。·

影响度分析:评估数据变更对企业业务的影响。·

作业流程:定义数据治理的流程和步骤,确保数据得到妥善管理。·

监督及考核:对数据治理的实施进行监督和考核,确保数据治理的有

效性。数据治理、数据资产相关概念定义亿信华暖1数据资产入表系列直播国外对于数据治理概念的关键要素包括:组织体系,规则标准,决策权,责任体系,人员和信息管理的实施方法等方面,尤其强调基于数据相关事宜的管理基础上,所做出的相应决策和实施的行动。《DAMA

数据管理知识体系指南》

书给出的定义:数据治理(Data

Governance)是对数据资产管理行使权力

和控制的活动集合。数据治理职能指导其他数据管理职能如何

,右

图说明了数据治理与其他几个数据管理职能的关系。数据开发-分析数据建模数据库设计-实施数据操作管理-获取-恢复-调优-保留清除数据安全管理-标准国际数据管理协会(DAMA)

出数据治理是对数据资源管理行使权利的活动集合。国际数据治理研究所(DGI)

出数据治理是指数据相关事务的决策和权限的行使。数据质量管理-规范-分析-度量-改进元数据管理-架构-整合-控制-交付-企业数据模型

价值链分析-相关的数据架构数据治理战

略-组织和角色-政策和标准

项目和服务

题估值文档和内容管理

主数据管理-获取和存储

外部规范-备份和恢复

-规范-内容管理

-客户数据-检索

-产品数据-保留

-维度管理DAMA

数据治理体系-分级

-管理

-授权

审计数据架构管理亿信华眉1数据资产入表系列直播据

路数据战略规划

数据战略实施

数据战地评估数据治理数抱治理组织

数据治理沟通数据架构

数据应用

据标准数猛模型数据分析数据安全审计

数据质量提升指标数据数据分布

数据开放共享

数据安全管理数狱质量分析数据元数据集成与共享数据服务数据安全策略数据质量检查参考数据和生数据元数据管理

数据质量需求

业务术语数据生存数据需求

数据设计和研发

数据运维

数据道役DCMM

是国家标准《GB/T36073-2018

数据管理能力成熟度评估模型》

是我国首个数据管理领域正式发布的国家标准。DCMM分析提炼出了组

织数据管理的八大能力域,并对每项能力域进行了二级能力项(28个过

程项)和发展等级的划分(5个等级:分别为初始阶段、基本管理阶段、主

动管理阶段、量化管理阶段和持续优化阶段),以及相关功能介绍和评定

指标(445项指标)的制定,可作为数据管理的指导规则,也可作为数据

管理状况的评估依据。数据被认为是组织生存的基础,相关管

理流程能够实时优化,能够在行业内进

行曼佳实践的分享。数据被认为是获取竞争优势的重要资源,数据管

理的效率能够进行量化分析和监控。数据已经被当做实现组织绩效目标的里要资产,在组织层

面制定了系列的标准化管理流程促进数据管理的规范化。组织已经意识到数据是资产,根据管理策略的要求制定了管理流程。

指定了相关人员进行初步的管理。数据需求的管理主要是在项目级进行体现,没有统一的管瑰流程,主要量

被动式的管理。数据管理能力成熟度评估模型(DCMM):

针对一个组织数据管理、应用能力的评估框架,通过数据能力成熟度模

型,组织可以清楚的定义数据当前所处的发展阶段和未来发展方

DCMM

数据管理成熟度模型亿信华园|

数据咨产入表系列直播量化管理级受管理级优化级稳健级初始级数据共享开放数据交换与服务数据安全数据质量时序数据数据指标元

据主数据数据架构工具平台主数据工具元数据工具数据标准工具数据质量工具数据资产工具

数据资产盘点和治理框架治理体系

组织架构

制度规范绩效体系标准体系数据战略实施

评估基于DAMA

和数据治理规范的框架标准和指南,制定贴合企业的大数据治理体系框架。数据管控能力成熟度评估(分析、设计、实施、评估)数据价值

共享与变现亿信华最I数据咨产入表系列直播规划03

数据资产管理体系14

数据资产管理职能数据集成

数据治理

资产规划开发

资产服务运营以提供数据资产增值为目标,遵循“全局意识、业务为本、数据为核、分步演进、局部执行”的原则,实行以管理架构和制度策略为保障,以数据资产四大管理职能为支撑,提供N

多数据资产服务的"1+4+N"的模式。数据增值应用

N

数字化应用场景

数据资产管理业务流程战略

规划组织架构管理

制度审计

制度管理架构和策略亿信华暖1数据资产入表系列直播数据

分析智慧

金融智慧

能源数据

交换数据

挖掘机器

学习智能

制造智慧政务资产目录目录业务属性目录技术属性目录管理属性目录其他属性目录标签补录并挂接资源数据生命理

数据安全L

→监据开发者构建组织机构数据资产运营管理能力围绕数据决策、数据提供、数据管理、数据开发、数

。数据资产运营流程化管理通过元数据智能和人工补录完善的方式盘点全部数据资源,资产目录的活

化功能保证目录能及时的反映资产结构的变化。

企业数据资产运营管理:1个策略数据资源表视图文件分析模型分析报表数保管理者核形暖三

数据9

4元数据技术元数据业务元数

据管理元数

据数据决策者E

2映射并挂

接资源亿信华疆1数据资产入表系列直福多视角展示元数据

采集数据据供者者费置资产规划

开发能力汇聚数据、管理数据、利用数据、运营数据保障措施

战略规划、组织架构、制度体系、审计制度、培训宣贯数据资产运营管理是汇聚数据、管理数据、利用数据、运营数据、数据定价的过程,数据资产运营管理包含核心管理职能和保障措施。管理职能是落实数据资产运营管理过程的一系列具体行为,保障措施是为了支持管理职能实现的一

些辅助的组织架构和制度体系

企业数据资产运营管理:4个步骤数据治理

能力数据集成

能力资产服务

运营能力核心

管理

职能亿信华暖1数据资产入表系列直播资产增值应用资产运营资产地图服务监控价值评估需求管理流程管理数据源亿信华匿I

数据咨产入表系列直播元数据管理元数据采集

元数据管理元数据检核

元数据分析应用数据

标签数据网络爬虫

异构数据源互联网数据智能推荐目录管理产品管理标准评估质量监控实时采集系统日志制度流程标准管理规范质量管理规范资产管理办法安全管理规范绩效考核办法

数据资产管理功能框架数据标准化标准创建规则定义资产编目安全分级分类生命理服务管理服务创建服务审批主题数据离线采集数据营销

深度挖掘

用户画像服务授权安全配置数

据开发数

据采集统计分析

数据大屏数据治理资产规划数据集成业务数据库1调研数据问题2问题整理归类、成熟度评估3确定治理目标

、获取高层支持4制定实施路

线图7建立元数据6梳理业务系统,摸底数据现状5数据治理架构成立数据治理委员会,分配职责,制定管理制度和流程8.4数据生命理9建立数据治理长效机制

治理成果展示、成效评估建立起闭环式覆盖数据治理咨询规划、方案制定、执行和评价的数据治理统一流程。

项目实施路径规划建议8.1数据质量提升(标准、

模型、质量)8.2主数据管

理8.3数据安全管理亿信华疆|

数据资产入表系列直播4.1规划企业数据架构及传输规范4.2建立企业级数据模型B2实现数据冶理核心领域功能建设A3

制定各核心领域管理政策和流程3.2闭环数据质量管理全行推广2.2建立指标类数据标准1.1完成元数据获取1.2推广元数据管理应用B3实现数据治理平台功能持续提升5.2识别客户、产品、机构等主数据5.1建立主数据管理机制8.2完善数据安全的执行机制7.2完善数据生命理的执行机制B1

搭建数据治理平台A1

立数据治理专职机构及组织架构A2

制定数据治理管理基本政策和流程6.2数据服务流程全行推广3.1建立数据质量管理机制2.3建立数据标准的执行机制2.1建立基础类数据标准6.1建立数据需求管理流程8.1完善数据安全管理策略5.3建立数据模型管理机制7.1建立数据生命理策略综合考虑任务业务价值、实施难依赖关系三方面因素,确定实施任务优先级治理平台管控机制

核心领域高(High)低(Low)

数据治理实施路线图建议低

(Low)

实施难

(High)亿信华限

1数据资产入表系列直播业务价值业务部

n业务

2业务

1数据服务数据安全数据质量数据标准数据模型及数据仓库元

据主数据信息科技部门执行层数据治理执行层是数据治理日常工作的执

行机构,向数据治理决策层负责,由业务

部门和信息管理部共同组成。数据治理执

行层参与、配合数据治理日常管理工作,根据数据治理管理组要求,制定数据标准、

数据质量等内容,评审数据治理成,执行

数据治理要求管理层数据治理管理部门为数据治理管理层,是

数据治理工作的管理机构,向数据治理决

策层负责,可以由一个专门设置的独立部

门担任,也可由分别负责数据标准、数据

质量、数据仓库、数据模型等各领域的业

务部门和信息技术部门共同承担决策层数据治理委员会即为数据治理的决策层。作为数据治理工作的决策层,其目的是确

立数据治理的目标、资源,保证涉及部门

的负责人涵盖其中,从而快速搭建起数据

治理体系,为后续的工作形成共识并进而

且共同朝着一致的目标推进。结合数据治理、项目管理理论组织架构,组建决策、管理、执行三层治理组织架构,包括

:治理管理委员会、治理管理部门、执行工作小组。项目实施组织架构建议决策层管理层执行层数据治理管理委员会数据治理管理部门亿信华眉|

数据资产入表系列直播工作小组组织与协调指导..基于企业数据资产管理业务需求,通过数据采集、主数据、元数据、数据标准、数据质量、数据安全,数据资产管理、数据服务、数据可视化等全流程治理,实现数据价值提升。数据采集历史数据批量迁移离线数据源数据集任务管理任务调度实时数据实时接入实时数据源数据集任务管理任务调度数据服务服务门户资产监控门户管理服务审批接口管理资产API接口开发接口发布审批数据资产数据资源资产编目资源挂接资源上下架数据产品产品管理产品注册产品挂接产品上下架数据安全数据安全规范安全数据源数据分级分类数据加密数据脱敏数据库权限数据指标指标定义指标计算组合指标衍生指标指标固化指标分析数据标准标准文档理标准监控标准管理标准评估标准检索标准建模元数据元模型元数据采集元数据管理元数据分析数据字典数据地图数据质量业务规则质量监控质量规则质检方案质量分析质量整改

数据资产管理业务流程主数据主数据模型主数据维护主数据分发主数据监控亿信华匾I数据资产入表系列直播继军

继辈季明

催军

固替定换值

姓部158

365

5443

2某省市汉市江汉区↓电话号错模

化地址

数据秘切分

段替换1234567845678123产品编码

机填

充偏

服务密码···一

致性维度行记录拆分SCD<目三数仓组件可视化数据加工:批处理组件、交换组件、实时处理组件数据脱敏和加密可配置的脱敏和加密组件,内置多种脱敏和加密算法数仓模型处理组件行转列、列转行、一致性维度、照、拉链表组件

脱敏算法增量数据捕获时间戳增量、表字段比对、MD5

比对、触发器增量、数据库日志数据集成的概念:构建数据采集、处理能力●●●●10011

010011

8100111

10011183001010

3001010亿信华暖

1

数据资产入表系列直播缓慢变化维前后癫增补加密MD5处理行转列列

转行江汉区独猴HIl数据采集,实现对企业各业务系统、各类数据源的采集、加工、清洗、转换等处理,是后续企业数据中心、数据资产治理的基础。系统数据源

采集技术

数据中心ETL工

具Flume/KafkaAPI/Webservice/

填报表Crawler,DPI数据集成:满足企业大数据中心多样化数据采集加工需求统一平台数据汇聚

要素融合

数据共享

业务互补

协同处置

综合决策集团侧事业板块/制造企业工控/

物联网外部批量采集实时采集接口采集填报采集HRERPMESDMSSCRMPLCAPPOABIQNSSRMTSP网站互联网采集统

集统

理亿信华暖1

数据资产入表系列直播数据可视化

:东为/沈则潜出版社电子工业出版社出版年:2013-12页数:68定

28.00元装帧:平装丛书:大数据丛书121211546元数据的英文原文为Metadata

,最早出现于美国航空与宇宙航行局的《目录交换格式》

(DirectoryofInterchangeFormat,DIF)手册中。在中国大陆,则将Metadata

翻译为“元数据”;而在香港、

台湾则有“诠释资料”、“超资料”等多种译名。MP3音乐元数据你大概经常听到元数据(metadata)

这一概念。它指的是存在于

据的格式根据文件类型而不同。本文关注的重点是音乐文件元数据。音乐元数据,也被称作MP3文件的ID3标签,就是歌曲的识别信息最常规的定义:元数据是关于数据的数据(data

about

data)作曲人表演者歌曲名称专辑名发行年份音轨编号流派专辑封面歌词制作人其他元数据的概念亿信华眉

1数据资产入表系列直播Reportname

and

packageReportsData

Data

Databas

tables,mart

martETL

jobsrepositoryDatabasetableswarehouse点击查看源网页ETL

jobsData

Datasourcesource元数据类型业

据·业务规则、术语、指标等技

据·数据结构、接口信息等

管理元数据·人员职责、管理流程等

>……模型设计工具·ERWIN,Powerdesigner

系统数据库·oracle,db2等>ETL

工具·powercenter,datastage

>报表工具·Cognos

>规程文档·EXCEL,WORD

等年

表串号

肺门]

阳位

圆工姓名作

)作

)

作得分)

)作

)作得分)作

)出

时业务数据/分析数据n141515元数据关系组合关系·库包含表、表包含字段等依赖关系·指标加工、数据迁移等过程数

据流向●

元数据识别:基于企业系统现状,通过元数据采集获取各系统元数据,实现数据地图及各类元数据分析:血缘分析、全链分析、影响分析、溯源分析、对比分析等。元数据概念解析企业元数据来源存储介质亿信华暖1数据资产入表系列直播第一季血

第一血第二应第二季血(

工(重点工

(基链工

(

点元数据-[第三事血

第四季血

(重点工

(基德工Datasource

name第四血(重点工

作得分)Data6Urce第三季血(基驰工MetadataData910II5

e4基于企业系统现状,通过元数据管理采集获取各系统元数据,一方面形成数据字典,实现数据地图及各类元数据分析:血缘分析、全链分析、影响分析、溯源分析、对比分析等;另一方面,为数据资产盘点提供原始数据基础。元数据来源供应商基本信息供应商域元数据

产品基本信息采购信息供应商名称纳税人识别号

供应商公司地址产品名称产品型号采购价格元数据采集1元数据模型先数据设计A

无数据采集

小理清数据的来龙去脉端到端管控统一集中管理准确性唯一性管控咀OPENACCOUNTD目COREJPARTY_UMZONENUM咱OPEN_AcCOUNtLT..NATONALTY二

=

一一致性保障数据版本管理共享共用保障变更监控元数据源头变更监控变更采集、增量更新VJPARTYMToL_CoRPORAnONLTR_

10LCORPOR..

L取JPARTY_ucORPORATESTAR.ZONENUM智能应用多种分析应用辅助资产盘点AREA元数据价值:分析企业数据地图订单信息付款信息亿信华暖1

数据咨产入表系列直播图OA系

统员

工性

别男男主数据:Master

Data,指在整个企业范围内,各系统间要共享的数据。能满足跨部门业务协同需要的、反映核心业务实体状态属性的基础信息。……

…………

……·

员工基本信息主数据

……

…亿信华圆1

数据资产入表系列直播主数据描述的是核心业务的基础信息,例如:●

人员(姓名、性别、手机号...)●产品(产品属性、列表价格…)●物料(物料编码、物料名称、属性...)

主数据的概念员工分类正式员工试用期员工员工姓名拼

音zhangsanlisi开户行某著名企业某著名企业财务管理系统员工手机号所届部门IDPM

系统入职时间银行账号18182762

24661111111111622222222222017

-06-022019-10-21HR系统员工姓名员工编号10100A00110130A002●

主数据识别:基于企业现状,结合识别分析评估模型,配以相关工具辅助,确定符合企业自身的主数据范围。识别评估模型

成熟工具

主数据概念解析:以企业为例基础数据·

家·

地区·

货币·

计量单位财务·

会计科目

·

银行·

成本中心·

利润中心·

固定资产人力资源·

组织机构·

人员·

岗位销售·

客户·

产品项目·

项目类型·

项目信息采购·

物料·

供应商合同·

合同类别管理成熟

度统一难易

程度亿信华履

I数据咨产入表系列盲播元数据关

联度业务影响

程度需求迫切

程度数据共享

度确定数据

链路差

数据质量差,数据不完整,数据不一致

ERPTC

MESSRMCRMDMSPLMLES亿信华暖1

数据资产入表系列直播主数据典型问题企业内数据定义缺失;数据属性不完整;企业外部数据无暇顾及;数据在多个系统中重复采集、重复存储

;系统数据无法关联、共享,数据整合

困难;系统林立,数出多门;数据时效性差,使用者无法及时获得

所需信息;数据使用不方便,方法繁琐;手工报

表多;数据冗余、调用复杂、效率不高管理变革清洗归纳、集中管理、统一分发

主数据价值:统一管理企业核心黄金数据缺

繁建

后接口

数据治理(主数据管理)…

分主题域梳理MESSRMERPCRM财务科目

经销商主数据

主数据TCDMS供应商

主数据客户主数据产品主数据物料主数据快速准确分析,为决策提供权威准确数据支撑

提升管理效率、降低管理成本建立集团级的主数据管理组织架构统一主数据的信息标准与规范M

统一主数据管理流程和治理机制■

统一主数据管理口径统一标准数据申请录入数据质量校验审核数据维护共享使用统一主数据管理平台各类主数据的清洗、转换、整合规则主数据管理平台与业务系统高效集成、数据共享·权威支撑,精准分析·全局把控,科学决策·

标准制定,统一口径·

流程管控,规范审批·

属性梳理,数据清洗·

一次录入,多次使用·规范落地,统一管理·高效集成,数据共享

主数据价值:高效支撑企业经营管理、分析决策决策层管理层执行层平台层促

值亿信华暖1数据资产入表系列直播数据标准管控体系,包括数据标准定义、数据标准流程、数据标准应用等,通过对数据标准进行统

一定义、统

管理,消除跨系统数据的非

致性。标准录入

标准导入Word在线编辑

版本管理新增、修改、废止、发布数据标准映射标准查询标准体系浏览标准下载引用元数据查询需求流程变更流程审核流程流程跟踪元数据管理标准监控落标评估关联分析落地映射导入数据标准定义

数据标准流程

数据标准应用数据标准概念数据标准落地检核数据质量管理亿信华最I数据咨产入表系列直播属性分类、属性名称、

业务规则等数据类型、数据长度、数据精度等数据创建、数据使用、数据维护等业务标准属性项编号属性分类属性层级属性名称英文名称别名业务定义业务规则制定依据08001基本属性集团物料编码MaterialCode/根据集团统一的编码规则生成并分配给物料的一组数字代码,在全集团内具有唯一性,是物料的唯一身份标识。必填专家意见国际标准、国家标准行业标准等集团标准、制度文档

业务操作手册等数据字典、代码表等其他项目经验与成果数据类型数据格式数据长度值域数据精度编码类整型数字10/0归属管理部门创建系统引用系统集团采购中心ERPMES/.…●

数据标准:每个属性项的业务标准、技术标准和管理标准,实现对数据的规范性、完整描述。外部标准业务制度源系统最佳实践

数据标准概念解析业务标准技术标准技术标准管理标准参

准亿信华园1数据资产入表系列直播管理标准a

只GB国家标准r

一20191500%8Lnggl219

地00%电动汽车远程服务与管理系统技术规范第1郎分:总则共和国国家标准-12198会计核算软件数据接口1部分:企业Carmin初e串

P2参考国家行业标准制定企业标准规范数据标准提高各系统元数据规范,消除跨系统的非一致性,为后续系统建设提供数据标准指导。参考国家、行业标准结合企业现状制定相关数据标准,对已建、在建、规划的业务系统进行指导和约束。·

输出标准规范·

指导和约束·

按标准落地·

进行落地评估·

梳理业务及数据标准·

进行标准落地评估·

按标准规范优化改造数据标准价值:提升数据规范性、消除系统壁垒数据治理

数师津mil/例

9

·u鲁a鲁e标准分类企业级标准体系国家和行业标准标准规范应用对在建/规划系统亿信华最

I

数据资产入表系列直播co00⑧coouioou房ma00%219

源06219

so对已建系统7

6追高文游:7tumy8嘘些nun.honh.194

o2

91苏城0加

mi0082

读题

回hoeomet.aBrt某省市中父

;5粤r30000Bu………cs001cso0004n

QuyAmsoo00cso0…*…··dmo?25201

05401所食共⑧

coGde/mpeTE1-n林nae9仓库建设及数据治理过程中的各种数据质量问题,降低企业

的决策偏差和损失。数据质量成因总结数据质量改进建议●标准问题:标准缺乏标准不统一标准不完善·

人员问题:操作不规范信息未采集●流程问题:流程缺失流程不完善●技术问题:系统缺乏校验校验逻辑有误某省市值不合理

数据设计问题

数据架构问题

历史遗留问题·

补录缺失数据修正有误数据·

改造现有源系统·

完善数据标准·

规范数据采集人员操作·

完善业务流程建立数据质量管理流程·

建立数据质量管理团队·

建立数据质量管理平台、数据导致数据质量管理用于解决业务系统运行和政府数据管理成本,减少因数据不可靠数据的六性评价标准评价标准规则类型

实例有效性空值检查非空规范检查类型、长度、格式,比如电话

号码、邮编数据唯一性上下限、枚举值比如必输项、金额指标大于0两个指标之间的逻辑关系,比如日期先后外键约束,代码引用,维表引用准确性完整性一致性重复数据检查值域检查业务逻辑检查引用完整性检查记录缺失性检查结果集比对数据量,同指标不同数据源比较比如还款计划数据上报及时性检查,比如每

月1日12点识别数据异常值及时性及时性检查离群值检查平衡性检查波动检查偏差性数据分布的合理性

数据质量概念亿信华眉1数据资产入表系列直播数据质量标准客户、产品、合约等关键要素信息不能为空客户编号、产品编号、机构编号、账户编号等按识别规则赋予唯一编号客户编号、产品编号、机构编号、账户编号等应有统一规范的编码规则:

关键要素信息原则上不存在“空”、“无”、异常字符乱码等内容;证件号码、地址信息、电话号码等符合编码规范不同系统间,编码相同的客户,其姓名等其他数据项信息必须一致:各信息系统内客户编号、产品编号、机构编号、账户编号等必须在主_每日业务明细账与总账的发生额、金额分别必须堡持一致质量作业·教据库空里酒·数摇表空值描·

幸空通··

力·

检·

数·B

期校验·

总I·

字段平均值·

字段量大福i0

-性.JAU阳w··赁一

4重等字

压数据质量通过质检规则,提升各业务系统数据准确性、规范性,并定期提供质量报告。通过PDCA循

,全面提升企业各业务系统的数据质量,为业务、决策提供高质量基础数据。数据质量维度完整性唯一性规范性一致性_准确性错课次数和味效历史趋势质量评分质量占比■

质量趋势

问题清单问题分布整改清单质量对象数据库妻质

量标

准质

检规

则质

量维度内!质

量报

告or

n质量规则完整性唯一性及时性有效性准确性一

s

se

90w语数据质量概念解析新阳one要盖了多种数据质量问题场景通过内置,用户

使用门槛更低

支持脚本,满足定制化需求

·

性核验亿信华疆1

数据资产入表系列直播.。0大数及占比佛况业二

.全面的量报告”Ia!eiere·

字段重复值P

验身价证校验i8

uae堂二·零编码、覆盖数据全生命,实现数据质量全过程管理,为业务、管理提供高质量的数据。标准定义

质量检查

数据整改

质量报告数据质量的提升并不是

蹴而就,而是一个长期整改上升的过程。每个部门都可以提出质量问题,由质量管理小组进

,然

后通过平台找出问题,——整改,提升数据质量。亿信华眉1数据资产入表系列直播●

质量管理需求分析●质量管理组织和管

理流程规划●

检查规则定义●整改流程定义数据质量价值:让数据清澈如水●

质量评估报告●质量绩效报告●问题处理报告●数据质量改进建议●增量/全量检查·

人工/自动检查·

问题告警●

结果查询●

整改流程发起·

整改过程跟踪●例外管理●知识库积累常见数据资源目录维度在数据资产分类中,以目录结合标签的形式登记数据资产,通常以系统主题、业务主题、组织架构主题3个维度作为目

视角

,其

签。业务主题·

相关方·

合约账户

·

财务·

事件

·

资源

·

产品

·

营销·

品质等系统主题·OA

系统·ERP系统·SRM

统·CRM

系统·NC

系统

·等数据资源目录概念资产类型·

基础数据

·

指标·

报表·

接口·

模型·

代码等资产形态主题·

结构化数据·

半结构化数

据·

非结构化数

据行业分类·

农林牧渔·

智能制造

·

能源·

金融业·

建筑业组织架构主题·

财务部·

销售部·

生产部·

工程部等安全主题·

公开·

·

普通商密·

服务分类·

技术指导·

企业职能·

数据共享亿信华暖1数据资产入表系列直播数据资产分级分类数据分层结构L1

主题域分组L2

主题域L3

业务对象L4

逻辑数据实体L5

性数据库表联系人信息表字段成立日期举例相关方注

银行信

信息法人代表注册资金

营业执照

数据资产分层L1-L5&数据安全分级分类公开级(1级)数据安全分级M1-M5数据分级敏感级(3级)非公共需合规可传播数据非公共,要求

不可传播数据亿信华疆

1数据资产入表系列直播公共个人核心级(5级)重要级(4级)级(2级)公共

可传播

数据法人经

营类

→数据分l68数据产品详情亿信华最

I

数据资产入表系列直播某省市搜索灵活35

20相

雪数

7

E

共6和谨二购

间0数据应用数据资产

数据服务数据审核→

数据生产流程→

数据消费流程禽产文局的解000填报多头使用;减少一线人员重复填报。打造企业数据资产门户:类电商门户数据消费全流程可控结□

(

强D

信息●乐282882组类子文健形时mi共事地:南共供:5数文广践资二世量:隋力广随附师:数据需求提出需求审核审核上架6相

更6文广能故共心0

工嘛60

田禁工程部门

工程进度数据采集财务部门数据管理

部门数据需求管理流程工程进度、验收、付款需求数据资产

盘点发改要行政息

0

4aM9析幅谨:/edpopeaphunke

do方

POS

□J5ON

刺AN名章

邦8

5

略唱

IS0N

□t

t

2se

hdppmpiei

E5.

e九

无代码API服务配置①m述

至日

9

前AP鸿生数据服务将盘点好的数据资产通过简单便捷的配置实现数据的快速共享,无需后台代码开发。数据服务化平台需求管理服务开发安全配置授权管理监控统计朝建服务接口基本思

最配酒热患

a

g明AP

诺断:AP

编码:述

:应用和分析用户打造企业数据资产多样化服务Ehdy

81.在直南t高效生产资源服务API服务产品服务□质量检验亿信华疆|

数据资产入表系列直播设计统一标准服务值息cmeP

u1多

务数据资产61901pmint.第E三

8

.

·

8

2APL

服务信息

纳开发数据需求所需数据□4口

4

□4共拿6测试发布文件下面88-指标报表指标试计淋图化任务空文-任务调度执行创建维表基本属性维表号人号出扩系属性数据概览客户CRM面向业务人员的零编码、全可视化界面定义、自助式指标管理平台,功能涵盖指标基础信息配置、指标定义、指标体系构建、指标固化、指标分析等功能,可通过自助式指标分析应用和指标驾驶舱服务,辅助管理者科学决策。

支持多场景数据挖掘、领导驾驶舱按资产类梨数据e

计es.m按专题智慧研策欧

整精准营销数

5期准

B

粉模

教量充食(92)

种(

9

2

)ra

(8)应用(561

数据资产管理体系化

指标管理体系化自定义字典亿伯B

定义引用字典表指

询指

核指

布指标应用面5管理指标桢板定义整

源试面照览SQL定文数据库表基礁预标合成指标采率指标亿信华疆

1

数据咨产入表系列直播Excel

文本数据自助式指标分析指标体系分析数据字共定豆指

题调

口模

主指标体系指标定义维表管理企业ERP标04

数据资产管理案例国有资产经营控股(集团)有限责任公司党委

董事会

监事会经营层·

2002年某省市政府批准成立xx集团,主要负责xx重

大项目投融资、开发建设和国有资产运营管理等工作。·2019年9月8日某省市委市政府部署,xx集团与xx

管委会实行“事企分离”改革,实现了独立运作。·

截至2020年9月,集团总资产899亿元,员工总数

(含子企业)约3000人,·

下属全资(控股)子公司8个,其中两家子公司资产

规模超过100亿,参股公司15家·

业务范围覆盖了房地产开发、工程代建、园林绿化、

会议展览、酒店某省市政养护、持有型物业运营等

某省市运营业务板块。响应国家层面15年首次提出的“国家大数据战略”,17年发布的“大数据发展规划”。基某省市国资监管指标体系、公司数据治理需求背景,xx

集团亟需对各业务板块各项数据加强采集、治理、应用、服务。

某国有资产经营集团数据资产管理项目:公司及背景简介纪检监察部法务审计部工程管理部投资资产部新建部门/组织

调整部门/组织亿信华疆1数据资产入表系列直福运营管理部人力资源部综合办公室党群工作部财务管理部信

心协同管理系统统一身份认证系统档案管理系统集成与开放平台文化建设管理平台会展业务运营平台纪检监察平台法务管理平台审计管理平台采购及合同管理平台投资管理平台影像平台酒店管理业务运营平台商业资产管理及运营平台地产工程类项目管理及地产

销售平台在建·业财一体化系统·公园管理业务运营平台·人事管理系统·

商业资产管理及运营平台规划·

工程咨询项目管理系统·

长租公寓管理平台·

园林业务运营平台·

物业管理业务运营平台·

客户关系管理平台·

智能管理平台某省市综合服务运营平台

业务系统为准数据采集,实现对xx

集团各业务系统、各种数据源的采集、加工、清洗、转换等处理,是后续数据中心、数据治理的基础。数据中心统一存储统一管理融合应用采集技术批量采集实时采集接口采集填报采集O

°集团数据资产管理项目:建设成果··

·····

··

··

··

··亿信华暖1数据资产入表系列直播业务系统统

集统

理已建业务大类主数据域来源系统人事人员人事管理系统/统一身份认证岗位人事管理系统/统一身份认证组织架构人事管理系统/统一身份认证文化建设党组织文化建设管理平台党员文化建设管理平台财务会计科目业财一体化平台银行机构业财一体化平台项目项目商业资产管理及运营平台采购供应商物料备品备件客户客户用户资产不动产会展业务运营平台-展馆/商业资产管理及

运营平台动产法务协议合同行政档案发文通知参考数据行政区划计量单位货币单位行业分类其他展会会展业务运营平台商业类型商业资产管理及运营平台◎

°集团数据资产管理项目:主数据建设成果完成集团11个大类25个主数据域梳理,完成相关主数据模型设计。主数据域包括人员、岗位、组织架构、会计科目等,以

及参考数据。▲不安全

|

10

.0

.0239:8988/masterdata/eweb/titlepogedo?titles%25u9884%25u预

览表

单基本信息人员登录名:人星姓名:睿码实体模型管理C《

展文化建设商

管白组

人员人员品

实图

理表禁设计区

程财

务主散缩模型主数据维护

主数指分发

数淀集成

主数置治理

门户管理

工作流实体模生世/地配人员/人员/计9分指管理添加模图:

基本信息◆基本信息人员登录名

人员姓名集团主数据域分类系统截图工程管速悠法务审计部记委办公室总监办企业营理部设计成本部试脑)兼下史位编得

证件类型×

+健比领导综合办公童(值息中心)

部A

已目编时品特础国缀兼

码品

预览表单亿信华限士数据资产人表系列直描人员手机号:人员邮码:

主旧P9

码对

应梳理文档》人员性别(1男2如:人员状态(1在期2子公司鹰原家金商业加电京青肉城建说

阿西新城T证件号码

备注生日所

黑人员状态(1在职2高响

人员手机号审核公式分类树运营篮汀部

财务就理部共

计Q人员性别1勇2女)预范表单M标准名称标准主题基础数据标准组织组织机构组织组织机构级分类

二级分类

4参考标准

信息1组织扩展基本信息数量二生岗位

42

组织

岗位基本信息人员26组织岗位协议19人员资产基础标准

数量

标准分类信息

岗位级别信息个人信息12523资产人员展会协议组

织财务金融客户品牌党组织供应商22财务4人员任职信息任职职务商户17供应商3员教育信息最高学历展馆6品牌3人员教育信息学历信息商业模式4客户3人员奖惩情况获奖信息金融2人员教育信息学位信息参考国家行业标准基础数据标准人员任职信息劳动合同信息基础数据标准人员任职信息在岗状态对已建系统·

梳理业务及数据标准·

进行标准落地评估·

按标准规范优化改造集团数据资产管理项目:数据标准建设成果·

标准指导和约束·

按标准落地·

进行落地评估完

成基础标准14个子类,参考标准10个子类的数据标准规范定义,可以为集团各业务系统模型设计提供参考。组织商户任职状态任职单位信息页专技情况制定企业标准规范亿信华眉1数据资产入表系列直播对在建/规划系统标准大类梳理XX

集团数据标准体系252439序号业务系统数据资产分类子目录1人事管理平台岗按业务域可以分为:员工、组织机构、招聘、位、薪资、学习培训、考勤、绩效、核算等.92协同办公平台按业务主体:集团总部、青奥城、园林经济开

发、奥体建设、会议展览、新城建设等,具体

按业务域包括固定资产、用章、外出、车辆、文件等。53文化建设管理平台按业务域可以分为:党员、档案、组织关系、

组织生活、党会、党费、工作日志、思想汇报、

督查、换届、奖惩等。114工会管理平台按信息表包括:会员、培训、工会组织、工会经费、工会活动、会员商退休等。65纪检监察平台按业务域可以分为:问题清单、整改立项、整改监督、整改反馈等。46统一身份认证管理系统主要信息表包括:岗位、组织机构、用户、账

号等。47商业资产管理

及运营平台招拍挂业务、合同签约、财务数据等、固定资

产、商户等48会展业务运营

平台按业务域可以分为:展馆、会展、日程、参会人员、巡查、主办、外协、会议、车辆等。99业财系统按业务域分为:预算管理、报销管理、融资管理、资金管理、业税融合管理及财务经营数据分析610税务系统按业务域可以分为:报销、发票、税费等。3FM

Fn

·共日

a商让资产筐理及运营

税务系蛛(182⑧族一身份认签理

管平幼(1100e

监章平台48)工会管理平台5②班一协同能理平台(90会报业务运营平自Ⅱ

会限业务运重平台

一体化平台255人

6

0

6

0D

共a

丽教面产程

郸批状器na

eatai·it工EF

.

·au人

Bie2上架状·已上果

已梁·

巴上年*

已上屎·

品·

已·

上·

已uw血

”供

作禁ie幽

*sn

交进p55

新城摩布西楼草布网0

n事市两四新媒

sn单

5单

新单

n

西新城mnnemmnm□那号□2

n

□□

5□78n□

得□”□

0□数据流产化网0011/0o0011/0os001/no20011/007140011/054990011noS2001180510011/non0otinou0011/00611*ea

·

a··已A4一阶段对10套系统梳理资产目录,资产目录按照来源系统和业务目录进行细分,为资产门户提供基础分类数据。O集团数据资产管理项目:数据资产盘点数

留需

·数猛里度·

里禁览产

教压·重安全

的赠生会海期

主监理/r数据资产盘点法睿治数银资源四s也助R

FW普

s

产品品审世管理自章管理00L0422·

8sinman2

2100%共748系统截图亿信华眉

1

数据资产入表系列直播望

0日

2

sam1数照资产自录

calss

人ruenaj

集团数据资产管理项目:数据资产门户平台为不同岗位和角色提供对应的功能模块及数据资产门户及数据服务。数据资产服务门户可提供的数据服务按业务域目

录层级的划分。不同部门除了可以看到自己的管理的业务系统数据,也能看到集团其他部门下的数据资产类型。商管公司信息部门会展公司畅份以运驾理系班

m党理平台配附益实平台工会馆理平#执1b同

#金照业务话平台正式,m

会限业务证算平他正式6

nbpm

hrprobation

8su7810t产州式分美:据库数前德产南式:Mysql共拿

共产理供力某省市同古城区国有”经营控腔(施I有限责

任公雌资产类:人

邮◎

该“

器品技朗新未跟

”此素i23te

*

Bun数据审核→

数据生产流程→

数据消费流程节假日会展客流量需求会展平台数据采集数据需求提出需求审核审核上架数据资产盘点4,511

2800国类商童户管连运营平台e数据应用数据服务人事总nP数短资产档式共类**教面血产快力

任公地面产:以中

读数据需求管理流程绝申诉记录表14107帅

n

e数据资产门户n

n22

理a

:应

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论