版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
企业为什么要建数据标准应该怎么建数据标准
标准对我们的生活有很大的影响,如度量的标准、安全的标准等。如果标准
不对或没有遵循标准,则容易引起混乱。同样对于企业来说,数据的标准化
以及标准化过程中的治理也尤为重要。
本文将从数据标准基础概念出发,结合企业数据建设现状,跟大家分享一下
数据标准所带来的价值,以及如何去完成企业数据标准建设。具体包括以下
几部分内容:
第一部分:数据标准相关概念,包括数据标准定义、分类。
第二部分:国内企业数据建设的现状是怎样的,数据使用过程中一般会碰到
哪此由于缺乏数据标准所造成的问题,数据标准建设能够为企业带来哪些价
值。
第三部分:如何建设数据标准,包括数据标准的建设流程以及范围圈定、落
标策略、工具选型等几个关键点。
第四部分:实际案例,结合我方做过的某个银行的数据标准案例,从实际出
发阐述数据标准建设的内容和效果。
数据标准概念
数据标准定义
数据标准(DataStandard)是指保障数据定义和使用的一致性、准确性和
完整性的规范性约束。
对于企业而言,通俗来讲,数据标准就是对数据的命名、数据类型、长度、
业务含义、计算口径、归属部门等,定义一套统一的规范,保证各业务系统
对数据的统一理解、对数据定义和使用的一致性。
数据标准管理目标
数据标准管理的目标是通过统一的数据标准制定和发布,结合完善的数据标
准管理体系,实现数据的标准化管理,保障数据的完整性、一致性、规范性,
为后续的数据管理提供标准依据。
数据标准分类
一般可从三个维度去进行数据标准分类:数据结构、数据内容来源、技术业
务。
结构化数据标准基础类数据标准技术数据标准
三
种
技术
维
业务
度
非结构化数据标准派生类数据标准业务数据标准
1)从数据结构角度的标准分类:
•结构化数据标准是针对结构化数据制定的标准,通常包括:信息项分类、
类型、长度、定义、值域等。
•非结构化数据标准是针对针对非结构化数据制定的标准通常有:文件名称、
格式、分辨率等。
2)从数据内容来源角度的标准分类:
•基础类数据标准是指业务系统直接产生的明细数据和相关代码数据,保障
业务活动相关数据的一致性和准确性。
•派生类数据标准是指基础类数据根据管理运营的需求加工计算而派生出来
的数据,例如:统计指标、实体标签等。
3)从技术业务角度的标准分类:
•业务数据标准是指为实现业务沟通而制定的标准,通常包括:业务定义和
管理部门,业务主题等。
・技术数据标准是指从信息技术的角度对数据标准的统一规范和定义,通常
包括:数据类型、字段长度、精度、数据格式等。
企业数据建设现状
国外数据标准化工作起步较早,不少国际大型企业已将数据当作企业的重要
资产来对待,其中大部分企业均以数据标准为核心,确保数据标准能够融入
企业的每个业务环节中。
但国内企业大多数系统的建设都是直接依据业务需求建立,并没有一个整体
的规划,另外不同系统的建设厂商可能也不一样,所以不同系统之间数据的
不一致性难以避免,究其根源,还是没有一套统一的数据标准来进行约束。
企业在对数据的使用过程中,出现的很多数据问题,都是由于缺乏标准约束
和整体规划设计造成的,如下:
数据存储结构不一致,调用多系统的数据时,由于某些数据在不同系统中数
据存储结构不同,导致数据无法直接美联,影响不同系统之间的数据共享。
数据定义不一致,不同系统对数据的命名、业务含义、取值范围等定义不同,
比如同名不同义、同义不同名等
数据理解不一致,不同人员对数据的理解不一致,导致在数据使用时浪费很
多沟通时间。
数据来源不一致,数据存在多个来源,在数据使用时,不清楚应该取哪个系
统的数据。
通过数据标准的建设,可消除数据跨系统的非一致性,从根源上解决数据定
义和使用的不一致问题,为企业数据建设带来诸多好处:
数据标准的统一制定与管理,可保证数据定义和使用的一致性,促进企业级
单一数据视图的形成,促进信息资源共享。
通过评估已有系统标准建设情况,可及时发现现有系统标准问题,支撑系统
改造,减少数据转换,促进系统集成,提高数据质量。
数据标准可作为新建系统参考依据,为企业系统建设整体规划设计打好基础,
减少系统建设工作量,保障新建系统完全符合标准。
同时,数据标准建设也为企业各类人员提供相应的支撑:
对业务人员而言,数据标准建设可提升业务规范性,保障人员对数据业务含
义理解一致,支撑业务数据分析挖掘以及信息共享;
对技术人员而言,有数据标准作为支撑,可提升系统实施工作效率,保障系
统建设符合规范,同时降低出错几率,提升数据质量;
对管理人员而言,数据标准建设可提供更加完整、准确的数据,更好的支撑
经营决策、精细化管理。
如何建设数据标准
随着市场竞争的日益激烈及政府规范要求的日趋严格,越来越多企业已经逐
渐意识到数据标准的重要性,但是苦于没有成熟解决方案、完善的标准体系
制度以及相关经验,不知数据标准的建设该从何下手。根据以往的数据标准
项目经验,小亿总结了一些数据标准建设流程和关键点,供大家参考。
首先数据标准建设需要有相应的数据标准管理组织,负责数据标准的统一管
理,承担数据数据的制定、维护、应用和监督等工作。一般数据标准管理组
织包括:数据标准决策层、数据标准管理部门和数据标准工作组。
另外数据标准管理工作的展开还需要一系列的数据标准管理制度,包括:数
据标准管理办法文件、数据标准规范文件、数据标准管理操作文件等等。
有了相应的数据标准管理组织和制度作为保障,即可推动数据管理的实施。
数据标准建设的实施流程如下:
第i阶段:标准规划
从实际情况出发,结合业界经验,收集国家标准、现行标准、新系统需求标
准以及行业通行标准等,梳理出数据标准建设的整体范围,定义数据标准体
系框架和分类,并制定数据标准的实施计划。
第二阶段:标准编制
根据数据标准体系框架和分类,先确定各分类数据标准模板,然后由相关人
员依据相关国标、行标、技术业务需求等调研结果,进行数据标准的编制,
形成数据标准初稿。
第三阶段:标准评审发布
标准编制完成后,为保证数据标准的完整、规范,还需要对数据标准进行评
审,在充分征求专家意见以及各相关部门人员意见后,对数据标准进行修订
和完善。完善后的数据标准经过领导审批通过后,即可发布到全企业,形成
正式的数据标准。
第四阶段:标准落地执行
不是所有的数据标准都能够完全落地,实际工作中可能会存在历史系统无法
改造的情况,所以首先碓定数据标准落地策略和落地范围,并制定相应的落
地方案,然后推动数据标准落地方案的执行,对标准落地情况进行跟踪并评
估成效。
第五阶段:标准维护增强
数据标准后续可能会随着业务的发展变化、国标行标的变化、以及监管要求
的变化需要不断更新和完善。在数据标准维护阶段,需要对标准变更建立相
应的管理流程,并做好标准版本管理。
另外数据标准建设过程中,还有几个关健点,需要大家注意:
1、标准范围圈定
不是所有的数据都需要建立数据标准,企业实际数据模型中有上万个字段,
有些模型还会经常变换更新,如果把这些信息全部纳入到标准体系中耗费工
作量巨大,很难真正实现落地。因此仅需要对核心数据建立标准并落地,既
可达到预期效果,同时也提升了工作效率。
数据标准范围圈定建议如下:
共享性高、使用频率高的字段需入标;
监管报送或发文涉及到的业务信息需入标;
结合数据使用情况,对于关键数据的字段尽量入标;
数据应用有使用需求的字段需入标;
与系统人员沟通其系统内重要信息来辅助入标判断。
2、落标策略
数据标准落地的工作中,肯定会遇到很多困难,比如某些历史系统无法改造
或者改造成本过大,导致无法落标。这就需要我们针对不同的系统,建立不
同的落标策略。
对于新建系统,一般采用强制落标的策略,即新建系统必须符合数据标准,
在新系统上线前对其进行数据标准落地评估,如评估结果不合格,则令其整
改。
对于已有的历史系统,采用建议落标的策略,首先将已有系统的标准问题找
出来,并进行分析和整理,综合多方面考虑,包括工作量、整改风险、周期、
成本等等,制定最有效的落标策略,比如等到以后系统升级改造时再落标,
通过逻辑转换方式落标,通过数据仓库落标等等。
3、工具选型
数据标准建设工作量还是比较大的,完全依靠人工不太现实,所以需要一套
完善、易用的数据标准管理工具帮助我们将数据标准建设工作落地。
数据标准管理工具应包括:标准分类管理、标准增删改查、标准导入导出、
标准评审、标准发布、标准版本管埋、标准落地映射、标准落地评估、标准
监控等功能。同时为更好的保障数据标准的落地,最好结合元数据管理工具
一起使用。
而亿信华辰数据标准管理平台ESDataStandard提供了一套完整的数据标准
管理流程及办法,通过统一的数据标准制定和发布等一系列的活动,结合制
度约束、系统控制等手段,实现企业大数据平台数据的完整性、有效性、一
致性、规范性、开放性和共享性管理。
实际应用案例
最后跟大家分享一个基于亿信华辰数据标准管理平台实际落地的一个数据标
准建设案例,这个是在匡内某银行做的数据标准项目,建立了数据标准管理
系统和全流程数据标准管理机制,将其在经营管理中产生的数据、依赖的数
据以统一的口径展现,促进了数据分析在客户经营、绩效管理、资源配置、
定价管理、风险管理等诸多方面应用与管理水平的提升。
国内某银行建立了一套数据标准体系框架,管理全行数据标准,形成了以科
技战略委会员领导下的数据标准化小组为管理组织,涵盖标准定义、执行、
监督评审等各个环节的良性数据标准闭环工作机制与流程,并配套管理制定
和工具的建设。
数据标准框架
其中包括建
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026年国际档案日档案知识竞答有答案
- 2026年安康市辅警考试题库(含答案)
- 2026年中小企业促进法试题及答案
- 2026年汽车电器维修工中级职业资格冲刺卷及答案
- 智能网联车辆个性化运动控制与测试评价方法 课件 第6章 考虑环境车行为特征的分布式MPC算法
- 水域应急救援技师试题及答案
- 2026年安全知识竞赛试题库及答案
- 2026年禁毒排查管控网格员试题(附答案)
- 2026年高级会计师资格考试高级会计实务试题及答案
- 物业工程维修主管岗位面试题及答案
- 中国儿童青少年营养与健康指导指南(2025年)
- 生物医药创新药物研发团队激励机制研究报告
- 淋病介绍课件
- 物流取货管理办法
- 中医感染控制培训课件
- 高位货架库房管理制度
- 教学课件-大气污染治理技术教材配套(张小广)
- 经典pia戏古风剧本
- 车位转让合同
- 数智工程师专项测试题及答案
- 【课件】跨学科实践:制作隔音房间模型人教版物理八年级上册
评论
0/150
提交评论