案例-华为数据治理之旅

1、华为数据治理之旅HUAWEI INTERNAL华为数据管理工作两个阶段：第一阶段通过数据治理，实现数据清洁，提升财报 准确与业务流打通；第二阶段通过建设数据底座、数据服务化，支撑数字化转型数据 分析 与 决策第二阶段发现增长点辅助决策风险预警洞 察 预 测业务数据业务数据业务数据业务数据业务数据线索/机会点合同客户验收交付项目回款产品客户发票数据 产生 与 打通第一阶段通过数字化提升业务效率通过过程管 理提升业务质量产品主题客户主题员工主题产品设计 产品销售产品交付产品核算客户需求客户合同客户站点客户回款数据 汇聚 与 联接产品发货客户清关研发团队销售团队制造团队交付团队PFC行动决策数据指导

2、：该做什么描述：发生了什么 诊断：为什么发生预测：什么将发生人工介入人工介入人工介入决策支持 决策自动化数据接入数据整合数据分享数据洞察明确Owner架构及标准数据同源提升质量两阶段与历程第一阶段流程组织架构质量第二阶段思考总结HUAWEI INTERNALPage 220072013201420172018目标：3年内完成公司数据管理体系 建设，5年内实现数据清洁全面启动数据治理完成各领域数据Owner任命完成各领域数据标准建设公司范围内建立了数据质量度量体系2019目标：建设数据底座及分析平台，实现数据可视、 共享，支撑数字化转型启动数据底座建设启动数据服务化建设启动数据分析平台建设持续改

3、进数据质量目标：引入IBM数据管理框架，启动信 息架构与数据质量建设，孵化各领域数 据组织在IBM顾问指导下，建立数据管理框架支撑GPO的数据组织逐步建立初步启动核心数据的信息架构建设第二阶段：实现数据可视、共享，支撑数字化转型第一阶段：实现数据清洁，支撑财报准确与主业务流打通华为数据管理工作建设历程两阶段与历程架构第一阶段流程质量组织HUAWEI INTERNALPage 3第二阶段思考总结第一阶段数据管理工作达成的目标：完成数据管理体系建设并落地运行， 数据质量综合水平达到基本满意，实现数据清洁数据质量管理数据Owner数据源管理各数据管理部战略到执行信息价值链拉通业务交易到核算信息价值链

4、拉通产品创意到生命周期管理信息价值链拉通 存量管理到问题解决信息价值链拉通基于主业务流的信息价值链综合治理（数据&流程&IT）：纵横打通+数据清洁数据是企业的战略资产数据治理平台公司数据管理总纲数据架构标准管理信息架构政策 指引流程组织IT数据地图管理数据质量管理数据分析数据 架构 标准 管理数据 质量 管理两阶段与历程第一阶段流程组织架构质量第二阶段思考总结主 数 据 在 交 易 打 通维 度 数 据 在 报 告 打 通HUAWEI INTERNALPage 4数据服务设计规范非结构化数据管理指导书观测数据管理分析技术指导书 物联网IoT数据管理设计指导书元数据设计规范元数据注册规范元数据采

5、集操作指导书元数据注册方法操作指导书业务对象识别原则 逻辑数据实体设计规范业务数据标准设计规范 数据源认证规范管理数据分析流程数据分类框架及定义 管理信息架构流程管理数据质量流程 数据管理汇编数据质量规则设计规范数据资产编码规范数据底座建设规范数据底座资产建设流程数据底座共享与安全管理规定数据服务管理流程公司数据管理总纲信息架构管理政策3+1数据政策 数据源管理政策 数据质量管理政策华为数据管理规范流程建设：完成从数据产生、数据整合、数据分析与数据消费 全价值流的规则制定两阶段与历程第一阶段流程组织架构质量第二阶段思考总结HUAWEI INTERNALPage 5质量运营部xxxxxxxxxx

6、xxxxxxxx数数数数数数数数数据据据据据据据据据管管管管管管管管管理理理理理理理理理部部部部部部部部部xxxxxx数数数据据据管管管理理理模模模块块块元数据工作组跨领域数据联合作战团队数据质量执行组信息架构建设组数据服务推进组数据分析工作组数据底座工作组体系建设者能力中心业务的数据伙伴文化倡导者数据管理 组织定位华为数据管理组织实践：建立实体化的数据管理组织，虚线向公司数据管理部 汇报；同时组建了跨领域数据联合作战团队公司数据Owner质量与流程IT管理部领域数据Owner公司数据管理部两阶段与历程架构第一阶段流程质量组织HUAWEI INTERNALPage 6第二阶段思考总结文档、图片

7、、视频等Unstructured Data (非结构化数据)Reference Data (基础数据)实例：国家、币种、合同类型Master Data (主数据)实例：客户、产品、供应商Transactional Data (事务数据)实例：合同、订单、收入Report Data (报告数据)实例：财报、ITO、DSOObservational Data (观测数据)实例：传感器信息、物联网数 据、物流运输过程中产生的 GPS数据External Data (外部数据)Internal Data (内部数据)Structured Data (结构化数据)Meta data (元数据)描述描述C

8、onditional Data (规则数据)实例：财经核算规则、行政差 旅规则等华为已建立统一的数据分类管理框架，指导各领域进行分类管理两阶段与历程架构第一阶段流程质量组织HUAWEI INTERNALPage 7第二阶段思考总结信息架构1数据资产目录通过分层架构表达对数据的分类和定义厘清数据资产是建立数据模型的输入数据模型2通过E-R建模实现对 数据及其关系的描述指导IT开发，是应用系统实现的基础数据标 准3数据标准是业务定义的规范业务术语统一语言，消除歧义为数据资产梳理提供标数据标准准的业务含义和规则数据分布4数据在流程和IT系统上流动的全景视图识别数据的“来龙去脉”定位数据问题的导航数据

9、分层结构L1主题域分组L2主题域L3业务对象 L4逻辑数据实体 L5属性信息架构（Information Architecture）：企业级信息架构是以结构化的方式描述在业务运作和管理决策中所需要的 各类信息及其关系的一套整体组件规范。信息架构包括数据资产目录、数据标准、企业级数据模型和数据分布四个组件。华为信息架构框架：通过政策发文明确信息架构的定义和构成要素，在公司层面建立统一的架构方法数据标准业务术语数据标准数据分布信息链数据源数据流数据模型概念模型物理模型逻辑模型两阶段与历程第一阶段流程组织架构质量第二阶段思考总结HUAWEI INTERNALPage 8基于ISO8000标准，华为建

10、立了数据质量管理框架和运作机制，每年例行 开展两次公司级数据质量度量ISO8000数据质量管理框架数据质量运作机制数据 质量 业务 需求数据 质量 结果 满意能力支撑数据组织数据质量流程 数据治理平台持续改进数据清洁领导力数据质量政策 数据质量管控 数据质量文化数据质量 目标规划 (SP/BP)数据质量控制数据质量 度量数据质量改进数据Owner职责要求公司数据Owner各领域数据Owner专业组织职责要求公司数据管理部各领域数据管理部Data Quality Part61: Information & data quality management process reference mod

11、elPlanData Quality PlanningActData Quality Improve mentData Quality ControlDoData Quality Assuranc eCheckImplementationInformati on&tech nologyResource &training两阶段与历程架构第一阶段流程质量组织第二阶段HUAWEI INTERNALPage 9思考总结对各领域的信息架构 建设情况进行评估聚焦影响“财报”和 “业务运营”的关键 数据，对准数据质量 六性进行评估数据质量综合水平=+设计设计质量（权重40%）执行完整性有效性唯一性一致性准

12、确性及时性执行质量（权重60%）华为数据质量度量：从“设计”与“执行”两个方面度量数据质量，由公司数据 Owner定期发布公司数据质量报告，牵引各业务领域持续改进数据质量2013年2014年2015年2016年2017年公司数据质量综合水平两阶段与历程架构第一阶段流程质量组织第二阶段HUAWEI INTERNALPage 10思考总结收入、利润、现 金流持续有效增 长成为行业领导者人员不显著增加数据贯穿企业内外分布在多个系统人工智能将切实重塑商业模式规模化、复杂的业务生态 业务战略 业界趋势 对数据的诉求华为业务战略与业界趋势对数据管理工作的诉求：日益增长的数字化需求、 复杂的业务系统、驱动企

13、业需要构建一个跨越孤立数据、简单、一致的数据管理系统 +超大规模多业务全球化 分布式 管理井喷增长的数字化业务需求数据隐私和安全将对业务带来影响新趋势及挑战数据管理由企业扩展到合作伙伴安全分享（隐私、安全和权限等）数据消费敏捷自助财经与业务数据集成业务对象、规则、过程数字化数据采集/处理自动化、智能化模型算法两阶段与历程第一阶段流程组织架构质量第二阶段思考总结HUAWEI INTERNALPage 11数据采集/处理自动化、智能化数据管理由企业扩展到生态伙伴数据敏捷自助安全共享（隐私、授权、权限等）数据合规算法模型（AI）实现特性业务对象、规则、过程数字化数据联接 数据实时可视数据透明数据清洁

14、华为数据管理愿景与目标愿景：实现业务感知、互联、智能和ROADS体验，支撑公司数字化转型 目标：清洁、透明、智慧数据，使能卓越运营和有效增长两阶段与历程架构第一阶段流程质量组织第二阶段HUAWEI INTERNALPage 12思考总结现实世界：业务流/角色描述 诊断 预测 指导对象 数字化过程 数字化规则 数字化感知 采集 汇聚汇聚数字世界：数字孪生/主线分析联接现有IT系统业务数据业务结果数据华为数据管理整体思路：构建一个跨越孤立系统、承载业务“数字孪生” 、感 知业务的数据管理系统，支撑公司数字化转型两阶段与历程架构第一阶段流程质量组织第二阶段思考总结HUAWEI INTERNALPag

15、e 13华为数据管理整体框架：以业务数字化为前提，数据入湖为基础，重点建设数据中台；同时加强数据隐私与安全、血缘、虚拟化和生态能力建设数据服务销售系统交付系统数据 消费数据 源实时可视智能决策数 据 底 座五种数据中台联接方式数 据 湖xx数字化运营xx数字化运营业务流效率提升数据分析平台主 题 联 接（ 中 台）xx数字化运营内部数据人力资源外部数据客户管理数据 服务数据资产 管理元数据管理数据地图 指标管理 共享与安全数据服务治理信息架构 数据管控数据分析管理数据质量满足自助式的 数据消费业务与数据双驱动 做厚数据中台完整、清洁的逻辑数据湖业务对象、规则、过程 数字化以业务流（ 事件）为中

16、 心联接以对象（主 体）为中心 联接智能 标签报告 数据算法 模型注册元数据两种入湖方式、六项入湖标准物理入湖虚拟入湖明确数据Owner发布数据标准认证数据源定义数据密级制定数据质量方案批量/实时采集风险预警 两阶段与历程第一阶段流程组织架构质量第二阶段思考总结HUAWEI INTERNALPage 14数据服务建设周期非关键数据资产获取周期数据需求响应周期价值 链数据产生数据整合与数据服务数据搜索数据消费主题数据数 据 服 务数据湖实时数据整合数据主题数据研发销售交付社交合作公开媒体伙伴渠道内部外部指标数据 管理数据服务管理数据搜索描 诊 指 预 述 断 导 测 性 性 性 性 分 分 分 分 析 析 析 析元数据管理数 据 汇 聚数 据 清 洗数 据 联 接数 据 标 签对 象 数 字关键化能力过 程 数 字 化规 则 数 字 化数据质量华为数据管理能力：建设16个