数字化转型中的大数据治理架构

PHTr*2016中国大数据技术大会

PIBigDataTechnologyConference2016

数字化转型中的大数据治理架构

RDTU2016中国大数据技术大会

KvIWBBigDataTechnologyConference2016

1）数字化时代大数据向服务化发展

[）大数据治理架构与关键先进技术分析[

普元大数据治理架构实践

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

互联网+

虚拟时空&现实时空

网上银行、银证通、银保通手机银行、移励支付消费金融、工业4.0

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

企业也希望综合运用多种先进技术支持，将已有：

能力体系向社会开放,改善客户联系，在创

造社会价值的同时实现企业价值

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

红领集团通过业务仓!l新实现由客户项目需求直接驱励工厂的运作模式

>

n距

/

空

闲

6

孙IBIDk

侍铁

里子、精子、领子（丫）

线扣

备料自动出博

阊整/返修返修扣款:

试衣

物流运输

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

数字化商业是由虚拟世界与物理

世界深度融合所带来的新的商业设计

为企业和客户

人、事、物的创造

前所未有的融合BUJS

,新的收入机会

■数字化商业将颠覆现有的商业模式,

至是互联网和电子商务时代的商业

模式

鸣里，

全球客户的自主设计岛?智能S产品M研发系统

全数据驱动・全生命周期的实时协同

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

苏州工业园区在信息化发展规划中提出了三库、三通、九枢纽的信息化总

体发展框架。

企业通■居民通政务通

公

安

枢

纽

先后完成了公安、工商等15家

人口、法人信息高关联度局办

人口基础库地理信息库

的信息纳入政务资源于整体平

台。

园区云计算整体平

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

根据大数据咨询公司NewVantagePartners近期发布的调查报告，在接受调查的

企业中，2012年仅有12%伏命了首席数据官，而2016年这一比例上升到54%

12%

2008-2009年世界金融危机,

2012年2016年

第一位CDO诞生

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

数据中心从成本中心转变为利润中/小，向外部提供服务

数据中心由数据管控转变为数据月艮务，为业务创新服务

对

对

对

内

内

内

应

应

应

用

用

用

数据中心

研发团队

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

王业万物业务创新项目需求提供月区方

面向分析业务为

I。盔I

经羲策

非/结构化数据

_Q-■汆I叼

传感器数据社交媒体IT/OT图像视频

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

用大数据治理连接大数据与业务创新

畲国目二a

网络数据通信数据信用数据客户数据

大数据治理

非/结构化数据

分析

传感器数据社交媒体IT/OT图像视频

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

传统数据治理存在组织架构复杂、管控范围狭窄、管控流程复杂、人工录入多等弊端

大量的录入工作

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

用自励化，自劣化，智能数智化的大数据治理

找到数据，提供数据，使用数据，治理数据

RDTU2016中国大数据技术大会

KvIWBBigDataTechnologyConference2016

1）数字化时代大数据向服务化发展

1）大数据治理架构与关键先进技术分析]

普元大数据治理架构实践

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

缺乏服务化

数据难使用数据难查找

数据工具链复杂数据相关质量难提敏感数据易泄露

高

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

通过大数据治理，降低业务对先进技术依赖，充分发挥业务创新潜能

一传统。数据管控一创◎新数据管控

业务数据部门业务

❸❷.业务自劣开发

I制I|。礼

分析应用1分析应用2分析应用n数据应用能力。

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

全自劣的数智能数智化的

据

治

理

大数据整体平

4

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

可视化管控企业资产

自励获取数据信息

大数据服务智能数智管控核心数据定义

为数据标准添加先进技术）

□X五C

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

«p

e繇

fie

B

»BX

eaxM

企业数据资产

%烹

表、字段对象、接口

业务语义、业务服务

fj

■JohnZ#tg

JasonKellyJohnson

joenBMes*•CamefonWhitten

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

大数据适配器Spark,HDFS,Hive,HBase,Sqoop,Flume,Pig

TranswarpDataHub,ClouderaCDH,

商业版本适配器

Fusioninsight,HortonworksHDP

Oracle,DB2,MySQL,Teradata,Sybase,

数据库适配器

SQLServer,Greenplum,PostgreSQL等多种数据库

建模工具适配器ERWin,Powerdesigner等设计模型

PrimetonDI,Datastage,PowerCenter,Pentaho

ETL工具适配器

Kettle,SAPDataSerive

PrimetoniData,Cognos,OBIEE,SAPBO,

Tableau,MSTR,QlikView

对Shell、Peri等脚本采用SQL解析的方式方式方法进行ETL作

脚本适配器业

映射关系兀数据采集，存储过程，DDL

NLP适配器自励分析各种非结构化文本，自助分析业务元数据

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

以元数据为核心，打通数据生命周期，从源头保证数据相关质量。

查________查________查________盘

DataQuality

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

❷❽o

客户项目需产品项目需

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

提供各种数据管控服务，如相关质量、元数据、标准、监控、发布共享的服务,

将治理整体平台变为服务整体

平台。

资产地图服务提供企提供影响/血统分析服

业数据资产全景图务追溯全企业信息资

产

能力体系服务

元数据服务■数据相关质量月・数据标准服务■数据开发服务■数据监控服务・数据发布共享服务

数据管控整体平

RDTU2016中国大数据技术大会

KvIWBBigDataTechnologyConference2016

1）数字化时代大数据向服务化发展

［）大数据治理架构与关键先进技术分析［

［）普元大数据治理架构实践

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

苏州工业园区在信息化发展规划中提出了三库、三通、九枢纽的信息化总

体发展框架。

企业通■居民通政务通

公

安

枢

纽

先后完成了公安、工商等15家

人口、法人信息高关联度局办

人口基础库地理信息库

的信息纳入政务资源于整体平

台。

园区云计算整体平

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

实现以元数据为基础的政务于业务仓！I新模式（资产、开发、运营、监控）四中心

一个先进技术支撑整体平台，一个融合库，全面实现苏州工业园的数据资产资源化

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

普元提供的数据自劣分析整体平台，让阿里大数据整体平台内的数据业务化，成为数据存

储整体平台与业务人员之间沟通的桥梁，让业务人员可直接使用大数据整体平台内的数据。

梳理业务元数据，形成业务元数

针对每个业务项对查询分类，帮

劣业务用户自自劣获取数据

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

1.实现业务人员自劣分析

提高处理效

率

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

基亍业务元数据的业务数据地图，使业务方能迅速获取数据

13个主题域，即客户、员工、位置、订座、票务、航班、航班：

计划、财务、资产、设备、维修、运价、销售、产品库存。

I

针对每个主题域给出了业务实体目录及定义，实体总数227个。

I

通过对数据仓库贴源层业务system表的核查及分析，给出了每个立

务实体对应的数据库表与system。

”目豪8

口尸

ft・9美nAU

a«ax快漏亳晅

E3aa»p就班用MWHfVlPfill

n»»«P

awa

⑤

ftaxM0

.\"AH

QMm

QMAA

aMun

n“a

BMliHI

RDTU2016中国大数据技术大会

KvIWBBigDataTechnologyConference2016

1,企业数字化转型需要大数据服务化

2,大数据治理是大数据服务化的基础

3,大数据治理需要有完整的先进技术整体平台支撑

4,大数据治理的先进技术整体平台需要满足十二原

Jflll___________________________________________

RDTU2016中国大数据技术大会

KvIBigDataTechnologyConference2016

Web/MobileBPMIntegrationData

；=|=

国口流程薪理流翻排AaU小

API网关SPa"复杂事件处理

Web应用

0£＞：V

嫦）O