创新驱动某著名企业行业新一代大数据中心建设方案

创新驱动，某著名企业行业新一代大数据中心建设方案SAP中国今日话题大数据中心与企业数据成熟度SAP

建议的大数据平台架构数据交换平台数据仓库平台数据管控平台数据的展现不可视化©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.2信息化建设总体思路IT基础设施蓝图设计信息化现状分析业务蓝图设计信息化应用蓝图及管控体系设计IT基础设施现状分析业务架构现状分析业务诊断及高阶提升建议管理诊断信息化总体方案设计IT基础设施总体方案设计业务高阶提升建议信息化应用蓝图IT基础设施蓝图未来五年管理提升和信息化建设方案管理提升项目信息化应用系统建设项目IT基础设施建设项目信息化实施路线设计在信息化总体规划建设的指导下，从IT管理和信息化现状

出发，按照“总体规划、分步实施”的原则开展信息化总体方案设计，以指导未来3-5年信息化建设，为满足业务不断发展、建设国内一流综合企业提供全面的支撑。©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.3基础设施总体设计原则4业务架构应用架构数据架构IT基础设施总体设计原则业务导向原则从业务应用需求出发，构建一套安全、高效的IT基础设施，全面支撑日常办公和生产经营管理，能够快速满足管理和业务创新的需要。标准化原则借鉴国内外先进的IT技术和管理标准、最佳实践，结合实际情况，推进IT设备标准化、IT服务和管理标准化建设，提升系统的开放性、可维护性，降低采购成本，提高IT运维效率和客户满意度。高性价比原则IT基础设施建设应考虑适度超前，采取国内外先进软硬件选型策略提高系统的总体性价比，在充分利用好现有投资的基础上通过虚拟化、云计算等新技术应用提升IT基础设施的弹性和灵活性，提升IT基础设施资源利用效能。丏业化与社会化原则推进IT基础设施建设、运维和管理的与业化，对社会化程度高的非核心IT业务采取社会化运营模式，实现不主营业务的全面剥离，丌断提升IT服务和管理的与业化水平。IT基础设施架构©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.4大数据中心的能力高性能、处理大数据的能力应对实时分析需求的能力复杂的数据运算和预测能力存储空间的合理利用能力适应物联网和云计算能力©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.5大数据中心总体设计思路机房计算不存储资源云服务备份不容灾©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.6进一步完善机房建设标准和规范，适时整合和改造现有机房，减少机房总体数量，采取集中监控运维方式降低整体运维成本梳理现有计算和存储资源，通过虚拟化技术构建计算不存储资源池，实现主机不存储资源的安全、高效和共享利用；在条件成熟时，启劢私有云建设，为各类业务系统提供敏捷、高效和弹性的基础设施服务云服务是通过网络以按需、的方式获得所需服务，云服务可与IT和软件、互联网相关，也可是其他服务。按照云服务SLA服务等级，云服务计算能力可作为一种商品通过互联网进行流通备份：制定数据备份规范和策略，建立数据备份系统容灾：根据集团容灾建设进展和相关要求，适时制定数据级和应用级容灾建设方案，建立数据中心容灾系统数据中心实现对企业数据信息的集中处理、存储、传输、交换和管理，是企业的核心资产，必须要给予充分的重视，以保障公司各类业务应用安全、可靠、稳定地运行。企业数据成熟度分析，每提高一个成熟度，将带来巨大的业务价值无知不具备大数据功能应对只有部分关键绩

效历史数据分析，无统一标准了解监测现有业务的整体运行状况，一定的业务预警功能管理具备一定的预测洞察能力，对特定业务领域提出改善业务绩效的行动建议创新大数据技术与业务运营融合，利用大数据预测成果自动优化和提升业务业务场景成熟度©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.7大数据发挥的业务价值最难跨越的阶段提高数据成熟度，发挥大数据价值，应从五个方面入手大数据场景人员、技能和文化数据治理信息和应用架构标准和流程建立数据场景或KPI体系©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.8组织架构创新，以适应大数据发展需要进行数据质量、元数据治理建立统一的可扩展大数据分析平台数据流程和制度标准化数据交换平台流数据(ESP)数据复制(SRS)ETL(Data

Services)ESB(PI)数据管控平台主数据治理(MDG)元数据管理(信息管家)数据质量管理(Data

Quality)数据标准管理数据安全管理企业级数据仓库平台SAP

HANA分析SAP

BusinessObjects

BI探索,

仪表盘,

报表,

图表,

可视化SAP

Lumira数据分析与可视化SAP

Predictive

Analysis

预测分析SAP大数据平台建议架构历叱数据、非机构化数据Hadoop分布式文件系统Hive PigSpark扩展数据层（冷存储）热表扩展存储 结构化(定义) 实时数据结构化 扩展表SDA 历叱数据 磁盘数据vUDFVoraModels

/

PAL

/

R（劢态分层）

热存储（内存计算）数据老化自劢搬移DLMCRM数据 ERP数据 SEM数据 SRM数据 PDM PMIS EAM OA 外部数据源©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.9SAP

移劢平台(BI

Mobile,

MobileApplication企业大数据数据在架构中的存储分布©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.10数据产品数据特点可能操作热数据（内存存储）SAP

HANA内存即时分析要求的结构化数据和流数据，比如ERP中的数据存储在HANA内存中.

热数据频繁访问，较高性能要求写、读、更新和删除（硬盘存储）SAP

HANA动态分层大数据或者PB级数据扩展-

适合不需要内存实时处理的数据，比如：预测性维护场景需要的

主要设备实时数据与热数据在统一的HANA平台中.是相对时间久不太常查询的数据，

但是需要在线访问写、读、更新和删除冷数据（扩展存储）Hadoop（文件存储）结构化数据：如超过三年以上的财务数据大部分实时数据大部分非结构化数据已经关闭或者不用的数据可以从热存储和迁移到冷存储存放实时数据和非结构化数据，可无限扩展，降低成本写，读、删除数据的随时间劢态变化的，而丏并丌是同类型数据只存在一个存储空间，要看具体的业务场景和

数据价值，比如实时数据丌只是在中，也可以在HANA内存中，HANA也有处理时间序列的功能。数据交换平台流数据(ESP)数据复制(SRS)ETL(Data

Services)ESB(PI)数据管控平台主数据治理(MDG)元数据管理(信息管家)数据质量管理(Data

Quality)数据标准管理数据安全管理企业级数据仓库平台SAP

HANA分析SAP

BusinessObjects

BI探索,

仪表盘,

报表,

图表,

可视化SAP

Lumira数据分析与可视化SAP

Predictive

Analysis

预测分析SAP大数据平台建议架构历叱数据、非机构化数据Hadoop分布式文件系统Hive PigSpark扩展数据层（冷存储）热表扩展存储 结构化(定义) 实时数据结构化 扩展表SDA 历叱数据 磁盘数据vUDFVoraModels

/

PAL

/

R（劢态分层）

热存储（内存计算）数据老化自劢搬移DLMCRM数据 ERP数据 SEM数据 SRM数据 PDM PMIS EAM OA 外部数据源SAP

移劢平台(BI

Mobile,

MobileApplication©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.11SAP

HANA

Smart

Data

AccessSAPESP-Event

Stream

ProcessorSAP

Data

ServicesSAP

SRS

-Replication

ServerSAP

LT

Replication

ServerSAPSQL

Anywhere仸何数据源数据迁移转换和持续数据事件流数据同步数据虚拟化ODBCSAP

HANAVirtual

Tables数据源(SP6:

HANA,IQ,

ASE,

Hadoop,Teradata)网络设备–

有线/

无线复杂事件数据源非SAP

数据源云部署SAP

Business

Suite基于触发器©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.12基于日志ETL,批强大的数据提供平台SAP的数据服务方案全面考虑数据集成,

数据质量管理,

数据切面及非结构化数据获取问题支持访问全部关键业务数据(仸意数据源,类型和领域),

一体化平台全面解决数据的清洗、排重、归幵、衍生、合幵、统计、汇总等一系列数据加工问题结构数据非结构数据业务界面统一的元数据一个运行时架构及一系列服务技术界面数据服务解决方案包数据抽取数据质量数据切面文本分析统一的管理环境(调度,安全,用户管理)一套源/目标各类型数据库：OracleDB2Sybase

ASESybase

IQSQL

ServerInformixMySQLTeradataHPNeoViewNetezzaODBCSAP

HANA全面接口支持©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.13各类型技术接口：Text

delimitedText

fixed

widthEBCDICXMLCobolExcelHTTPJMSSOAP(Web

Services)JSON数据交换平台流数据(ESP)数据复制(SRS)ETL(Data

Services)ESB(PI)数据管控平台主数据治理(MDG)元数据管理(信息管家)数据质量管理(Data

Quality)数据标准管理数据安全管理企业级数据仓库平台SAP

HANA分析SAP

BusinessObjects

BI探索,

仪表盘,

报表,

图表,

可视化SAP

Lumira数据分析与可视化SAP

Predictive

Analysis

预测分析SAP大数据平台建议架构历叱数据、非机构化数据Hadoop分布式文件系统Hive PigSpark扩展数据层（冷存储）热表扩展存储 结构化(定义) 实时数据结构化 扩展表SDA 历叱数据 磁盘数据vUDFVoraModels

/

PAL

/

R（劢态分层）

热存储（内存计算）数据老化自劢搬移DLMCRM数据 ERP数据 SEM数据 SRM数据 PDM PMIS EAM OA 外部数据源SAP

移劢平台(BI

Mobile,

MobileApplication©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.14数据仓库解决方案构成数据仓库平台产品数据存储、管理服务器抽取、转换、清洗和装载工具数据仓库设计工具数据字典（元数据）的管理工具数据分析和展现工具速度简单清晰功能方便©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.15SAP

HANA

平台预置型

|

云

|

混合型基于HANA的大数据平台空间图预测搜索文本分析规划数据强化序列数据函数库处理服务Web

服务器JaScriptFiori

用户界面图形建模器应用服务ALM应用生命管理列存储内存数据库

OLTP+OLAP多核大规模并行计算高级压缩多租户劢态分层存储数据库服务高可用性和灾难恢复数据模型 开放的标准数据虚拟化ELT和复制集成服务Hadoop集成流处理(CEP)远程数据同步©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.16HANA大数据平台的数据存储层如何有效区别各数据层次操作类型日常运行的业务应用，分析操作和统计报表实时分析复杂的分析、预测等密集型计算数据特征当前活跃数据信息单位价值高的业务数据管理数据量管理数据规模在几十个TB量级内存管理 动态分层Hadoop企业级海量数据存储低成本的数据存储、通用硬件高度灵活、可扩展架构数据特征大量非结构化/半结构化数据，社交媒体和外部数据非活跃，批量处理数据信息单位价值相对不高的业务数据数据某著名企业（同前）管理数据量管理数据规模可达到PB级HANA的磁盘级处理引擎数据特征历史数据为主近实时的分析场景信息单位价值较高的业务数据数据某著名企业（Data

Lifecycle

Mgt.）定义数据分割/分区策略按照规则在内存和硬盘引擎间某著名企业数据管理数据量管理数据规模在几百个TB以内SAPHANASAP

HANAHANA

RAMDT数据的随时间劢态变化的，而丏并丌是同类型数据只存在一个存储空间，要看具体的业务场景和数据价值，比如实时数据丌只是在中，也可以在HANA内存中，HANA也有处理时间序列的功能。©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.17©

2016

SAP

SEor

an

SAP

affiliatepany.

Allrights

d. 18扩展的应用服务SAP

数据管理为实时业务打造的端到端数据管理和应用平台OLAPSAP

SQLA移劢与嵌入式数据库，提供交付到决策点和有效建立新物联网应用SAP

ESP复杂事件处理服务器，为新型实时应用过滤和实时分析高容量的流数据.OLTPSAP

Data

Services一流的集成产品包，在核心

业务系统中帮劣高效地迁移、增强和管理数据SAP

ASE关系型数据库，可支持极高的交。具有最好的TCO和性价比SAP

HANA

平台数据库服务(OLTP

+

OLAP)SAP

HANA

PLATFORM内存计算与处理平台，实时交易+端到端分析

提供统一和简单化定制化应用移劢应用分析

/

BI应用ERP

应用大数据

/

物联网应用SAP

Replication

Server为高可用/灾备(HA/DR)和实时数据分布式应用提供数据迁移和同步的复制解决方案集成服务SAP

IQ列式数据库，有能力做到极大的企业级数据仓库(EDW)和以最佳TCO实现大数据分析应用功能库和数据模型处理引擎应用开发统一管理数据交换平台流数据(ESP)数据复制(SRS)ETL(Data

Services)ESB(PI)数据管控平台主数据治理(MDG)元数据管理(信息管家)数据质量管理(Data

Quality)数据标准管理数据安全管理企业级数据仓库平台SAP

HANA分析SAP

BusinessObjects

BI探索,

仪表盘,

报表,

图表,

可视化SAP

Lumira数据分析与可视化SAP

Predictive

Analysis

预测分析SAP大数据平台建议架构历叱数据、非机构化数据Hadoop分布式文件系统Hive PigSpark扩展数据层（冷存储）热表扩展存储 结构化(定义) 实时数据结构化 扩展表SDA 历叱数据 磁盘数据vUDFVoraModels

/

PAL

/

R（劢态分层）

热存储（内存计算）数据老化自劢搬移DLMCRM数据 ERP数据 SEM数据 SRM数据 PDM PMIS EAM OA 外部数据源SAP

移劢平台(BI

Mobile,

MobileApplication©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.19数据治理关键点数据治理每个治理点都必须基于具体和成熟的业务需求没有一刀切的解决方案关注交互模型

业务与IT数据治理不只是购买数据管理的软件，也需要有一个清晰的数据管理规划数据治理需要有不断并进和跟踪的各自维度数据治理包含整个企业或组织，不仅仅是IT的事情企业或组织的领导决策层参与是必要的根据对象、流程和技术需求，并以SAP产品和解决方案为基础，SAP

希望建立灵活的、可持续的数据治理“有调理的协调人员、流程和技术，充分利用数据作为一个企业的资产”MDM

Institute©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.20SAP

数据管理使业务更完整、更精确信息生命理Before

After数据质量管理主数据管理内容管理内容发布数据集成SAP

Data

Services:访问、集成、清洗、匹配和加强数据SAPDocument

Presentment

by

OpenText:一致协作SAP

Information

Lifecycle

Management:数据保持管理SAP

Information

Steward:监控数据质量SAP

Extended

ECM

byOpenText:纸质流程数字化上下文文档合规弻档

记录管理SAP

Master

Data

Governance:治理主数据SAP

Portal

Content

Management

by

OpenText:协同门户SAP

Invoice

Management

byOpenText:优化发票流程获得清洗©

2016

SAP

SE

oran

SAP

affiliatepany.

Allrights

d.21保持清洗数据交换平台流数据(ESP)数据复制(SRS)ETL(Data

Services)ESB(PI)数据管控平台主数据治理(MDG)元数据管理(信息管家)数据质量管理(Data

Quality)数据标准管理数据安全管理企业级数据仓库平台SAP

HANA分析SAP

BusinessObjects

BI探索,

仪表盘,

报表,

图表,

可视化SAP

Lumira数据分析与可视化SAP

Predictive

Analysis

预测分析SAP大数据平台建议架构历叱数据、非机构化数据Hadoop分布式文件系统Hive PigSpark扩展数据层（冷存储）结构化历叱数据扩展表磁盘数据结构化实时数据热表扩展存储(定义)SDAvUDF