公司数据架构优化项目总体技术方案

1中国电财数据架构优化项目

总体技术方案2022年4月2中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–

数据架构优化的系统设计–

数据架构优化的门户集成设计–

数据架构优化的运营维护设计主要内容3建立数据仓库是提升管理分析能力的有效手段加强数据标准建设是落

实集约化的必要基础建立数据交换平台是实现信息共享的坚强保障未来应用系统的框架设计对支撑其运行的

IT

技术基础设施的设计提出了关键需求，提出以建设以数据中心为

IT

技术基础设施核心的设计思想

建立数据仓库系统，提供企业级统一数据视图，在数据仓库的基础上尽量实现对外报送报表和内部固定报表的自动生成；实现自定义报表功能，满足业务部门灵活查询的需求；实现多维分析功能，满足预算集约调控和风险在线监测的要求。通过数据标准的制定和管理，对统一公司范围内所涉及的各项数据的定义与业务含义的解释，达到业务数据定义和使用的一致性，促进信息集成具有重要意义。数据标准的制定和执行可以实现全公司范围内数据的一致性和正确性，满足财务集约化的

“

制定和执行统一的信息标准，促进公司各类信息的互相融合

“

的要求。通过数据交换平台，对不同业务系统的数据进行整合和集成；数据交换平台实现总部各业务部门之间的横向共享以及公司总部与地方分公司和国网公司之间的信息共享，满足财务集约化的

”

建立可靠、灵活、安全、稳定的数据交换平台

“

的要求。4中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–

数据架构优化的系统设计–

数据架构优化的门户集成设计–

数据架构优化的运营维护设计主要内容5中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–

数据架构优化的系统设计–

数据架构优化的门户集成设计–

数据架构优化的运营维护设计主要内容6在进行硬件估算时，充分考虑了未来数据容量和用户数。7中电财数据架构优化所需硬件和软件的清单列表

硬件清

单

数据库服务器（主机

,4CPU,16G

Ram

）

应用服务器

（主机

,4CPU,16G

Ram

）

ETL

服务器

（

PC

Server,2CPU,8G

Ram

）

OLAP

服务器（

PC

Server,2CPU,8G

Ram

）

Web

服务器（

PC

Server,2CPU,8G

Ram

）

磁盘阵列（

600GB

）

开发测试服务器

（主机

,4CPU,16G

Ram

）注：以上服务器仅是数据仓库应用系统理想情况下的配置，

实际配置时可以根据系统性能要求，把若干项功能

组合起来，由一台服务器承担。

软

件清

单数据库软件（

Oracle

10G

RAC

）ETL

产品（

Informatica-PowerCenter

）OLAP

产品（

Cognos-Analysis

Studio

）报表产品（

Cognos-Report

Studio

）中间件产品（

Weblogic-Potal

）8中电财数据架构优化所需硬件清单列表

硬件数据库服务器

应用服务器

ETL服务器

OLAP服务器

Web服务器

磁盘阵列

服务器

应用服务器

Web服务器应用系统数据仓库生产环境数据仓库开发测试

环境

公共数据管理平台

配置

主机,4CPU,16G

Ram

主机,4CPU,16G

RamPC

Server,2CPU,8G

RamPC

Server,2CPU,8G

RamPC

Server,2CPU,8G

Ram

600GB

主机,4CPU,16G

Ram

小计PC

Server,2CPU,8G

RamPC

Server,2CPU,8G

Ram

合计 操作系统IBM-AIX5.3/LinuxIBM-AIX5.3/Linux NT(Windows2022) NT(Windows2022) NT(Windows2022)

NT(Windows2022)

NT(Windows2022) NT(Windows2022)

用途

正式环境，安装Oracle

正式环境，安装Weblogic正式环境,安装Informatica

正式环境,安装Cognos

正式环境，安装Apache

正式环境,数据备份、归档开发测试环境，安装开发阶

段使用的Oracle数据库

开发阶段借用，系统上线以后作为数据交换平台使用。

应用系统产品种类产品名称数据仓库数据库软件Oracle10G(version:10.2.0.1)1CPU,50usersETL产品PowerCenter(Informatica8.1.1)1CPU,50users报表产品Report/QueryStudioCognos8.3BIServerOLAP产品AnalysisStudioWeb服务器产品Weblogic10.1.61CPU,50users

小计

公共数据管理平台Web服务器产品Weblogic10.1.61CPU,50users

数据库软件Oracle10G(version:10.2.0.1)1CPU,50users

小计

合计

9中电财数据架构优化所需硬件清单列表软件类别软件名称说明ETL工具Informatica数据抽取转换和加载工具报表工具CognosReportStudio前端展示工具OLAP工具CognosAnalysisStudio多维展示工具建模工具PowerDesignerorErwin数据模型建模工具数据库Oracle数据库产品中间件Weblogic中间件产品10中电财数据架构优化基础软件清单及其用途11中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–

数据架构优化的系统设计–

数据架构优化的门户集成设计–

数据架构优化的运营维护设计主要内容12二、数据架构

优

化的

总

体物理架构三、数据架构

优

化的网

络

拓扑架构IBM

通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。一、数据架构

优

化的

总

体

逻辑

架构四、数据架构

优

化的数据交

换

平台13基于中电财的现状设计出的数据架构优化的总体逻辑架构。数据源层企业接口层

临

时

数

资金历史数据数据存储层

据

（与

BOS

的结构相同）

区

营业历史数据

。。。。。

汇总数据

（维表

/

汇总

/

账户

/

客户事实表）

处理数据（业务规则

/

配置参数

/

中间结果）

业务基础数据

（账户

/

客户

/

交易层事实表）

业务元数据

（账户

/

客户

/

交易数据）基础及汇总数据区BOS-

资金BOS-

营业资金结算系统财务系统信贷系统…操作型数据存储

(ODS

是

"

面向主题的、集成的、当前或接近的、不断变化的

"

数据。

)

各个业务主题数据集市

（应用数据区）

其他资金数据集市

数据集市

各类中电财业务的应用数据财务优化报表

资金存款类信息展现层

报表

应用层

资金调

度展示

室多维分析灵活查询

资金账户查询

营业账薄查询

其他灵活查询风险分析分析预测现金流量预测融资计划预测其他分析预测

统计

分析资金准确性分析营业结算量分析

其他多维分析

信贷

分析管理提升其他应用

银监会

1104

类

报表

营业账资金其

薄查询他分析

优化。。其他业务报表

营业其

他分析。。14。。。客户业务人员决策人员分析人员管理人员用户访问层

—

中电财企业信息门户

(EIP)商业智能平台……财务系统资金结算CPFBOS汇总数据区基础数据区临时数据区数据抽取、转换、加载

（

ETL

）……ODS其他部门应用分析数据交换平台业务主题客户管理财务管理数据导出P

XD

LF

S数据管理人员信

风

资

营

固

多

灵

分贷

险

金

业

定

维

活

析管

管

管

结

报

分

查

预理

理

理

算

表

析

询

测

数据仓库

Oracle

10gR2

RAC

应用数据区...手工数据依据中电财总体逻辑架构，我们整理出分层次、可扩展的总体物理架构图。15IP千兆网应用层SAN存储网Web负载均衡Firewall总公司B/S用户总公司B/S用户分公司B/S用户IP千兆网IP千兆网总公司DW数据库服务器

集群总公司报表数据库+

分公司报表数据

HA历史数据管理平台

HDS(

历史数据备份

)存储阵列总公

司分公

司总公司规则设置

工作站调度管理工作站Web

服

务器应用服

务器

总公司报表集中

部署平台总公司报表

分公司报表

展现功能

展现功能ETLInformatica8.3远程维护工作

站调度服

务器UAAP统一认证Web

层用户层数据库层存储层基础设施架构

基于中电财的技术架构规划的网络拓扑与硬件部署FactFactTableTable预构建的基于角色的报表&仪表盘–2000+报表，组织在200+页面中，涉及50个流程交互式用户存取界面–针对所有用户的门户–即席查询/编制工具16数据交换平台的现阶段与未来实现

Time

DimensionProductDimensionAccountDimensionAccount

TypeDimensionGeographyDimension

Industry

Dimension数据交换平台数据源现阶

段现阶段，基于

CPFBOS

的各业务主体

–

资金相关业务主题

–

营业相关业务主题–信贷相关业务主题即席查询+各个部门应用构建标准化的基础数据区

–

数据层次

&

数据关系

–

口径统一的公共数据

账户管理信息、账户活动信息。。。–

7000+

预构建的对象，

2300+

度量

,

5000

个维基础数据下一

阶

段17中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–

数据架构优化的系统设计–

数据架构优化的门户集成设计–

数据架构优化的运营维护设计主要内容18二、数据架构

优

化的系

统应

用

设计三、数据架构

优

化的数据

层

次

设计IBM

通过主导数据架构优化建设的总体设计，提供业务需求的总体分析和技术上的总体架构，为中国电财未来持续实现数据架构的应用奠定基础，为未来持续发展提供战略层面的意见和建议。一、数据架构

优

化的系

统

接口

设计四、数据架构

优

化的

ETL

架构

设计一、新增数据源系统由于业务发展需要,新建的业务系统,而且也需要作为信息披露或财务分析与预测的数据源措施一:架构设计层级,采用中间层标准数据模型,隔离数据源发生变化对于整个系统的影响二、新老系统的逐步割接最复杂的情况是按照分行逐步割接,在并行期会出现部分分行的业务在新系统,部分在老系统措施二:采用新旧线数据来源配置表,通过参数化配置来应对新老系统逐步隔接问题三、源系统自身的升级改造源系统的升级改制,也有可能造成对提供的数据接口有影响措施三:采用专业ETL工具(Informatica),通过参数配置调整快速应对接口变化19接口灵活度解决方案综合考虑中电财未来的业务发展以及

IT

系统新老系统的演进，我们从系统设计层级充分考虑接口的灵活度，确保在外围系统变化更替过程中，对于本系统的影响程度最小，并能做到快速应对外围源系统变化。外围源系统通常的变化类型接口灵活度应对措施20接口灵活度解决方案

-

措施一

:架构设计层级,

采用中间层标准数据模型,

隔离数据源发生变化对于整个系统的影响

基础数据区为标准数据模型，是综

合金融行业主流的数据建模方法

,

并结合

IBM

项目经验

,

确保标准数

据模型能够应对未来中国电财业务

发展

,

并在标准模型中预留足够的

扩展字段来应对未来的需求

.

架构设计中采用标准数据层模式

,

将数据源变动限定在数据预处理模

块内部通过与

ODS

的接口格式定义

,

预先考虑接口变化需求

,

预留一些将来可用的扩展字段21接口灵活度解决方案措施三

:

采用专业

ETL

工具

(Informatica),

通过参数配置调整快速应对接口变化以图形化、参数化等直观方式，实现快速优化调整，

应对数据源结构发生变化。InformaticaETL：OracleWarehousePowerCenterBuilder即时/批量（日终处理/每周处理/月度处理）CPFBOS资金模块CPFBOS营业模块资金结算系统财务系统NC管理应用层报表分析预测信息展现层和信息发布门户其他应用加工资金业务数据集市营业业务数据集市WebLogic

Potal

各个业务部门其它系统

22…数据接口层

EAI/ETL

数据源层

核心类系统共享维度客户

产品

机构

/

渠

客户贡献度

贡献

贡献

单一视数据集市公共数据开放平台数据仓库数据库层数据加工预处理Oracle10GCognos

Business

度

Intelligence

度

道

Productions

图中电财数据架构优化的总体系统应用设计架构

PA

数据库

（业务数据，计算数据、结果数据）基础数据区

临时存储区

客户主数据数据汇总区23中电财数据架构优化的总体系统应用中

Cognos

应用：如：固定报表、多维分析、灵活查询、分析预测等24中电财数据架构优化的总体系统应用中

Cognos

应用：固定报表25中电财数据架构优化的总体系统应用中

Cognos

应用：多维分析26中电财数据架构优化的总体系统应用中

Cognos

应用：灵活查询27中电财数据架构优化的总体系统应用中

Cognos

应用：分析预测28中电财数据架构优化的总体系统应用中的

J2EE

应用：如：数据补录、人工干预等模块29基于中电财数据架构优化的总体逻辑架构设计的整体数据层次设计以及指标库划分。编号名称用途说明1操作型数据存储(ODS)ODS是"面向主题的、集成的、当前或接近的、不断变化的"数据。2临时数据区临时数据区用于存储各个业务系统的原有机构的历史数据，包括：资金历史数据、营业历史数据等等，以保留将来在数据层面与原有业务数据进行核对时的原始痕迹。3基础数据区基础数据区用于存储中电财各个业务系统的最基础的数据单元，按照客户、账户、交易、机构、科目、凭证等最基础单元存储，与原有系统的机构不同，为了下一步按照各个维度汇总相关指标作数据准备。4汇总数据区汇总数据区用于存储中电财按照各个不同维度汇总的各种相关基础指标的汇总加工后的数据，对指标计算引擎计算出来的结果进行存储。5应用数据区应用数据区直接面对的是Cognos固定报表、多维分析、灵活查询、分析预测等展现，需要针对不同类型的应用对汇总数据区做出一些合理化的转换存储。678930各个数据区的用途31

元数据管理平台功能元数据导入从各种元数据导入元数据管理平台，供后续过程使用元数据分析依赖分析

通过元数据工具进行数据项之间自动关系分析或手工关系分析。同时，对指标的业务逻辑加工进行回溯分析，用图形化展现指标之间的关系及数据口径说明；影响分析

对某一数据项的更改，可以分析到对全局的影响，能使业务或开发人员通过系统和应用的单一全局视图，积极地评估更改的影响。可以确定实施更改所需的工作量。元数据发布应用元数据管理客户端，并通过客户化的定制，可以对需要展现的元数据分类显示修改元数据对需要展现的元数据进行相应的修改浏览查询使用标准

Internet

浏览器完成对元数据的浏览、查询、打印、下载等操作。32中电财数据架构优化项目的

ETL

架构设计

:采用专业

ETL

工具

(Informatica

PowerCenter8)

Informatica

PowerCenter

8

Platform

Mainframe

eBusinessSources/XML

Data

WarehouseFinance

CRMData

Mart

Data

MartOperational

Data

Store

MFG.

Data

Mart

AdditionalServer

Engines

Siebel

SAP

PeopleSoft

RDBMS

PowerConnectInformatica

PowerCenter

8

Data

Integration

HubMQSeriesMainframe33DesignerServer

ManagerServerRepositoryRepository

Manager

Sources

1-nPowerPlugsData

Models

Targets

1-n中电财数据架构优化项目的

ETL

架构设计

:ETL

工具

(Informatica

PowerCenter8)

的逻辑架构

Informatica

PowerCenter

8

Architecture3434数据标准流程管理元数据量化指标数据管理制度化数据分类标准数据组织标准

代码标准随机状态发现状态管理控制优化阶段自动阶段数据创建

数据处理

数据存储

数据应用归档与备份数据所有权

数据安全数据标准分元数据得分流程化得分在中电财数据架构优化的实施过程中各个环节的数据质量控制设计。3535中电财数据架构优化的元数据管理：采用专业

ETL

工具

(Informatica),

通过参数配置调整快速应对元数据的变化

Informat

ica的知

识库管理

以图形化、

参数化等

直观方式，

实现快速

优化调整，

应对元数

据结构发

生变化。36中电财数据架构优化项目的应用框架对

IT

技术基础设施的关键需求中电财数据架构优化的总体设计框架介绍–

数据架构优化的设计概述–

数据架构优化的总体方案设计–