商业银行BI架构体系NEW

1、广州中软信息技术有限公司广州中软信息技术有限公司 1 主主 题题 l BI架构概述架构概述 l 商业银行商业银行BI架构体系架构体系 l 专题架构介绍专题架构介绍 l Q&A 广州中软信息技术有限公司广州中软信息技术有限公司 2 BI架构概述架构概述 l BI概述概述 l 商业银行商业银行IT概述概述 广州中软信息技术有限公司广州中软信息技术有限公司 早期早期BI产生的背景产生的背景 商业智能的发展也得益于相关技术的发展，并行处理系统、廉价数据存储、新数据挖掘算法、商业智能的发展也得益于相关技术的发展，并行处理系统、廉价数据存储、新数据挖掘算法、 神经网络技术、人工智能技术、决策支持技术、从大

2、量数据中发现其后潜藏的商业机会等等神经网络技术、人工智能技术、决策支持技术、从大量数据中发现其后潜藏的商业机会等等 技术的发展，使企业能以更低的成本投资商业智能，并取得更高的技术的发展，使企业能以更低的成本投资商业智能，并取得更高的IT 投资回报率。投资回报率。 广州中软信息技术有限公司广州中软信息技术有限公司 4 商业智能的基本概念商业智能的基本概念 BI(Business Intelligence， 商业智能商业智能) 。1989 年由年由Gartner Group 的的 Howard Dresner 首次提出来。首次提出来。 BI是将数据转换成知识并将知识应用到商业行为上的一个过程是将数

3、据转换成知识并将知识应用到商业行为上的一个过程 DataWarehouse Institute BI是将数据转换成信息的过程，是将数据转换成信息的过程， 然后通过发现将信息转化为知识然后通过发现将信息转化为知识 Gartner Group 广州中软信息技术有限公司广州中软信息技术有限公司 5 BI相关概念：相关概念：OLTP与与OLAP的区别的区别 OLTPOLAP 广州中软信息技术有限公司广州中软信息技术有限公司 BI系统的数据流向系统的数据流向 广州中软信息技术有限公司广州中软信息技术有限公司 7 数据仓库技术的发展趋势数据仓库技术的发展趋势 广州中软信息技术有限公司广州中软信息技术有限公

4、司 8 BI架构概述架构概述 l BI概述概述 l 商业银行商业银行IT概述概述 广州中软信息技术有限公司广州中软信息技术有限公司 9 商业银行商业银行IT系统总体架构系统总体架构 广州中软信息技术有限公司广州中软信息技术有限公司 10 核心业务系统核心业务系统架构架构 广州中软信息技术有限公司广州中软信息技术有限公司 11 国际结算系统国际结算系统架构架构 广州中软信息技术有限公司广州中软信息技术有限公司 12 网上银行网上银行架构架构 广州中软信息技术有限公司广州中软信息技术有限公司 13 BI建设的常见工具产品组合建设的常见工具产品组合 系统建设系统建设 数据模型数据模型 ODS数据模型

5、（基础数据层、公共汇总层）数据模型（基础数据层、公共汇总层） EDW数据模型（基础数据层、公共汇总层）数据模型（基础数据层、公共汇总层） KPIs模型模型 集市模型（集市模型（CRM、ALM、RPT） 数据加工数据加工 加工工具：加工工具：DataStage,Informatica,SP,Por*C,Shell,Perl 算法模型：贡献度模型，算法模型：贡献度模型，EVA模型，客户积分模型，客户识别模型模型，客户积分模型，客户识别模型 规则引擎：规则引擎： 应用展示应用展示 BI工具：工具：Cognos、BI.Office、Brio、BO Web Server：Websphere、WebLog

6、ic Port LDAP 广州中软信息技术有限公司广州中软信息技术有限公司 14 主主 题题 l BI架构概述架构概述 l 商业银行商业银行BI架构体系架构体系 l 专题架构介绍专题架构介绍 l Q&A 广州中软信息技术有限公司广州中软信息技术有限公司 15 商业银行商业银行BI架构体系架构体系 l 架构体系理论架构体系理论 l 架构设计方法架构设计方法 l 商业银行商业银行BI架构架构 l 架构的评估架构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 16 为什么需要架构？为什么需要架构？ 广州中软信息技术有限公司广州中软信息技术有限公司 17 企业架构的用途企业架构的用途 广州中

7、软信息技术有限公司广州中软信息技术有限公司 18 数据架构不当导致的高成本数据架构不当导致的高成本 广州中软信息技术有限公司广州中软信息技术有限公司 IT系统的架构模块系统的架构模块 Business 广州中软信息技术有限公司广州中软信息技术有限公司 20 业务架构原则业务架构原则 展示业务自动化、辅助决策支持的功能结构及相关实务场景。展示业务自动化、辅助决策支持的功能结构及相关实务场景。 配合商业银行的业务发展策略配合商业银行的业务发展策略 充分利用商业银行的最佳实践充分利用商业银行的最佳实践 开发多元化金融产品开发多元化金融产品 ，如发展经纪市场，如发展经纪市场 以产品组合大力推广个人金融

8、业务以产品组合大力推广个人金融业务 依托高科技提供网上银行增值服务依托高科技提供网上银行增值服务 在投资银行领域争取主动在投资银行领域争取主动 为中小企业提供金融服务为中小企业提供金融服务 拓展高收益的资本运营市场拓展高收益的资本运营市场 广州中软信息技术有限公司广州中软信息技术有限公司 21 应用架构原则应用架构原则 侧重于对业务支持的实现方法及功能模块的原则、关系描述。侧重于对业务支持的实现方法及功能模块的原则、关系描述。 可用性可用性 可扩展性可扩展性 可管理性可管理性 易用性易用性 安全性安全性 可重用性可重用性 风险可控性风险可控性 广州中软信息技术有限公司广州中软信息技术有限公司

9、22 数据架构原则数据架构原则 侧重于数据的采集、处理、输入、输出、管理，以及数据的流向、关系、分布等侧重于数据的采集、处理、输入、输出、管理，以及数据的流向、关系、分布等 数据共享使用数据共享使用 避免数据冗余和数据复制避免数据冗余和数据复制 可扩展性可扩展性 数据处理集中化数据处理集中化 可用性可用性 广州中软信息技术有限公司广州中软信息技术有限公司 23 数据架构面临的问题与挑战数据架构面临的问题与挑战 广州中软信息技术有限公司广州中软信息技术有限公司 24 数据架构形态数据架构形态 广州中软信息技术有限公司广州中软信息技术有限公司 25 各种数据架构的优缺点各种数据架构的优缺点 各数据

10、架构的比较各数据架构的比较 广州中软信息技术有限公司广州中软信息技术有限公司 26 数据架构布局中需要考虑的数据架构布局中需要考虑的7 7个方面个方面 广州中软信息技术有限公司广州中软信息技术有限公司 27 技术架构原则技术架构原则 描述基础技术环境、软硬件环境、网络环境、产品、工具、接口协议等描述基础技术环境、软硬件环境、网络环境、产品、工具、接口协议等 基础架构基础架构 产品选择、技术组件选择、技术标准（开发平台、工具、软件、硬件、操作系统、数据库产品选择、技术组件选择、技术标准（开发平台、工具、软件、硬件、操作系统、数据库 ） 接口服务接口服务 接口标准、内部接口、外部接口接口标准、内部

11、接口、外部接口 可集成性可集成性 网络环境网络环境 网络资源、高可靠性（数量、性能、容量和链路带宽网络资源、高可靠性（数量、性能、容量和链路带宽 ）、）、 可用性、可扩展性可用性、可扩展性 、安全性、安全性 、可管理性、可管理性 、高效性、高效性 、有效性、有效性 、工业标准、工业标准 系统管理系统管理 系统性能需求、容量统一监测系统性能需求、容量统一监测 软件升级和分发软件升级和分发 统一系统操作统一系统操作 问题管理问题管理 、变更管理、变更管理 、可用性管理、可用性管理 广州中软信息技术有限公司广州中软信息技术有限公司 28 与原有架构的整合与原有架构的整合 门户整合门户整合 统一身份管

12、理统一身份管理 统一访问入口统一访问入口 统一界面风格统一界面风格 内容管理内容管理 -实现内容的创实现内容的创 建，发布，审批，发布，搜建，发布，审批，发布，搜 索，个性化索，个性化 协同工作协同工作 -如内部论坛、日如内部论坛、日 程表、工作任务、网上会议、程表、工作任务、网上会议、 即时通讯等，让用户方便沟即时通讯等，让用户方便沟 通和办公通和办公 前端整合前端整合 应用整合应用整合 数据整合数据整合 广州中软信息技术有限公司广州中软信息技术有限公司 29 商业银行商业银行BI架构体系架构体系 架构体系理论架构体系理论 架构设计方法架构设计方法 商业银行商业银行BI架构架构 架构的评估架

13、构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 30 架构设计方法概述架构设计方法概述 广州中软信息技术有限公司广州中软信息技术有限公司 31 架构设计流程架构设计流程 广州中软信息技术有限公司广州中软信息技术有限公司 32 最佳实践最佳实践= = 企业自身环境和需求企业自身环境和需求 + + 业界指导原则业界指导原则 广州中软信息技术有限公司广州中软信息技术有限公司 数据架构的基本要素数据架构的基本要素 广州中软信息技术有限公司广州中软信息技术有限公司 34 商业银行商业银行BI架构体系架构体系 l 架构体系理论架构体系理论 l 架构设计方法架构设计方法 l 商业银行商业银行BI

14、架构架构 l 架构的评估架构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 35 通用商业银行结构体系通用商业银行结构体系 广州中软信息技术有限公司广州中软信息技术有限公司 36 商业银行架构层次解决方案商业银行架构层次解决方案 广州中软信息技术有限公司广州中软信息技术有限公司 以以EDW为为EDC模式模式 广州中软信息技术有限公司广州中软信息技术有限公司 38 Query Alyt.App. 外部监管供数服务外部监管供数服务 企业级统一运营管理企业级统一运营管理 数据线整体规划（数据线整体规划（ODS&EDW） 广州中软信息技术有限公司广州中软信息技术有限公司 39 数据线应用架构

15、数据线应用架构 广州中软信息技术有限公司广州中软信息技术有限公司 40 物理架构解决方案物理架构解决方案 . 数据存储区数据存储区 应用服务区应用服务区 系统管理区系统管理区 前端服务器前端服务器 系统管理工作站系统管理工作站数据备份设备数据备份设备 业务人员业务人员管理人员管理人员 中心交换机中心交换机 路由器路由器&防火墙防火墙 Si Intranet/Internet 分支机构用户分支机构用户 ETL过程过程 业务主机业务主机 总部用户总部用户 业务人员业务人员管理人员管理人员 磁盘阵列磁盘阵列 ETL服务器服务器数据平台服务器数据平台服务器 BI前端服务器前端服务器 广州中软信息技术有

16、限公司广州中软信息技术有限公司 41 商业银行商业银行BI架构体系架构体系 l 架构体系理论架构体系理论 l 架构设计方法架构设计方法 l 商业银行商业银行BI架构架构 l 架构的评估架构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 42 架构的成熟度架构的成熟度 广州中软信息技术有限公司广州中软信息技术有限公司 43 一步一步的提高架构的成熟度一步一步的提高架构的成熟度 理解企业理解企业IT的现状的现状 展望企业展望企业IT的的3-5年远景年远景 找到适合自己的找到适合自己的IT发展路线图发展路线图 从局部应用到技术标准化从局部应用到技术标准化 优化技术选择，提高效率。优化技术选

17、择，提高效率。 优先共享基础设施类服务。优先共享基础设施类服务。 标准化管理，管理例外。标准化管理，管理例外。 IT用来于降低成本，提高互操作性。用来于降低成本，提高互操作性。 IT领导与业务领导共同做应用系统的决定。领导与业务领导共同做应用系统的决定。 治理的关键是建立企业各层的标准，及投资的方式。治理的关键是建立企业各层的标准，及投资的方式。 从技术标准化到数据合理化从技术标准化到数据合理化 通过数据或流程的标准化来提高企业内部的规范。通过数据或流程的标准化来提高企业内部的规范。 优先企业级的应用系统。优先企业级的应用系统。 定义重要的流程及衡量标准。定义重要的流程及衡量标准。 IT用来提

18、高业务流程的质量。用来提高业务流程的质量。 企业高官与流程领导共同做应用系统的决定。企业高官与流程领导共同做应用系统的决定。 治理的关键是达成项目与架构目的的协调。治理的关键是达成项目与架构目的的协调。 广州中软信息技术有限公司广州中软信息技术有限公司 44 数据集市，内建还是外建？数据集市，内建还是外建？ 广州中软信息技术有限公司广州中软信息技术有限公司 45 主主 题题 l BI架构概述架构概述 l 商业银行商业银行BI架构体系架构体系 l 专题架构介绍专题架构介绍 l Q&A 广州中软信息技术有限公司广州中软信息技术有限公司 46 专题架构介绍专题架构介绍 l EDC（ODS） l 数据

19、治理数据治理 广州中软信息技术有限公司广州中软信息技术有限公司 47 LFT - ODS&报表系统逻辑架构报表系统逻辑架构 广州中软信息技术有限公司广州中软信息技术有限公司 48 LFT - ODS&报表系统数据架构报表系统数据架构 广州中软信息技术有限公司广州中软信息技术有限公司 49 LFT - ODS&报表系统技术架构报表系统技术架构 广州中软信息技术有限公司广州中软信息技术有限公司 50 LFT - ODS&报表系统物理架构报表系统物理架构 广州中软信息技术有限公司广州中软信息技术有限公司 51 专题架构介绍专题架构介绍 l EDC（ODS） l 数据治理数据治理 广州中软信息技术有限

20、公司广州中软信息技术有限公司 数据治理平台规划数据治理平台规划 数数 据据 质质 量量 管管 理理 52 数数 据据 标标 准准 管管 理理 广州中软信息技术有限公司广州中软信息技术有限公司 53 数据标准逻辑架构数据标准逻辑架构 广州中软信息技术有限公司广州中软信息技术有限公司 54 数据质量逻辑架构数据质量逻辑架构 广州中软信息技术有限公司广州中软信息技术有限公司 管理数据定义管理数据定义 技术定义技术定义 转换规则转换规则 域值域值 实体关系实体关系 数据拥有者数据拥有者 确认规则确认规则 数据保留原则数据保留原则 更新频率更新频率 数据映射数据映射 容错阈值容错阈值 业务实体和属性定义

21、业务实体和属性定义 业务规则业务规则 业务主题业务主题 数据统计值数据统计值 质量指标质量指标 任务执行日志任务执行日志 例外日志例外日志 数据访问规则和管理数据访问规则和管理 应用支持、维护应用支持、维护 影响分析影响分析 ETL工具内的任务描述工具内的任务描述 ETL任务的相互依赖任务的相互依赖 ETL调度调度 ETL执行日志执行日志 元数据报表、分析元数据报表、分析数据质量管理数据质量管理 安全管理安全管理 55 元数据存储元数据存储 技术元数据技术元数据业务元数据业务元数据 ( 操作型元数据操作型元数据 ETL工具内的任务描述工具内的任务描述 ETL任务的相互依赖任务的相互依赖 ETL

22、调度调度 ETL执行日志执行日志 ETL 统计统计 (如：纪录数、数据处理时间如：纪录数、数据处理时间) 新增新增/更改定义更改定义 输入定义输入定义 ETL/EAI 转换规则转换规则 变更需求变更需求 影响对象影响对象: 表表, 属性属性, 映射关系映射关系, 查查 询及数据拥有人询及数据拥有人 源数据系统源数据系统 (主机系统主机系统, 关系型关系型 数据库数据库, 其他系统其他系统) ETL工具工具 (Informatica等等) 数据建模工具数据建模工具 (如如ERWin） 报表报表 需求需求 元数据工具元数据工具 (如如CA Repository/ ASG Rochade, Pine

23、 Cone) 访问权访问权 限变更限变更 需求需求 完成访问完成访问 权限变更权限变更 BI工具工具 （如（如Cognos） 数据挖掘工具数据挖掘工具 （如（如SAS） 应用软件应用软件 （如（如KRM） 元数据管理逻辑架构元数据管理逻辑架构 技术元数据用户技术元数据用户 (数据库管理员，数据库管理员，ETL开发人员，开发人员， 数据模型开发人员数据模型开发人员) 业务用户业务用户 运维人员运维人员 (数据仓库管理人员、元数据仓库管理人员、元 数据管理人员数据管理人员) 数据查询定义数据查询定义 数据查询结果数据查询结果 调度、执行规则调度、执行规则 ETL/EAI 执行跟踪执行跟踪 数据移动

24、状态、错误处理数据移动状态、错误处理 广州中软信息技术有限公司广州中软信息技术有限公司 56 广州中软信息技术有限公司广州中软信息技术有限公司 9 商业银行商业银行IT系统总体架构系统总体架构 广州中软信息技术有限公司广州中软信息技术有限公司 15 商业银行商业银行BI架构体系架构体系 l 架构体系理论架构体系理论 l 架构设计方法架构设计方法 l 商业银行商业银行BI架构架构 l 架构的评估架构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 17 企业架构的用途企业架构的用途 广州中软信息技术有限公司广州中软信息技术有限公司 30 架构设计方法概述架构设计方法概述 广州中软信息技术有限公司广州中软信息技术有限公司 34 商业银行商业银行BI架构体系架构体系 l 架构体系理论架构体系理论 l 架构设计方法架构设计方法 l 商业银行商业银行BI架构架构 l 架构的评估架构的评估 广州中软信息技术有限公司广州中软信息技术有限公司 40 物理架构解决方案物理架构解决方案 . 数据存储区数据存储区 应用服务区应用服务区 系统管