智慧银行大数据平台规划设计方案

1、智慧银行大数据平台规划设计方案一、数据治理架构分为三个层次，分别为战略与治理保障、 大数据管理和 大 数据应用与效劳， 其中战略与治理保障包括， 数据战略规划与 评估， 数据治理组织与职责、数据制度与管理流程；大数据管理 包括数据标 准管理、架构与模型管理、质量管理、生存周期管理 以及平安管理； 大数据应用与效劳包括，数据分析、开放共享以 及数据效劳。该架构 依照国标数据管理能力成熟度模型设计。二、数据质量问题的发现与整治过程过程共分为三个阶段：源业务系统数据分析、制定质检 规 那么并分析源系统数据，分析质量问题影响并制定整改措施。源业务系统数据分析阶段的分析素材： 源系统操作手 册、 需求分

2、析说明、数据库设计、源系统数据；分析过程：分析业务流程、逻辑和关系，确定数据 库表 间和字段间关系，同时分析与该源业务系统存在关联关系的 其它系统 间的业务关联关系和数据关联关系； 输出成果： 数据库结构 主外键、 约束、表间关系、字段长度与 类型等、业务描述表及字段 的业 务含义、业务规那么。数据质量检查阶段的输入：分析阶段的输出成果以及业务报表 ;过程：编制质检规那么，并以其为核心，设计质检程序或脚本执行自动化、批量化检查。过程中对重点业务报表引用的数据 表进行重点分析；输出：质量问题清单及问题定位。数据质量分析阶段的输入：分析阶段和检查阶段的输出成果；过程：分析质量问题对报表的影响，即影

3、响分析；成因分析；制定解决方案；输出：分析报告及整改方案。数据质量分析报告将是后续大数据治理平台的重要建设依据。三、数据标准建设过程建设根底数据标准和指标数据标准框架；确定标准化范围，对重要指标属性进行标准化。建设过程：该过程需要业务人员和技术人员共同参与梳理和编制，补充完善标准化方案。mm映吋u 曲 wmtKISSW分析标淄魏18映时UliEifjj分析ms标总发布桝甘|111I rI业肴宦义.业劳耀那么*业勇鲁义？ itBOS可参考人民银行数据标准规根底数据标准框架的内谷:范，进行划分，包括业务属性、技术属性和管理属性三大类，业务属性包括标准主题、 标准大类、 标准子类、 标准小类、 标准

4、中 文名、标准英文名、业务定义、业务规那么、融合规那么、叔都是服 我、与相关 标准关系、标准来源及依据；技术属性包括数据类型、数据格式、代码编码规那么、取值范围；管理属性包括标准定义者、 标准管理者、标 准使用者、反应结果描述、标准应用领域和使用 系统；指标标准建设：筛选重要业务指标=> 制定指标标准框架确定指标分类体系、属性形成标准化定义模板=> 制定指标标 准指标定义、口径、规那么、数据来源，技术部门定义标准化属 性，业 务部门修订和确认指标标准 指标数据标准框架：业务属性、技术属性和管理属性。四、建设数据平台层次关系：属性字段 => 实体对象，表 => 专题实 体

5、集合，业务专题 =>主题专题集合、业务域 。模型演进过程： 根底模型 =>逻辑模型 =>物理模型。 根底 模 型的形成，需要依据国家或行业标准， 结合具体实施单位的业 务情 况进行裁剪， 通过保存、 增加和合并的业务匹配过程， 形成 根底模型， 划分业务主题模型框架；在进行逻辑模型设计过程中， 需要复制系 统间业务含义和字段名称均不相同的字段、整合含义相同名称不同的字段 和拆分含义不同名称相同的字 段； 之后进行属性匹配，保存、增加、合并、拆分和映射源系 统到根底模 型中主题、实体和属性。完成模型设计之后， 进行数据映射和 ETL 操作，将源表 数据， 参照映射文件、开发标准和加载策略，进行 ETL 开发和操 作，将数据 填充至目标表中；通过以上操作，完成整合层建设，整合层的对数据应用 的 意义：统一的业务视图、 明细的数据、 全面的