CN113392158B 业务数据处理方法、装置及数据中台 (中国工商银行股份有限公司)_第1页
CN113392158B 业务数据处理方法、装置及数据中台 (中国工商银行股份有限公司)_第2页
CN113392158B 业务数据处理方法、装置及数据中台 (中国工商银行股份有限公司)_第3页
CN113392158B 业务数据处理方法、装置及数据中台 (中国工商银行股份有限公司)_第4页
CN113392158B 业务数据处理方法、装置及数据中台 (中国工商银行股份有限公司)_第5页
已阅读5页,还剩34页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

对应的目标数据加工规则和至少一种类型的目标数据加工规则对各个所述目标业务领域分别请能够有效提高查询或调取分布式数据库中数2将各个业务系统各自对应的业务数据存储至分布式系统中预设对所述数据湖中的业务数据进行数据加工处理,以得到各个业务领将各个所述业务领域主题表分别存储至所述分布式系统中预设的数务领域主题表用于存储各个业务数据分别对应的聚合主键和各个用于作为业务领域的属述统一指标库用于存储各个指标与各个业务领域之间的一对一或一对多的对应获取针对分布式系统的目标数据调取请求对应的目标数据加工规则和至少一种类型基于所述目标数据加工规则对各个所述目标业务领域分别对应的业务数据进行数据所述获取针对分布式系统的目标数据调取请求对应的目标数据加者基于预设的加工关键字识别方式自所述目标数据调取请求对应的请求内容识别得到加基于业务对象应用接收业务前台发送的针对分布式系统的目标获取所述目标数据调取请求对应的目标数据加工分布式系统中预设的统一指标库中获取该目标指标对应的至少一个自所述分布式系统中预设的数据仓库的各个业务领域主题表中查找是否包含有各个若所述数据仓库中未包含有各个所述目标业务领域分别对应的业务布式系统中预设的数据湖提取各个所述目标业务领域分别对应其中,所述数据仓库中的各个所述业务领域主题表预先请求读取模块,用于获取针对分布式系统的目标数据调取请数据提取模块,用于自所述分布式系统中提取各个所述目3数据加工模块,用于基于所述目标数据加工规则对各个所述将各个业务系统各自对应的业务数据存储至所述分布式系统中预设对所述数据湖中的业务数据进行数据加工处理,以得到各个业务领将各个所述业务领域主题表分别存储至所述分布式系统中预设的数务领域主题表用于存储各个业务数据分别对应的聚合主键和各个用于作为业务领域的属述统一指标库用于存储各个指标与各个业务领域之间的一对一或一对多的对应者基于预设的加工关键字识别方式自所述目标数据调取请求对应的请求内容识别得到加所述业务对象应用层包括各个类型的业务对象应用,该业务对象应用层用于述贴源数据加载层提取各个所述目标业务领域分别对应的所述贴源数据加载层包括:数据湖,该数据湖用于加载并存储各个业所述数据指标加工层包括:数据仓库和统一指标库;所述数据仓指标与各个业务领域之间的一对一或一对多的所述价值变现服务层包括:各个类型的业务前台,且每个业务前台分7.一种电子设备,包括存储器、处理器及理器执行时实现权利要求1至4任一项所述的业务数据机程序被处理器执行时实现权利要求1至4任一项所述的业务数4[0007]获取针对分布式系统的目标数据调取请求对应的目标数据加工规则和至少一种[0009]基于所述目标数据加工规则对各个所述目标业务领域分别对应的业务数据进行所述分布式系统中预设的统一指标库中获取该目标指标对应的至少一个所述目标业务领5[0015]自所述分布式系统中预设的数据仓库的各个业务领域主题表中查找是否包含有述分布式系统中预设的数据湖提取各个所述目标业务领域分别对应的[0024]所述统一指标库用于存储各个指标与各个业务领域之间的一对一或一对多的对各个指标与各个业务领域之间的一对一或一对多的对应6在处理器上运行的计算机程序,所述处理器执行所述程序时实现所述的业务数据处理方型的目标业务领域;自所述分布式系统中提取各个所述目标业务领域分别对应的业务数7[0049]基于上述内容,本申请的一个实施例中考虑构建一种商业银行体系下的数据中[0050]在本申请的一个或多个实施例中提及的数据中台是通过沉淀业务间具有共性的[0052]在本申请的一个或多个实施例中,分布式系统可以指大数据服务云或HBase集群储系统,由主节点Master和从节点RegionServer组成,其中,Master也可以专门写作8RPC协议(RemoteProcedureCallProtocol,远程过程调用协议)、REST协议[0059]步骤100:获取针对分布式系统的目标数据调取请求对应的目标数据加工规则和[0060]在步骤100中,获取针对分布式系统的目标数据调取请求对应的目标数据加工规则的具体方式可以为自所述目标数据调取请求对应的请求内容中直接读取其指定的目标[0061]在步骤100中,获取针对分布式系统的目标数据调取请求对应的至少一种类型的目标业务领域的方式可以为基于预设的业务领域关键字识别方式自所述目标数据调取请9存储的统一指标库中查找该指标关键字对应的至少一个目[0062]例如,若所述目标数据调取请求对应的请求内容为请求[0064]步骤300:基于所述目标数据加工规则对各个所述目标业务领域分别对应的业务[0067]步骤110:基于业务对象应用接收业务前台发送的针对分布式系统的目标数据调则自所述分布式系统中预设的统一指标库中获取该目标指标对应的至少一个所述目标业[0074]步骤210:自所述分布式系统中预设的数据仓库的各个业务领域主题表中查找是[0078]若未在各个业务领域主题表中查找到包含有各个所述目标业务领域分别对应的[0081]步骤010:将各个业务系统各自对应的业务数据存储至所述分布式系统中预设的[0083]步骤030:将各个所述业务领域主题表分别存储至所述分布式系统中预设的数据[0085]为了为自所述分布式系统中提取各个所述目标业务领域分别对应的业务数据的述业务领域主题表用于存储各个业务数据分别对应的聚合主键和各个用于作为业务领域息;所述统一指标库用于存储各个指标与各个业务领域之间的一对一或一对多的对应关加工规则的具体方式可以为自所述目标数据调取请求对应的请求内容中直接读取其指定类型的目标业务领域的方式可以为基于预设的业务领域关键字识别方式自所述目标数据设的指标关键字识别方式自所述目标数据调取请求对应的请求内容识别得到指标关键字,并在预存储的统一指标库中查找该指标关键字对应的至少一个目标业[0091]例如,若所述目标数据调取请求对应的请求内容为请求对应的业务数据进行数据加工处理,以得到所述目标数据调取请求对应的可视化目标数[0094]本申请提供的业务数据处理装置的实施例具体可以用于执行上述实施例中的业[0104]本申请应用实例将商业银行的数据中台架构按照数据处理分析的流转顺序分为[0105]整个中台的数据流转是通过各应用的作业调度(如:数据仓库技术ETL(Extract-……[0132]从上述描述可知,本申请应用实例提供的商业银行体系下的数据中台建设方法,[0136]步骤100:获取针对分布式系统的目标数据调取请求对应的目标数据加工规则和[0137]在步骤100中,获取针对分布式系统的目标数据调取请求对应的目标数据加工规则的具体方式可以为自所述目标数据调取请求对应的请求内容中直接读取其指定的目标[0138]在步骤100中,获取针对分布式系统的目标数据调取请求对应的至少一种类型的目标业务领域的方式可以为基于预设的业务领域关键字识别方式自所述目标数据调取请存储的统一指标库中查找该指标关键字对应的至少一个目标业务[0139]例如,若所述目标数据调取请求对应的请求内容为请求[0141]步骤300:基于所述目标数据加工规则对各个所述目标业务领域分别对应的业务其他处理器装置和/或逻辑装置,该中央处理器9100接收输入并控制电子设备9600的各个[0148]该存储器9140可以是固态存储器,例如,只读存储器(ROM)、随机存取存储器功能存储部9142,该应用/功能存储部9142用于存储应用程序和功能程序或用于通过中央序存储部9144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如[0150]通信模块9110即为经由天线9111发送和接收信号的发送机/接收机9110。通信模[0152]本申请的实施例还提供能够实现上述实施例中的业务数据处理方法中全部步骤序被处理器执行时实现上述实施例中的执行主体为服务器或客户端的业务数据处理方法[0153]步骤100:获取针对分布式系统的目标数据调取请求对应的目标数据加工规则和[0154]在步骤100中,获取针对分布式系统的目标数据调取请求对应的目标数据加工规则的具体方式可以为自所述目标数据调取请求对应的请求内容中直接读取其指定的目标[0155]在步骤100中,获取针对分布式系统的目标数据调取请求对应的至少一种类型的目标业务领域的方式可以为基于预设的业务领域关键字识别方式自所述目标数据调取请存储的统一指标库中查找该指标关键字对应的至少一个目标业务[0156]例如,若所述目标数据调取请求对应的请求内容为请求[0158]步骤300:基于所述目标数据加工规则对各个所述目标业务领域分别对应的业务现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论