版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
企业IT架构治理规划技术创新,变革未来企业IT架构治理规划技术创新,变革未来1目录架构概览总体架构应用架构数据架构技术架构目录架构概览2架构是什么架构是业务与IT对应的工具,是业务人员与技术人员沟通和理解的桥梁。架构是对实现组织业务及战略目标的整体梳理和规划。软件架构平台架构企业组织规则?约定?架构在大家头脑是什么样子?千人千样架构是什么架构是业务与IT对应的工具,是业务人员与技术人员沟3架构规划带来的价值提升IT投资回报比规避IT项目建设风险具有整体的适用于业务的技术战略架构图形成标准的流程和IT建设规范实现整体信息和数据共享架构规划带来的价值提升IT投资回报比规避IT项目建设风险具有4传统架构
—
以IT为主,极少涉及业务Tomcat数据库层服务器层应用层网络层接入层WeblogicWebSphere……交换机路由器防火墙负载均衡PC移动设备电话接入……传统架构—以IT为主,极少涉及业务Tomcat数据库层服5传统架构面临的新挑战业务变化快灵活度不高无法快速部署系统间耦合度高IT标准缺乏缺乏对业务整体支持的规划传统架构面临的新挑战业务变化快6出路在哪里?出路在哪里?7架构方法论TOGAF国际标准权威组织TheOpenGroup制定的架构框架。FEAF美国联邦政府制订的电子政务顶层设计。ZachmanZachman提出的独立于企业所使用的工具的平台框架。DoDAF美国国防部提出的控制架构开发、维护和决策生成的组织机制。CBMIBM开发的一套组件商业模型。架构方法论TOGAF国际标准权威组织TheOpen8架构分析方法企业架构分析方法业务需求分析应用需求分析技术需求分析数据需求分析管控需求分析功能性需求分析非功能性需求分析架构分析方法企业架构分析方法业务需求分析应用需求分析9架构概览企业战略业务架构应用架构技术架构数据架构业务流程应用系统数据信息基础平台软件架构系统架构架构概览业务架构应用架构数据架构软件架构系统架构10目录架构概览总体架构应用架构数据架构技术架构目录架构概览11从业务需求出发,设计相应的功能模型,并在此基础上进行应用系统的划分,并进行场景验证和应用系统定义,形成应用蓝图。功能模型(定义是什么)分层模型(定义如何实现)进一步抽象场景验证应用系统定义应用系统蓝图应用架构设计业务需求功能模型设计系统划分场景验证应用系统定义从业务需求出发,设计相应的功能模型,并在此基础上进行应用系统12从数据特性出发,进行数据分类和模型化,根据操作要求设计数据目标架构,同时关注数据流转,以及管控要求。数据特性数据分类数据模型目标架构场景验证数据流转数据治理数据特性数据分类数据建模形成目标架构场景验证数据流转数据管控数据架构设计从数据特性出发,进行数据分类和模型化,根据操作要求设计数据目13从应用架构和数据架构出发,识别技术组件,在此基础上识别部署单元,设计逻辑部署与物理部署,同时关注基础设施规划与安全架构设计技术组件识别位置、区域和参与人模型部署单元软件基础设施逻辑部署模型(部署节点)安全架构关键技术路线技术架构设计技术组件识别部署单元逻辑部署物理部署应用架构数据架构基础设施安全架构从应用架构和数据架构出发,识别技术组件,在此基础上识别部署单14目录架构概览总体架构应用架构数据架构技术架构目录架构概览15目标应用架构来自业务架构的导入,实现对业务架构的支撑,从业务架构出发,梳理功能模型,形成未来的应用组件模型业务战略构成果组件业务模型业务能力Co应st
用ob分je组cts未来功能模型应用分层高阶需求业务架构应
用架构业务功能角度应用实现角度应用架构设计目标应用架构来自业务架构的导入,实现对业务架构的支撑,从业16组件识别,保证功能组件的完整性和唯一性功能组件识别的重点着重“是什么(what)”,而不是“怎么做(how)”当两个组件功能重叠或近似时,要细分或者合并,确保没有重叠每个功能要创造价值,并有重要的产出,去掉无价值的活动从业务组件模型出发,检查功能组件覆盖度,确保功能组件覆盖所有热点业务组件业务组件模型功能组件模型需求验证组件识别,保证功能组件的完整性和唯一性功能组件识别的重点需求17应用架构分层术语描述及举例应用分层应用架构的最高分类应用组第0层第1层有密切关连的一个或几个应用的逻辑组合应用组件第2层用来搭建一个应用的业务功能组合良好的分层结构是实现松耦合的关键,以便系统易于维护和扩展应用架构分层术语描述及举例应用分层应用架构的最高分类应用组第18应用架构与子系统对应关系管理分析层渠道接入层交互控制层业务处理层运营支撑层业务网渠道报送客户端报送接口在线采集第三方采集接口服务接口在线服务第三方服务接口沟通工具联网渠道在线采集第三方服务接口
沟通工具 网络爬虫终端呼叫中心数据接收反馈数据接收 信息反馈报数机构登 报数机构绩客户服务信息咨询数据报送支持持异议处理产品服务支服务协议服务目录管理数据更正产品服务报送机构服管务理对象管理记数据准备产品加工数据校验个人身份整合理数据质量管理计费管理调度监控业务规则配置参数代码配置运营支持业务配置数据质量检 数据质量分测 析数据质量档案管理数据
报送机构统计分析服务对象统计分析数据采集情况统计分析数据质量问题跟踪数据查询类产品加工产品加工管 产品目录管理统计分析类产品加工数据挖掘类产品加工报文文件管理企业身份信 信用主体关
息整合 联关系计算
信服务信服务政府/监管代理机构服
部门服务 务 管理贷款卡管理计子分析产品加系工情况统对外服统务情况统数据管控情况统计分析系统运行情况统计分析计1分0析持子系统外6呼服务支子系统7子系统9子系统8数据管控
子系统日1志1管理授信机子构征系统信3用主体征服务对子象登系统5机构信子用码系统2记子系统4效考评业务服网务客门户端户互互联第网三方服采务集接平口台在1线服务子系Call统cen1ter移互动联网服手机务服务平台短2信服务应用架构与子系统对应关系管理分析层渠道接入层交互控制层业务处19应用架构蓝图数据采集互联网服务平台数据查询接口其它第三方系统运营支撑层业务网门户数据报送接口对外数据交换平台对内数据总线(含抽取、清洗、转换、加载)管理分析数据质量管理客户服务(呼叫中心)调度监控业务配置数据管控计费管理内容管理平台数据仓库渠道接入层集成及服务层管理分析层统一用户服务交互控制层业务处理层个人报告个人评分重要信息提示统计分析类产品信贷组合分析行业历史违约率……数据查询类产品产品加工数据挖掘类产品…………数据准备数据校验个人身份信息整合企业身份信息整合主体关联关系计算主体服务服务交付授信机构征信服务个人业务 企业业务小微企业业务企业报告企业评分小微企业报告日志管理报文接收信息反馈在线录入机构码贷款卡管理报送机构管理数据更正报文文件管理定制产品加工特征变量征信业务报表个人服务 企业服务政府/监管部门服务代理机构服务服务对象管理应用架构蓝图数据采集互联网服务平台数据查询接口其它第三方系统20目录架构概览总体架构应用架构数据架构技术架构目录架构概览21数据模型数据模型是根据一定的业务规则,对业务概念或数据进行逻辑化表现。数据模型从大的层级可以分为概念模型、逻辑模型和物理模型。CustomerDataProductDataAccountDataTransactionData概念模型概念模型是从业务角度对业务的抽象描述逻辑模型逻辑模型是对概念模型的逻辑化,遵循第三范式物理模型物理模型是对逻辑模型的物理化,可以不遵循第三范式数据模型数据模型是根据一定的业务规则,对业务概念或数据进行逻22数据需求数据分类数据实体根据数据内容抽象出数据分类,确定数据分类属性内容业务人员描述所需的数据内容根据分类,抽取出数据实体,用ER图描述其关系数据库表将数据实体物化为数据库表,供系统使用CustomerDataProductDataAccountDataTransactionData业务人员技术人员良好的数据分类可以促进沟通数据需求数据分类数据实体根据数据内容抽象出数据分类,确定数23基础数据库通过标注、文本挖掘等技术,建立非结构化数据的元数据,并与结构化数据整合,供分析使用c. 建立对非结构化数据进行SQL语法查询的支持,实现与结构化数据的集成关联非结构化数据数据获取结构化数据分析应用a. 建立非结构化信息的标签、摘要、索引、日志、内容等b.
提取结构化的元数据信息,如类别、标引、摘要等;实现与结构化数据的整合非结构化数据结构化内容数据仓库数据挖掘产品集市基础数据汇总加工管理分析集市研发集市统计分析产品集市结构化与非结构化数据整合基础数据库通过标注、文本挖掘等技术,建立非结构化数据的元数24基础数据库主数据定位为基础信息整合,为其他数据库供数数据批量处理 实时查询主数据信息整合数据应用数据应用仓库应用查询类应用社会公共部门公检法部门信贷机构金融租赁公司资产管理公司小额贷款公司证券公司其他信贷机构……………数据仓库查询类应用库主数据疑似主体识别归并关联关系挖掘分析只包含主体基础信息,不包含业务数据业务主体信息采集源金融相关机构………..身份信息基础数据库主数据定位为基础信息整合,为其他数据库供数数据批量25数据生命周期数据质量元数据数据标准提供标准和规范的管理手段完善标准强化元数据数据管控数据生命周期数据质量元数据数据标准提供标准和规范的管理手26|
11/2/2016数据质量问题分析数据质量稽核引擎数据质量规则管理规则定义规则查询规则更新数据质量问题管理问题登记问题查询问题分发问题跟踪元数据问题统计报告问题测量评分卡问题影响分析数据质量知识管理分类管理内容录入内容查询内容更新数据仓库各问题反馈渠道接口文件样本文件获取数据质量分析清理数据分析数据清理数据补录系统管理权限管理调度管理日志管理接口管理数据标准数据质量管理|11/2/2016数据质量问题分析数据质量规则管理规则27减少数据冗余,提高数据一致性减少存储、硬件、运维等方面基础设施投入提升应用系统性能,提高响应速度满足业务操作和管理分析满足对历史数据查询的管理制度满足审计管理数据创建数据使用数据归档数据销毁数据生命周期重点关注数据生命周期管理减少数据冗余,提高数据一致性满足业务操作和管理分析数据创建数28数据标准管理标准编号标准中文名称标准英文名称标准别名业务定义业务规则相关标准与相关标准关系标准来源业务属性标准定义部门标准使用系统管理属性数据类别数据格式取值范围代码编码规则技术属性数据标准是企业所有系统都应该遵守的数据定义,实现对每个数据项的统一、规范性描述。数据标准包括每个数据项的业务属性、技术属性和管控属性。数据标准统一命名统一编码数据标准管理标准编号业务属性标准定义部门管理属性数据类别技术29元数据管理业务元数据:描述业务领域相关概念、关系和规则的数据。技术元数据:描述系统中技术领域相关概念、关系和规则的数据。管理元数据:管理元数据是描述管理领域相关概念、关系和规则的数据。业务用户架构师基于”可信赖”信息,更有信心使用信息遵循业界规范和标准易于集成易于变更管理
&
重用技术操作业务统一元数据管理数据模型开发人员数据分析师开发人员数据库管理员元数据是描述数据的数据加强部门协作,让IT向业务看齐元数据管理业务元数据:描述业务领域相关概念、关系和规则的数30数据安全数据管控源数据抽取/订阅数据交换数据应用数据加工实时方式/批量方式主数据数据归档内容管理采集抽取基础服务文档管理服务记录管理服务联合服务源数据金融机构政府部门公共事业单位同业互联网…数据架构蓝图数据质量(预处理&入库)公共数据转换数据加载/发布查询类产品加工库数据准备基础数据库非结构化数据数据仓库基础数据汇总加工分析类产品应用管理分析类应用查询类产品应用校验加载库数缓 据冲 加区 载区运行管理统计分析产品集市数据挖掘产品集市管理分析集市研发集市数据安全数据管控源数据抽取/订阅数据交换数据应用数据加工实时31目录架构概览总体架构应用架构数据架构技术架构目录架构概览32应用分层设计数据层...应用层服务和组件界面展现层展现与接入外部用户(门户、移动终端、统一认证管理)
处理流程 集成层流程数据总线
……运营运管营理管等理业务对 品服务加业工务 对外对服外服务务业务产品加工数据采集数据更正其它…….调度监控产品目录质量管理风险管理数据抽取服 服务 务对 渠象 道客户服务服务管理生 研命 发周 执期 行其它……信息整合其它…………
展现层与应用之间的交互尽可能基于服务方式实现数据数采据集采业集务数据数整据合整业合务业务主体信息用户信息产品信息公共信息信息……………信息………应用分层设计数据层...应用层界面展现层展现与接入外部用户33应用集成设计信息交换总线核心总线消息传送、消息路由、协议转换、事件注册流程整合流程编排、
业务规则数据库结构化文件外部应用1外部应用4监控状态、性能非结构化文件外部应用2外部应用3对外集成层数据整合复制策略、批处理、传输机制SOA建模SOA组装SOA部署服务管理将不同的功能模块定义为服务,并定义接口,采用统一的方式进行交互。对内服务、对外服务应用集成设计信息交换总线核心总线流程整合数据库结构化外部应用34部署单元设计展现层应用层数据层展现部署单元执行部署单元数据部署单元关注接入渠道、用户数、访问量、访问时段、用户体验等需求关注接入运行特征、响应时间、部署位置、可处理窗口等需求关注数据类型、生命周期、规模、IO类型、处理方式、重要程度、安全要求、数据活跃度等需求部署单元是逻辑部署架构的最小构成单元;组件按照展现、接口逻辑、应用逻辑、数据存放的区分部署单元部署单元设计展现层应用层数据层展现部署单元执行部署单元数据部35子系统划分现有IT环境规范非功能需求应用架构技术架构规范子系统1组件组件公共组件组件组件组件组件组件组件子系统2组件组件组 组件 件组件组件组件组件组件子系统N组 组件 件组 组件 件组 组件 件组件组件组件图例部署单元技术架构目标需求数据架构子系统划分现有IT环境规范非功能需求应用架构技术架构规范图例36关键技术路线选择应用架构数据架构技术架构IT架构2 大数据技术1 应用开发技术3 云计算技术关键技术路线选择应用架构数据架构技术架构IT架构37J2EE,.NET,C++SQL,Procedure中后端开发技术HTML5、JavaScript、.NET、PHP、Python前端开发技术开发技术选择业务逻辑的实现应用层数据库层系统扩展性系统压力J2EE,.NET,C++中后端开发技术HTML5、Jav38数据库技术选择数据库技术适用场景主要技术代表产品键值型数据库数据以字符串的形式存在,适用于数据的高并发读写,尤其适合实时数据分析场景KVPRiak,Redis分布式数据库为应对海量结构或半结构化数据访问I/O问题,数据跨列存储,方便数据压缩,适合批量数据处理、实时信息交换查询和分析DFS/MapReduceHbase,Cassandra,Spark,Redis图数据库基于节点、关系、属性的图模型,适用于使用点、线、面描述图形关系的设计及存储Node/Relationship/propertyNeo4J,FlockDB文档型数据库海量数据高效率存储和访问,适用于生成大量的报告,报告随着变化能够动态进行内容整合JavaScript/JSONMongoDB、CouchDB对象存储数据库适用于通过对象方式存储数据,提供面向对象语言语法操作数据库Hibernate/JPA/EJBDB4oXML数据库适合半结构化数据以XML格式存储的复杂的数据结构数据集,支持XML查询语法如Xpath,XQuery对象或表格映射BerkeleyDB
XMLBaseX传统数据库以结构化形式存在共享存储存在Oracle、DB2、SQL
Server等数据库技术选择数据库技术适用场景主要技术代表产品键值型数据库39关系型与Nosql数据库整合使用集群调度分布式文件系统GFS分布式锁服务主服务器客户端支撑层Bigtable客户端(library)服务层用户层元数据表子表服务器子表子表子表子表服务器子表子表子表服务器子表子表子表存储存储存储 存储高速网络互联N+1集群存储层管理控制层存储SAN适合批量追加写简单查询操作具有很强的弹性扩展能力极强的分布式处理能力数据弱一致性设计非标准化的接口适合大数据量的弱关联查询非关系型数据库通用设计,但也带来性能的限制弹性扩展能力一般分布式能力一般数据强一致性设计标准的数据访问接口适合关联操作性较强的查询关系型数据库关系型与Nosql数据库整合使用集群调度分布式文件系统G40大数据技术联机交易处理(OLTP)联机分析处理(OLAP)与数据仓库社交媒体数据其他交互数据科学,基因组机器/设备大业务数据大交互数据大数据处理与分析大数据集成与融合呼叫记录、图像、点击流企业消费者供应链社交网络互联网物联网移动终端大交易数据:各种交易数据,包括来自电商的数据,包括B2B、B2C、C2C、团购等大交互数据:来自社交网络的数据,SNS、微博等大数据技术联机交易处理联机分析处理社交媒体数据其他交互数据科41工业标准化流程商务旅行CRM/ERP/HRBusiness
Process-as-a-Service协作财务 行业应用中间件HadoopSoftware/
Application-as-a-ServiceWeb2.0
ApplicationRuntimeJavaRuntime开发工具服务器Platform-as-a-Service网络存储Data
CenterFabric共享的,虚拟化的,动态供给Infrastructure-as-a-Service云计算技术BPaaSSaaSPaaSIaaS工业标准化流程商务旅行CRM/ERP/HRBusiness42DevOPS是一个跨全生命周期的理念,强调自动化,需要以虚拟化为基础。通过持续集成、交付、反馈与优化进行端到端整合,进行跨团队、跨系统协作。DevOPS开发运维测试QA安全DevOPS是一个跨全生命周期的理念,强调自动化,需要以虚拟43总结架构概览总体架构应用架构数据架构技术架构总结架构概览44总结何谓架构创新:不断的变化和扩展的业务形态,在一段时期内要有与之适应的可落地架构存在,业务与技术高度融合。新技术的更迭在一段时期内对整体架构影响甚微。架构是一项整体工程,而非仅仅是IT部门的工作,是一项长期工作,能够带来长远利益工作。总结何谓架构创新:45企业IT架构治理规划技术创新,变革未来企业IT架构治理规划技术创新,变革未来46目录架构概览总体架构应用架构数据架构技术架构目录架构概览47架构是什么架构是业务与IT对应的工具,是业务人员与技术人员沟通和理解的桥梁。架构是对实现组织业务及战略目标的整体梳理和规划。软件架构平台架构企业组织规则?约定?架构在大家头脑是什么样子?千人千样架构是什么架构是业务与IT对应的工具,是业务人员与技术人员沟48架构规划带来的价值提升IT投资回报比规避IT项目建设风险具有整体的适用于业务的技术战略架构图形成标准的流程和IT建设规范实现整体信息和数据共享架构规划带来的价值提升IT投资回报比规避IT项目建设风险具有49传统架构
—
以IT为主,极少涉及业务Tomcat数据库层服务器层应用层网络层接入层WeblogicWebSphere……交换机路由器防火墙负载均衡PC移动设备电话接入……传统架构—以IT为主,极少涉及业务Tomcat数据库层服50传统架构面临的新挑战业务变化快灵活度不高无法快速部署系统间耦合度高IT标准缺乏缺乏对业务整体支持的规划传统架构面临的新挑战业务变化快51出路在哪里?出路在哪里?52架构方法论TOGAF国际标准权威组织TheOpenGroup制定的架构框架。FEAF美国联邦政府制订的电子政务顶层设计。ZachmanZachman提出的独立于企业所使用的工具的平台框架。DoDAF美国国防部提出的控制架构开发、维护和决策生成的组织机制。CBMIBM开发的一套组件商业模型。架构方法论TOGAF国际标准权威组织TheOpen53架构分析方法企业架构分析方法业务需求分析应用需求分析技术需求分析数据需求分析管控需求分析功能性需求分析非功能性需求分析架构分析方法企业架构分析方法业务需求分析应用需求分析54架构概览企业战略业务架构应用架构技术架构数据架构业务流程应用系统数据信息基础平台软件架构系统架构架构概览业务架构应用架构数据架构软件架构系统架构55目录架构概览总体架构应用架构数据架构技术架构目录架构概览56从业务需求出发,设计相应的功能模型,并在此基础上进行应用系统的划分,并进行场景验证和应用系统定义,形成应用蓝图。功能模型(定义是什么)分层模型(定义如何实现)进一步抽象场景验证应用系统定义应用系统蓝图应用架构设计业务需求功能模型设计系统划分场景验证应用系统定义从业务需求出发,设计相应的功能模型,并在此基础上进行应用系统57从数据特性出发,进行数据分类和模型化,根据操作要求设计数据目标架构,同时关注数据流转,以及管控要求。数据特性数据分类数据模型目标架构场景验证数据流转数据治理数据特性数据分类数据建模形成目标架构场景验证数据流转数据管控数据架构设计从数据特性出发,进行数据分类和模型化,根据操作要求设计数据目58从应用架构和数据架构出发,识别技术组件,在此基础上识别部署单元,设计逻辑部署与物理部署,同时关注基础设施规划与安全架构设计技术组件识别位置、区域和参与人模型部署单元软件基础设施逻辑部署模型(部署节点)安全架构关键技术路线技术架构设计技术组件识别部署单元逻辑部署物理部署应用架构数据架构基础设施安全架构从应用架构和数据架构出发,识别技术组件,在此基础上识别部署单59目录架构概览总体架构应用架构数据架构技术架构目录架构概览60目标应用架构来自业务架构的导入,实现对业务架构的支撑,从业务架构出发,梳理功能模型,形成未来的应用组件模型业务战略构成果组件业务模型业务能力Co应st
用ob分je组cts未来功能模型应用分层高阶需求业务架构应
用架构业务功能角度应用实现角度应用架构设计目标应用架构来自业务架构的导入,实现对业务架构的支撑,从业61组件识别,保证功能组件的完整性和唯一性功能组件识别的重点着重“是什么(what)”,而不是“怎么做(how)”当两个组件功能重叠或近似时,要细分或者合并,确保没有重叠每个功能要创造价值,并有重要的产出,去掉无价值的活动从业务组件模型出发,检查功能组件覆盖度,确保功能组件覆盖所有热点业务组件业务组件模型功能组件模型需求验证组件识别,保证功能组件的完整性和唯一性功能组件识别的重点需求62应用架构分层术语描述及举例应用分层应用架构的最高分类应用组第0层第1层有密切关连的一个或几个应用的逻辑组合应用组件第2层用来搭建一个应用的业务功能组合良好的分层结构是实现松耦合的关键,以便系统易于维护和扩展应用架构分层术语描述及举例应用分层应用架构的最高分类应用组第63应用架构与子系统对应关系管理分析层渠道接入层交互控制层业务处理层运营支撑层业务网渠道报送客户端报送接口在线采集第三方采集接口服务接口在线服务第三方服务接口沟通工具联网渠道在线采集第三方服务接口
沟通工具 网络爬虫终端呼叫中心数据接收反馈数据接收 信息反馈报数机构登 报数机构绩客户服务信息咨询数据报送支持持异议处理产品服务支服务协议服务目录管理数据更正产品服务报送机构服管务理对象管理记数据准备产品加工数据校验个人身份整合理数据质量管理计费管理调度监控业务规则配置参数代码配置运营支持业务配置数据质量检 数据质量分测 析数据质量档案管理数据
报送机构统计分析服务对象统计分析数据采集情况统计分析数据质量问题跟踪数据查询类产品加工产品加工管 产品目录管理统计分析类产品加工数据挖掘类产品加工报文文件管理企业身份信 信用主体关
息整合 联关系计算
信服务信服务政府/监管代理机构服
部门服务 务 管理贷款卡管理计子分析产品加系工情况统对外服统务情况统数据管控情况统计分析系统运行情况统计分析计1分0析持子系统外6呼服务支子系统7子系统9子系统8数据管控
子系统日1志1管理授信机子构征系统信3用主体征服务对子象登系统5机构信子用码系统2记子系统4效考评业务服网务客门户端户互互联第网三方服采务集接平口台在1线服务子系Call统cen1ter移互动联网服手机务服务平台短2信服务应用架构与子系统对应关系管理分析层渠道接入层交互控制层业务处64应用架构蓝图数据采集互联网服务平台数据查询接口其它第三方系统运营支撑层业务网门户数据报送接口对外数据交换平台对内数据总线(含抽取、清洗、转换、加载)管理分析数据质量管理客户服务(呼叫中心)调度监控业务配置数据管控计费管理内容管理平台数据仓库渠道接入层集成及服务层管理分析层统一用户服务交互控制层业务处理层个人报告个人评分重要信息提示统计分析类产品信贷组合分析行业历史违约率……数据查询类产品产品加工数据挖掘类产品…………数据准备数据校验个人身份信息整合企业身份信息整合主体关联关系计算主体服务服务交付授信机构征信服务个人业务 企业业务小微企业业务企业报告企业评分小微企业报告日志管理报文接收信息反馈在线录入机构码贷款卡管理报送机构管理数据更正报文文件管理定制产品加工特征变量征信业务报表个人服务 企业服务政府/监管部门服务代理机构服务服务对象管理应用架构蓝图数据采集互联网服务平台数据查询接口其它第三方系统65目录架构概览总体架构应用架构数据架构技术架构目录架构概览66数据模型数据模型是根据一定的业务规则,对业务概念或数据进行逻辑化表现。数据模型从大的层级可以分为概念模型、逻辑模型和物理模型。CustomerDataProductDataAccountDataTransactionData概念模型概念模型是从业务角度对业务的抽象描述逻辑模型逻辑模型是对概念模型的逻辑化,遵循第三范式物理模型物理模型是对逻辑模型的物理化,可以不遵循第三范式数据模型数据模型是根据一定的业务规则,对业务概念或数据进行逻67数据需求数据分类数据实体根据数据内容抽象出数据分类,确定数据分类属性内容业务人员描述所需的数据内容根据分类,抽取出数据实体,用ER图描述其关系数据库表将数据实体物化为数据库表,供系统使用CustomerDataProductDataAccountDataTransactionData业务人员技术人员良好的数据分类可以促进沟通数据需求数据分类数据实体根据数据内容抽象出数据分类,确定数68基础数据库通过标注、文本挖掘等技术,建立非结构化数据的元数据,并与结构化数据整合,供分析使用c. 建立对非结构化数据进行SQL语法查询的支持,实现与结构化数据的集成关联非结构化数据数据获取结构化数据分析应用a. 建立非结构化信息的标签、摘要、索引、日志、内容等b.
提取结构化的元数据信息,如类别、标引、摘要等;实现与结构化数据的整合非结构化数据结构化内容数据仓库数据挖掘产品集市基础数据汇总加工管理分析集市研发集市统计分析产品集市结构化与非结构化数据整合基础数据库通过标注、文本挖掘等技术,建立非结构化数据的元数69基础数据库主数据定位为基础信息整合,为其他数据库供数数据批量处理 实时查询主数据信息整合数据应用数据应用仓库应用查询类应用社会公共部门公检法部门信贷机构金融租赁公司资产管理公司小额贷款公司证券公司其他信贷机构……………数据仓库查询类应用库主数据疑似主体识别归并关联关系挖掘分析只包含主体基础信息,不包含业务数据业务主体信息采集源金融相关机构………..身份信息基础数据库主数据定位为基础信息整合,为其他数据库供数数据批量70数据生命周期数据质量元数据数据标准提供标准和规范的管理手段完善标准强化元数据数据管控数据生命周期数据质量元数据数据标准提供标准和规范的管理手71|
11/2/2016数据质量问题分析数据质量稽核引擎数据质量规则管理规则定义规则查询规则更新数据质量问题管理问题登记问题查询问题分发问题跟踪元数据问题统计报告问题测量评分卡问题影响分析数据质量知识管理分类管理内容录入内容查询内容更新数据仓库各问题反馈渠道接口文件样本文件获取数据质量分析清理数据分析数据清理数据补录系统管理权限管理调度管理日志管理接口管理数据标准数据质量管理|11/2/2016数据质量问题分析数据质量规则管理规则72减少数据冗余,提高数据一致性减少存储、硬件、运维等方面基础设施投入提升应用系统性能,提高响应速度满足业务操作和管理分析满足对历史数据查询的管理制度满足审计管理数据创建数据使用数据归档数据销毁数据生命周期重点关注数据生命周期管理减少数据冗余,提高数据一致性满足业务操作和管理分析数据创建数73数据标准管理标准编号标准中文名称标准英文名称标准别名业务定义业务规则相关标准与相关标准关系标准来源业务属性标准定义部门标准使用系统管理属性数据类别数据格式取值范围代码编码规则技术属性数据标准是企业所有系统都应该遵守的数据定义,实现对每个数据项的统一、规范性描述。数据标准包括每个数据项的业务属性、技术属性和管控属性。数据标准统一命名统一编码数据标准管理标准编号业务属性标准定义部门管理属性数据类别技术74元数据管理业务元数据:描述业务领域相关概念、关系和规则的数据。技术元数据:描述系统中技术领域相关概念、关系和规则的数据。管理元数据:管理元数据是描述管理领域相关概念、关系和规则的数据。业务用户架构师基于”可信赖”信息,更有信心使用信息遵循业界规范和标准易于集成易于变更管理
&
重用技术操作业务统一元数据管理数据模型开发人员数据分析师开发人员数据库管理员元数据是描述数据的数据加强部门协作,让IT向业务看齐元数据管理业务元数据:描述业务领域相关概念、关系和规则的数75数据安全数据管控源数据抽取/订阅数据交换数据应用数据加工实时方式/批量方式主数据数据归档内容管理采集抽取基础服务文档管理服务记录管理服务联合服务源数据金融机构政府部门公共事业单位同业互联网…数据架构蓝图数据质量(预处理&入库)公共数据转换数据加载/发布查询类产品加工库数据准备基础数据库非结构化数据数据仓库基础数据汇总加工分析类产品应用管理分析类应用查询类产品应用校验加载库数缓 据冲 加区 载区运行管理统计分析产品集市数据挖掘产品集市管理分析集市研发集市数据安全数据管控源数据抽取/订阅数据交换数据应用数据加工实时76目录架构概览总体架构应用架构数据架构技术架构目录架构概览77应用分层设计数据层...应用层服务和组件界面展现层展现与接入外部用户(门户、移动终端、统一认证管理)
处理流程 集成层流程数据总线
……运营运管营理管等理业务对 品服务加业工务 对外对服外服务务业务产品加工数据采集数据更正其它…….调度监控产品目录质量管理风险管理数据抽取服 服务 务对 渠象 道客户服务服务管理生 研命 发周 执期 行其它……信息整合其它…………
展现层与应用之间的交互尽可能基于服务方式实现数据数采据集采业集务数据数整据合整业合务业务主体信息用户信息产品信息公共信息信息……………信息………应用分层设计数据层...应用层界面展现层展现与接入外部用户78应用集成设计信息交换总线核心总线消息传送、消息路由、协议转换、事件注册流程整合流程编排、
业务规则数据库结构化文件外部应用1外部应用4监控状态、性能非结构化文件外部应用2外部应用3对外集成层数据整合复制策略、批处理、传输机制SOA建模SOA组装SOA部署服务管理将不同的功能模块定义为服务,并定义接口,采用统一的方式进行交互。对内服务、对外服务应用集成设计信息交换总线核心总线流程整合数据库结构化外部应用79部署单元设计展现层应用层数据层展现部署单元执行部署单元数据部署单元关注接入渠道、用户数、访问量、访问时段、用户体验等需求关注接入运行特征、响应时间、部署位置、可处理窗口等需求关注数据类型、生命周期、规模、IO类型、处理方式、重要程度、安全要求、数据活跃度等需求部署单元是逻辑部署架构的最小构成单元;组件按照展现、接口逻辑、应用逻辑、数据存放的区分部署单元部署单元设计展现层应用层数据层展现部署单元执行部署单元数据部80子系统划分现有IT环境规范非功能需求应用架构技术架构规范子系统1组件组件公共组件组件组件组件组件组件组件子系统2组件组件组 组件 件组件组件组件组件组件子系统N组 组件 件组 组件 件组 组件 件组件组件组件图例部署单元技术架构目标需求数据架构子系统划分现有IT环境规范非功能需求应用架构技术架构规范图例81关键技术路线选择应用架构数据架构技术架构IT架构2 大数据技术1 应用开发技术3 云计算技术关键技术路线选择应用架构数据架构技术架构IT架构82J2EE,.NET,C++SQL,Procedure中后端开发技术HTML5、JavaScript、.NET、PHP、Python前端开发技术开发技术选择业务逻辑的实现应用层数据库层系统扩展性系统压力J2EE,.NET,C++中后端开发技术HTML5、Jav83数据库技术选择数据库技术适用场景主要技术代表产品键值型数据库数据以字符串的形式存在,适用于数据的高并发读写,尤其适合
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 邮政员工职业道德培训
- 停电应急预案考核试题及答案
- 高级2025年碳排放管理师理论知识考试练习题及答案
- 林业知识考试题及答案
- 2025年液压与气压传动试题库及答案
- 曼月乐临床放置方法及咨询
- 2025年全国消防安全知识竞赛题库及答案(共100题)
- 新儿科考试题及答案
- 华煤集团笔试题目及答案
- 护师初级考试试题及答案
- 现场救护安全培训总结课件
- DB32∕ 4149-2021 水泥工业大气污染物排放标准
- 重阳节及课件
- 轧钢厂煤气安全培训课件
- 某某省某某市某某建筑垃圾再生资源利用项目实施方案
- 浙江省精诚联盟2025-2026学年高一上学期10月月考生物试题(含答案)
- 地铁车站出入口改造项目施工方案
- 余热锅炉考试试题及答案
- 2025GCP(药物临床试验质量管理规范)相关知识考试试卷及答案
- 项目五任务2《制作木相框》教学课件-鲁科版七年级劳动技术七年级上册
- 2025年汽车电子CANLIN接口芯片发展现状及未来趋势分析
评论
0/150
提交评论