数据交换平台介绍PPT学习课件

数据交换平台,1,议程,数据交换平台概述数据交换平台功能特点数据交换平台应用案例,2,数据交换平台概述,3,数据源的多样各类数据库、文件（文本、Excel、二进制）数据格式的差异交换策略的多样主动、被动实时、分时同步、异步交换数据的安全、可靠网络、系统环境的复杂配置、管理的复杂,数据交换过程中面临的问题,4,采用中间件成熟的商用软件，应用软件的半成品不同的问题由不同的中间件解决实现平台化为数据整合提供统一的支撑服务提供统一的交换标准、接口和开发、运行、管理环境,解决问题的最有效途径,5,数据交换平台总体技术架构,6,是打破信息孤岛、实现互联互通的基础框架提供各种应用系统之间的信息交换和共享服务,数据交换平台的组成,7,作用为集成各种应用系统提供一个开放式企业级应用集成框架功能支持不同地域的应用系统集成支持多种数据格式及不同格式之间的转换提供强大的数据加工能力提供标准的系统集成适配器增强的对XML支持提供方便易用的配置工具使用Java代码实现，良好的平台移植性,应用集成中间件TongIntegrator,8,TongIntegrator,A系统的接口，A系统的数据格式,Y系统的接口，Y系统的数据格式,业务流程,系统,A,系统,B,数据库系统,X,数据库系统,Y,提供企业应用集成的框架实现应用之间功能集成实现应用之间数据集成,TongIntegrator应用框架,9,作用为分布式应用提供消息递送服务的消息传输平台功能提供可靠、高效、安全的数据传输服务提供P2P、Pub/Sub通讯模式实时网络监控及管理多网络环境、多应用模式支持支持与Web技术集成,消息中间件TongLINK/Q,10,TongLINK/Q应用框架,11,集中式,集中数据处理，统一管理和维护中心处理压力大，前端维护管理工作量小,数据交换平台的部署（一）,12,分布式,分布数据处理，统一数据格式中心处理压力小，前端维护管理工作量大,数据交换平台的部署（二）,13,数据交换平台功能特点,14,数据抽取数据传输数据加工数据交换流程定义数据交换策略异常处理配置和管理应用和数据交换平台的关系,功能概述,15,数据抽取,16,基于队列机制保证数据可靠传输,队列,TongLINK/Q,tlqd,队列,TongLINK/Q,tlqd,数据传输（一）,17,支持数据传输的优先级,TongLINK/Q,Priority=,数据传输（二）,低,中,高优先级高优先级消息传输速度高于低优先级的消息同一优先级的消息顺序发送TLQ保证低优先级消息可以得到发送,18,高的数据传输效率,数据传输（三）,19,传输数据的安全性,节点合法性检查下级节点表中的合法节点口令字认证传输加密第三方安全出口与TongSEC结合,数据传输（四）,20,格式转换内容转换,数据加工（一）,21,过滤添加,数据加工（二）,22,顺序,数据交换流程定义（一）,23,数据分发数据分离,数据交换流程定义（二）,24,数据合并,数据交换流程定义（三）,25,数据路由,数据交换流程定义（四）,26,实时、定时,数据交换平台,数据交换平台,数据交换策略,27,主动典型应用B2B集成,输入组件,被动接收,应用,发送,输入组件,被动接收,输出组件,应用,发送,应用,接收,应用和数据交换平台的关系（一）,28,被动典型应用数据库复制,输入组件,主动拉取,应用,DB1,输入组件,主动拉取,DB2,输出组件,应用和数据交换平台的关系（二）,29,异常处理器,异常处理,30,统一配置,配置和管理（一）,31,参数化配置,配置和管理（二）,32,图形化数据库配置工具,配置和管理（三）,33,远程监控,配置和管理（四）,34,远程监控,配置和管理（五）,35,日志系统调试日志记录运行期间的调试信息分级输出，更易维护可定义输出时间，线程，java包等相关信息数据日志可定义共同使用一个日志文件或每一个组件链使用自己的日志文件循环日志，文件长度最大值和文件数最大值可定义各组件可以单独定义是否记录数据日志,配置和管理（六）,36,企业级的应用集成平台统一的数据、应用集成框架、强大的适配功能安全、高效、可靠的数据传输体系有效的数据转换提供丰富的数据转换组件XML等标准的支持用户可定义的数据格式良好的平台兼容性支持硬件、OS、数据库、中间件产品自有版权扎根国内应用需求、充分满足应用整合需要,数据交换平台的特点,37,集中式的数据共享模式,设计思路的选择1,38,分布式的数据共享模式,设计思路的选择2,39,设计思路的选择3,40,设计思路的选择4,采用面向数据交换服务的体系架构业务系统和数据采用分散部署和维护、管理，降低了工作难度和风险；只需要在小范围内进行用户权限控制，相对地对应用安全的要求降低；由于采用分布式存储和处理，因此对主机、存储等基础设施的要求相对较低；由于在网络、主机和存储各个层次上要求较低，因此系统在技术上相对简单，减低了实施风险；系统的投资较低，系统建设周期、开发周期较短；与原有异构的遗留系统的整合相对简单，可更好地保护已有系统投资。,41,数据交换平台应用案例,42,项目概况由农业部信息中心牵头建设涉及全国31个省、直辖市15个试点省建设周期为3个月目标全国农业系统共同需要的信息资源，将通过“全国农业网站资源库”实现联合收集，同步共享；重要的农业新闻将以“全国信息联播”实现统一发布，连锁宣传。,农业部“全国农业网站信息资源库”和“全国信息联播”频道（1）,43,省级网站,省级网站,省级网站,数据共享交换平台,中农网采编发平台（WCM）,信息资源库,信息联播,用户,Internet,农业部“全国农业网站信息资源库”和“全国信息联播”频道（2）,44,消息中间件+应用集成中间件,消息中间件+应用集成中间件,数据共享交换平台,解包、分析组件,Zip文件打包适组件,调用webservice入采编系统组件,文件目录监控组件,文件目录监控组件,中农网采编发平台（WCM）,数据库,数据库组件,数据加工组件,发送文件到省,文件加工组件,省级中农网采编发平台,调用webservice入采编系统组件,数据解析入库组件,标准表(out),标准表(in),数据库组件,省应用系统,文件目录监控组件,发送目录,数据库,数据库组件,广东、上海,除广东、上海外,农业部“全国农业网站信息资源库”和“全国信息联播”频道（3）,45,项目概况由成都市工商局牵头建设涉及成都市18个委办局建设周期只有2个月时间目标建立全市统一的企业信用数据中心，准确收集、反映、分析、评价、公示和使用企业信用资源，实现社会诚信体系工程,成都工商局企业信用管理系统（1）,46,成都工商局企业信用管理系统（2）,47,信息发布组件,信用数据资源管理中心,前置DB,前置DB,数据采集组件,前置DB,应用集成中间件,消息中间件,数据转换组件,路由组件,应用服务器,数据交换平台,前置DB,历史DB,中心DB,应用集成中间件,应用集成中间件,应用集成中间件,消息中间件,消息中间件,消息中间件,工商原有系统,技监原有系统,国税原有系统,业务DB,业务DB,业务DB,成都工商局企业信用管理系统（3）,48,福建省电力局DXP数据交换平台（1）,项目概况建立福建省电力局数据中心和6个部门应用系统之间的公共数据交换平台，为应用系统提供统一的接入接口和数据加工模块，实现跨系统数据实时、定时交换。项目实施周期及人员配置1名项目实施经理、4名项目实施工程师3个半月完成2个部门和数据中心的实施上线,49,福建省电力局DXP数据交换平台（2）,集成环境数据中心Windows2000WebSphere5.0、MQ5.3Oracle9i部门环境Windows2000/XPMQ5.3Oracle9i/8.1/SQLServer其他业务系统,50,福建省电力局DXP数据交换平台（3）,系统拓扑图,51,福建省电力局DXP数据交换平台（3）,平台功能特点以TongIntegrator为核心实现实时、定时数据交换基于订阅/发布模式的数据交换同步数据查询支持实现WebSphere、MQ等原有应用系统完美整合使Web功能更加丰富提供交换数据监控和审计日志支持海量数据交换（日数据交换10万条）,52,中国农业部网上展厅中国卫星通信