Informatica 产品 PowerCenter介绍ppt课件

Informatica产品介绍 Informatica主要特点1完善的ETL功能 完善的ETL功能 异构数据源 异构目标实现多种缓慢变化维全局变量及参数 支持参数文件局部变量 前后记录比较条件汇总异构数据源关联行 列转换静态 动态Lookup支持数据驱动事务类型自定义SQLPreSQL和PostSQL复用组件复用Mapping调用存储过程调用外部用户自定义过程可视化Debug强大的函数支持 功能丰富的转换语言 数据源为文件列表 为命令返回值 支持通配符 SessionRecovery调用Java C C VC VB等外部程序基于多目标表约束装载错误数量控制FTP源和FTP目标ETL任务分区增量汇总测试装载数据驱动增删改类型能Bulk ExternalLoading复用Workflow功能丰富的Workflow控制任务串行 并行控制基于时间 事件和指示文件触发任务Workflow中调用操作系统外部命令 调用Email多ETLServer协同工作 数据转换组件类型 SourceQualifier 从源表中查询出所有的数据 非XML XMLSourceQualifier 从XML数据源中查询数据ERPSourceQualifier 从ERP数据源中查询出所有数据Normalizer 从VSAM或关系数据源中格式化记录Expression 基于单行记录的表达式计算Aggregator 基于多行记录的汇总计算Filter 执行条件过滤Router 按照条件分组来过滤数据Sorter 基于键字段进行排序Union 对两个或多个源 作Union操作JavaTransformation 可直接编写java语句进行java调度 InformaticaPowerCenter提供了20多种数据转化组件 数据转换组件类型 UpdateStrategy 允许逻辑的插入 更新 删除 或拒绝Lookup 查找相关的值并且传送给其他的对象Joiner 关联异构数据源StoredProcedure 调用存储过程并且获取返回值ExternalProcedure TX 从共享库中调用一个外部的用户定义的过程 一次处理一条记录 AdvancedTX 从共享的库中调用一个外部的用户定义的过程 一次处理多条记录 SequenceGenerator 产生一组唯一的序列idRank 取出最大或最小的一定数量的记录Input 定义Mapplet的输入 仅在Mappletdesigner中可用Output 定义Mapplet的输出 仅在Mappletdesigner中可用 Informatica主要特点2高性能 官方基准性能测试 7 7MB sec CPU或27 72GB hr CPU 高性能 TPC H官方性能报告 详情请点击查看测试报告 高性能 Partition分区 Read WriteIn memoryLookupCache Read WriteIn memoryAggregatorCache 抽取 转换 加载 Partition1 Partition2 Partition3 分区并行处理 性能可无限扩展实现负载均衡 PowerCenterserversonServerGrid Off gridPowerCenterserver 高性能 网格 Grid 计算 高性能 网格 Grid 计算 SessiononGrid 高性能 PushDownOptimization Informatica主要特点3全面数据连接 WebServicesMQSeriesJMSTIBCOwebMethodsSAPNetWeaverXIEncyryptedstream PeoplesoftOracleAppsSiebelSAS SAPNetWeaverSAPIDOCSAPBCISAPDMISAPBW OracleDB2UDBDB2 400SQLServerSybaseInformixTeradataODBCFlatFilesWebLogs XMLIndustryFormats FlatFilesFTPComplexFilesTapeFormats ERP Databases XML Flatfiles Mainframe UnstructuredData Messages ADABASDatacomDB2IDMSIMSVSAMC ISAMTapeFormats PDF DOC XLSEmail 广泛的数据源支持 包括结构化 半结构化 非结构化数据 全面数据连接 企业统一数据平台 ImplementFin ReportingApp MigrateLegacyFinanceApp ConsolidateRiskSystems IntegrateCustomerAnalyticsData Mainframe Applications Databases XML Flatfiles Messages UnstructuredData 信息系统交互 数据获取形式 业务之间交互 企业数据类型 Informatica主要特点4高开发效率 高开发效率 图形化开发 无须编码 高开发效率 强大的转换功能 Analysts Developers Operators Architects MappingAnalystforExcel 高开发效率 自动化项目开发生命周期 MappingArchitectforVisio 高开发效率 映射规则文档生成 MappingAnalystforExcel Analyst DefinebusinesstermsSpecifyassociatedsources targetDefinetransformationrulesStandardizeExcelformat Developer JumpstartmappingsfromspecificationModifyandoptimizemappingsSynchronizemappingsw spec Auto generatemappings Auto generatespec frommodifiedmappings 高开发效率 Mapping模版设计 内置多套模板 使用Visio设计Mapping架构 MetadatadrivenframeworkforgeneratingcustomwizardsfortemplatestomaximizeproductivityTargetedforDIArchitectAbilitytobuildyourownwizardsbasedonthepatternwithoutcoding DIArchitectDevelopVisiomappingtemplate logicalflow VisioMappingTemplate Step1 Step2 Step3 DIArchitectProvideUIinformationintemplateXMLfile TemplateXML 高开发效率 团队开发及版本控制 高开发效率 完善的开发方法论 权限控制Granular Role basedSecurity Informatica主要特点5灵活的流程作业调度 流程作业调度 基于时间 事件 文件 命令触发 流程作业调度 完善的计划执行能力 流程作业调度 多级别参数控制 Informatica主要特点6高可用性 自动接管坏点任务并屏蔽坏点弹性连接 环境出问题时不断尝试连接并恢复任务 A X C B 高可用性 Domain Node1 Gateway Domain Log Server1 Node2 Server2 Gateway Domain Integration Repository P B HAFileSystemSharedDirectory DBandshareddirectoryarehighlyavailable Integration Repository B P 高可用性 HA 体系结构 HADatabase Access BackupInstance PrimaryInstance Log B B 高可用性 HA 弹性连接 Resilience 高可用性 HA 故障切换和任务恢复 高可用性 HA 故障切换和任务恢复 Informatica主要特点7二次开发扩展能力 开放的数据库结构 MX 可以直接通过对知识库的操作实现与其他系统的集成 完善的底层命令 支持完善的底层命令集成模式infacmd PowerCenter应用服务命令集Infasetup PowerCenter域 节点管理命令集Pmcmd PowerCenter工作流管理命令集Pmrep PowerCenter知识库管理命令集可以通过调用底层命令完成Powercenter的所有管理操作 实现与其他系统的集成 十四个集成软件开发包 SDK 支持多种集成模式软件开发包 SDK列表 Custom Function SDKEP AEP CTExpression SDKJava LM APILoadManager APILoadManager API CLoadManager API JAVAMapping API JAVAMapping SDKMetadata Exchange SDKPowerCenter Connect SDKSecurity SDKSessionLog APITransformation SDK可用通过各种软件开发包的二次开发实现与其他系统的集成 Informatica主要特点8数据脱密能力 生成测试环境脱密数据 采集 抽样 分发 保护敏感数据限制数据访问 脱密私有数据 开发测试系统支持数据分析 Informatica主要特点9变更数据捕获 PowerExchange 变化数据捕捉 CDC 和实时数据 Realtime 实时的数据抽取和处理 可以做到秒级 产品机理是通过监控数据环境的日志 实现增量的变化 实时捕捉 DBLogbased或Journalbased 支持开放型平台 关系型数据库 AS 400和大机环境 Mainframe 对被监控的源环境影响小 PowerExchange Tools ETL EAI BI PowerExchange产品架构 Registration ExtractionDataMaps ChangeStream or VirtualChangeStream InformaticaPowerCenter InformaticaDataAnalyzer OtherTools Collector Listener MainframeADABASDATACOMDB2IDMSIMSVSAM Mid RangeDB2 400OracleSQLServer OperatingEnvironment InformaticaPowerExchange Real time Change Batch PowerExchange可捕获系统额外信息 PWX可捕获数据操作时间 用户 操作类型等很多额外信息 Informatica主要特点10元数据管理 挑战 我们开发团队花70 的时间去评估运营和技术变化的影响 只有30 的时间用于实际开发实施 元数据的形象描述 数据是企业的血脉 元数据是DNA元数据是企业信息化管理的综合布线图元数据是企业信息的路由图 InformaticaMetadataManager体系结构 InformaticaMetadataManager元数据管理流程 PresentationServer XConnectorMXAE MetadataManager浏览栏 Search BasicandAdvanced Shortcuts Shortcuts SharedShortcuts SavedSearches Catalog CurrentMetadataManager ViewONLYaccessibleinstances Properties Basic Advanced Annotations Relationships SummaryProfileInfo SupportingDocs MetadataManager关键词搜索 Resultsarelistedinorderofrelevance Propertiesarealwaysvisible Resultsincludeitemsthatmatchedeithercondition MetadataManager高级搜索 Cannarrowbyanycombinationoflocation dateand orkeyword 血缘分析 Datalineage 表 LaunchdatalineageforaDBtable 数据模型 ODS层 ETL过程 APP层及多个ETL过程 DW层 OLAP 报表 血缘分析 DrilldowntoColumn LaunchdatalineageforaDBtable column 列级血缘分析支持 血缘分析 DrilldowntoColumn MM内跨整个数据生命周期无断点的元数据血缘分析 沿袭 MM支持表级与字段级的沿袭分析 有利于数据审计 可清晰表现数据的来源和去脉 及中间的转换规则沿袭分析可以通过API被第三方工具调用 查看某个指标在ETL环节的加工处理过程 及规则 MM内跨整个数据生命周期无断点的元数据血缘分析 沿袭 MM支持表级与字段级的沿袭分析 有利于数据审计 可清晰表现数据的来源和去脉 及中间的转换规则 属性栏可显示上面选中对象的属性 包括业务定义 规则等 MetadataManager优势特点 统一管理并维护技术元数据与业务元数据可实现元数据管理 维护的完全自动化 预置广泛的元数据采集接口 可极大缩短项目开发周期 减少难度与工作量元数据采集 同步 维护及调度功能 真正作到无人化 自动化维护元数据管理工具界面友好性 完全的Web式开发 访问及维护支持自定义元模型 可方便使客户开发出特定需求的元数据管理内容整个平台支持CWM元数据标准 真正的国际化标准类似Google方式的元数据检索功能可方便的实现表级和字段级的血缘分析功能 其中字段级血缘分析 是只有Informatica才会提供的特定功能 可方便的实现表级和字段级的影响分析功能 其中字段级影响分析 是只有Informatica才会提供的特定功能 字段级的血缘分析是数据审计的基础 是规范统计口径所必需的 元数据管理需要有严谨 先进的基础架构和技术体系来支撑 切忌人工或非自动化 其代价极其高昂 Informatica主要特点11实时应用集成 双向的实时数据集成事务数据或时间切片数据支持IBMMQSeries的本地实时联接支持Tibco的本地实时联接支持webMethods的本地实时联接支持JMS的实时联接实时的 永远开通的会话可以连续集成来自EAI 消息队列的数据流对于需要立即处理的 实时的流式传递数据进行零延时数据传输 实时应用集成 PowerCenterWebServices WebServiceProviderBatchDataIntegrationServicesReal TimeServicesMetadataServicesWebServiceConsumerConsumeexternalWebServiceWebServiceRepositoryPublishtoPowerCenterMetadataRepository PowerCenterWebServicesWe