Oracle数据仓库设计与使用

1、Oracle 数据仓库解决方案Oracle ETL方案Oracle 存储和分析方案Oracle 前端展示方案Oracle数据仓库设计与使用Oracle数据仓库库解决方方案数据数据仓库库：对来自不不同的数据源的大量杂杂乱的信息进行统一一处理及及管理，通过灵灵活的展展现方法法从中提提炼出有有规律的的、可重重复使用用的知识来帮助决策支持，并并将可以以重复使使用的知知识转化化为企业业的核心心竞争力力。数据信息知识决策管理获取使用Oracle对数据仓仓库的理理解:数据仓库库是一个个过程，而不是是一个产产品。传统的数数据仓库库解决方方案OLAPData MiningRDBMSWeb SiteLegacyE

2、RPReportingAd-Hoc QueryAnalysisPortalBrandABrandBBrandDBrandCBrandEBrandF传统的数数据仓库库解决方方案OLAPData MiningRDBMSWeb SiteLegacyERPReportingAd-Hoc QueryAnalysisPortal多种软件件组成非集成的的方案凌乱的平平台技术、接接口复杂杂实施时间间长Oracle数据仓库库总体解决决方案框框架数据转换换中央数据据仓库信息展现现业务用户户源数据数据获取数据管理数据使用联机批处理 联机单笔外部信息 统计分析抽取转化过滤加载随即查询报表多维分析数据挖掘Portal集

3、成直接用户(客户端)OLAP用户Web用户应用服务器RelationalTransformationOLAPData MiningOracle9i/10g数据监督督控制OWBReportDiscovererData MinerBI BeanPortal9i/10g ASOEMOracleDeveloperSuiteOracleDatabaseOracleApplicationServerOracle数据仓库库解决方方案Oracle的数据仓仓库系统统的逻辑辑体系架架构是由由三层组组成：数据获取取层：实现如何何从所有有源系统统中获得得原始的的业务数数据，并并对其进进行一致致性处理理，按主主题进行行

4、数据重重组和格格式转换换，然后后传送并并装载到到数据仓仓库系统统中。数据管理理层：把数据存存储到企企业级数数据仓库库系统中中进行集集中管理理；数据使用用层：实现如何何把数据据仓库系系统中的的数据和和分析结结果提供供给最终终用户。按照用用户的分分析需求求，使用用报表、随即查查询、多多维分析析和数据据挖掘进进行数据据展现。Oracle数据仓库库解决方方案数据获取取层数据仓库库系统需需要从多多个源数数据系统统中抽取取和汇总总各种业业务数据据，这些些数据源源系统是是数据仓仓库系统统的数据据来源。系统按照照满足分分析需求求的原则则，把上上述数据据源系统统中的数数据按照照主题进进行划分分和组织织，然后后抽

5、取并并装载到到数据仓仓库系统统中。从上述这这些系统统中获取取数据需需要三个个过程(ETL)：抽取数据据、数据据转换和和数据装装载。这三个过过程是在在保证各各个数据据源系统统与数据据仓库系系统能够够成功连连接（包包括网络络协议标标准的转转换、不不同平台台之间的的接口）的前提提下实现现的。这三个过过程主要要完成确确定从哪哪个系统统中抽取取什么样样的数据据，如何何保证来来自不同同源数据据系统的的同类数数据的一一致性和和完整性性，如何何把转换换完成的的数据装装载到数数据仓库库系统中中，以及及如何处处理在转转换和装装载过程程中出现现的错误误。Oracle数据仓库库解决方方案数据管理理层在数据存存储层，数

6、据是是存放在在两类数数据库中中：关系系型数据据库和多多维数据据库。数数据存储储是数据据仓库系系统的中中心。取取自多个个数据源源系统的的明细数据据，以及用用于分析析的集成成汇总数据据都存储在在这个中中心。它它在逻辑辑上是一一个完整整的库。Oracle数据仓库库解决方方案数据使用用层数据输出出层的功功能是使使最终用用户通过过报表、图形和和其它分分析工具具的方式式简便、快捷地地访问数数据仓库库系统中中的各种种数据，得到分分析结果果。Oracle提供多种种数据分分析方法法，包括括标准报报表、即即席查询询报表和和动态分分析报表表，预测测，假设设分析和和数据挖挖掘等。标准报表表和即席席查询报报表是基基于关

7、系系型数据据库/多维数据据库的报报表输出出，标准报表表是一种格格式固定定，是在在系统开开发时根根据用户户需求定定制的，最终用用户无法法自己修修改。即席(随即)查询报表的格式和和内容可可以由最最终用户户自由选选择，即即支持即即席查询询。允许许最终用用户控制制数据的的访问方方法，定定义报表表格式和和报表中中的数据据内容。动态分析析报表支持客户户对数据据进行旋旋转、切切片和分分层，并并从各个个角度对对数据进进行分析析和比较较。预测主要是根根据历史史数据推推断将来来的数据据趋势。假设分析析允许用户户设定一一些假设设条件，观察条条件成立立的情况况下相关关指标的的变化。数据挖掘掘是利用多多种数学学的分析析

8、方法建建立模型型，找出出隐含的的业务规规律。Oracle数据仓库库系统工具具平台数据仓库库是一个个建设过过程，Oracle公司在数数据仓库库建设的的每一个个环节上上都提供供了相应应的技术术手段及及工具来来保障数数据仓库库的顺利利实现。Oracle公司在多多年数据据仓库开开发过程程中已开开发出符符合数据据仓库建建设每一一阶段所所需要的的开发工工具，这这对保证证数据仓仓库建设设的顺利利完成提提供了保保障。以以下为Oracle公司为数数据仓库库系统技技术平台台的配置置内容：Oracle数据仓库库系统工具具平台数据获取取层配置置：lOracleWarehouse Builder(OWB)实现数据据仓库

9、的的设计、部署和和管理，包括数数据建模模、数据据抽取、数据转转移和装装载、聚聚合、元元数据的的管理等等。Oracle数据仓库库系统工具具平台数据管理理层配置置：lOracle10g/9i RDBMS进行数据据存储及及管理功功能。lOracleOLAP多维分析析服务器器lOracleDataMining数据挖掘掘引擎lOracleEnterpriseManager数据仓库库图形化化管理工工具Oracle数据仓库库系统工具具平台数据展现现层配置置：lOracleReports数据仓库库前端应应用报表表开发工工具lOracleDiscoverer数据仓库库随即查查询、报报表工具具lOracleInt

10、ernetApplicationServer应用服务务器lOracleBIBeans由OracleJavaOLAP API构造的商商业智能能套件lOraclePortal企业门户户信息开开发工具具lOracleFinancialAnalyzer财务分析析应用lOracleSalesAnalyzer销售分析析应用Oracle数据仓库库系统工具具平台lOracleWarehouse Builder（OWB）可以为数数据仓库库解决方方案提供供完整、集成的的实施框框架，以以前只能能由单独独工具完完成的功功能现在在能够在在同一环环境中实实现，这这些功能能包括：数据建建模、数数据抽取取、数据据转移和和装载

11、、聚合、元数据据的管理理等。OWB还实现了了数据仓仓库不同同部件如如关系数数据库、多维数数据库以以及前端端分析工工具的集集成，为为用户提提供完整整的数据据仓库和和商业智智能系统统。Oracle数据仓库库系统工具具平OWB具有如下下特点：l全面的数数据仓库库设计、部署和和管理功功能l利用数据据库服务务器提高高性能l与前端分分析工具具紧密集集成l开放、可可延伸的的框架l支持复杂杂的提取取、转换换和传输输(ETT)过程l集成元数数据管理理Oracle数据仓库库系统工具具平台lOracle9i/10g数据仓库库核心引引擎，其其中Oracle9i/10g为最新版版本的数数据库产产品，专专门针对对数据仓仓

12、库进行行了很多多的改进进，包括括对更大大数据量量的支持持(PB级)，对更多多用户数数的支持持(10000+)，更多数数据仓库库专用函函数的支支持等。集成了了ETL、OLAP、Data Mining功能Oracle数据仓库库系统工具具平台Oracle9i数据仓库库核心引引擎具有有以下特特点：l高可靠性性、高可可用性l强大的伸伸缩性和和性能，强大的的并行处处理能力力，支持持复杂的的，大数数据量的的、突发发查询的的能力l快速响应应时间，高性能能l强大的复复杂查询询技术l高可扩展展能力l支持大容容量，TB级的数据据存储能能力l高安全性性l开放性l易于管理理与维护护l专门集成成了数据据仓库所所需的ETL

13、、OLAP、Data Mining功能Oracle数据仓库库系统工具具平台lOracleInternetApplicationServer是目前市市场上综综合性最最强，集集成度最最高的应应用服务务器。它可以运运行任何何网站，门户或互互联网应应用，并且其速速度比市市场上其其他应用用服务器器都要快快，OracleInternetApplicationServer能让您通通过传统统浏览器器和任何何移动设设备访问问网站和和应用。通过集成成商务智智能，它它可以满满足您最最新的商商务信息息需求，它还加加进了一一套综合合的管理理，集成和协协作技术术，使您您能够简简化操作作，提高高效率。Oracle数据仓库库

14、系统工具具平台OracleiAS由四部分分服务组组成：l通讯(CommunicationServices)l表示（PresentationServices）l商业逻辑辑(BusinessLogicServices)l系统服务务(System Services)OracleiAS还包含了了一系列列的开发发工具：Forms、Reports以及Discoverer。Oracle数据仓库库系统工具具平台OracleiAS具有以下下特点：l提供完整整的功能能选件,如门户,无线,企业集成成l提供从开开发工具具到应用用服务器器,到后台数数据库的的完整解解决方案案,如支持数数据库l提供Web缓冲功能能l提供单

15、次次登录及及集成的的目录服服务器功功能l提供广泛泛的应用用服务器器的管理理与监控控工具，监控对对象包括括应用服服务器本本身的运运行状态态，网站站内容访访问，如如访问频频度分析析器、相相应的报报告工具具等l提供完整整而集成成的商业业智能工工具,如报表功功能,数据分析析功能l提供集成成的网站站分析工工具 Oracle数据仓库库系统工具具平台OracleiAS具有以下下特点：l支持目前前主流的的Web服务器，并提高高其安全全性和可可控制性性l提供相应应的IDE开发环境境，缩短短开发测测试周期期。l提供对复复杂WebServices的支持,并且完全全支持业业界标准准l跨平台支支持，包包括操作作系统和和

16、数据库库系统，以提高高应用的的灵活性性和可移移植性。lXML支持，支支持XML数据的解解释和输输出。l强大的安安全功能能，包括括安全套套接层（SSL）、授权权、数字字认证和和访问控控制。l提供大量量现成的的组件,可以用于于快速构构建Web应用程序序。Oracle数据仓库库系统工具具平台lOracleDiscoverer是最终用用户查询询，报告告，深入入和旋转转和WEB公布工具具，能够够帮助用用户迅速速访问关关系型数数据仓库库、数据据集市和和业务系系统，从从而使他他们做出出基于充充分信息息的决策策。Oracle数据仓库库系统工具具平台OracleDiscoverer具有以下下特点：l超乎寻常常的

17、易用用性l快速查询询及相应应性能l强大钻取取功能l强大自动动汇总重重定向能能力l资源控制制能力l低维护的的最终用用户层l基于服务务器的可可伸缩性性l开放式访访问Oracle数据仓库库系统工具具平台lOracleDeveloper(Forms&Reports)一个用于于建立企企业级客客户/服务器和和Web数据库应应用的、易于使使用的集集成式快快速应用用开发环环境（RAD）。OracleDeveloper通过使用用快速应应用开发发技术（RAD技术）、面向对象象技术，基于计计算机的的内部学学习，以以及统一一的客户户、应用用服务器器和数据据库服务务器体系系结构，为客户户/服务器和和Web开发建立立了新

18、的的易于使使用的生生产力标标准。Oracle数据仓库库系统工具具平台OracleDeveloper(Forms&Reports)具有以下下特点：l易于使用用及开发发l丰富的报报表样式式l多种文件件格式(PDF,HTML,XML,XSL)l可扩展的的性能(Report Server)lWeb发布 Oracle数据仓库库系统工具具平台lOracleBIBeans是集合了了一系列列标准Java Bean，帮助开开发人员员快速建建立商业业智能应应用程序序。直接接从Oracle数据库中中产生快快速、灵灵活的随随即查询询和多维维分析。Oracle数据仓库库系统工具具平台OracleBIBeans有以下部部

19、分组件件组成：l演示组件件（图形形、交叉叉表和图图表）lOLAP组件（查查询和计计算创建建器）l服务多个组件件将JDeveloper作为商务务智能应应用程序序的开发发环境，协同操操作，利利用Oracle技术堆栈栈和OracleOLAP的高级分分析特性性，提高高应用程程序开发发人员的的开发效效率。Oracle数据仓库库系统工具具平台lOracleEnterprise Manager是一套开开放的综综合系统统管理系系列产品品，可以以高效地地管理整整个Oracle环境，包包括系统统、数据据库、网网络和应应用程序序，可以以大大减减少系统统管理员员用于管管理复杂杂产品环环境的时时间。OEM有以下四四部分

20、组组件组成成：lOracleDiagnosticsPack能够让数数据库管管理员实实施对Oracle环境的高高级监控控、诊断断和规划划。lOracleTuning Pack为数据库库管理员员提供了了对Oracle环境的专专家级性性能管理理能力，包括SQL优化调整整和存储储最优化化。 Oracle数据仓库库系统工具具平台OEM有以下四四部分组组件组成成：lOracleChange ManagementPack能够消除除在升级级数据库库以支持持新应用用时（可可能产生生的）数数据错误误与丢失失。此工工具包分分析与应应用变更更有关的的影响和和复杂的的依赖性性，并自自动实施施数据库库升级。lOracle

21、ManagementPack forSAPR/3提供了对对SAPR/3系统的实实时监测测能力、用于历历史分析析和未来来规划目目的的容容量计划划、事件件集成以以及对主主机、数数据库和和应用的的单点管管理功能能。Oracle数据仓库库系统工具具平台OEM具有以下下特点：l使用统一一的体系系结构管管理着整整个数据仓库库系统l集中控制制平台单单一视图图管理l实时监控控l分布式数数据管理理Oracle数据仓库库系统工具具平台Oracle数据仓库库支持：1、任何数数据源（AnySource）搜集在Oracle数据仓库库中的数数据来源源众多，包括内内部存储储的业务务数据和和外部的的数据。在传统统上，数数据仓

22、库库中的大大多数数数据来自自内部业业务系统统，如业业务系统统或各客客户信息息系统等等方面的的数据。然而外外部来源源的数据据也越来来越普通通，并且且将会提提供比内内部来源源更多的的数据。上述两两种数据据来源应应该融合合在一个个单一的的存储系系统中，并且加加以管理理，从而而为最终终用户提提供对这这两种数数据源的的无缝访访问。Oracle提供各种种网关（gateway）及Sql*Loader以及合作作伙伴提提供的各各种工具具来实现现不同数数据源数数据的加加载。Oracle数据仓库库系统工具具平台Oracle数据仓库库支持：2、任何数数据（AnyData）考虑到现现在需访访问的数数据仓库库的用户户范围

23、，系统设设计者面面临着纷纷繁各异异的需求求。对数数据的访访问必须须快捷，直观和和直接。大多数数用户需需要直接接查询和和深入的的能力，而另外外一些需需要更复复杂的分分析能力力。同时时数据仓仓库必须须能够处处理新型型格式的的数据，如声音音，视像像，文字字和空间间数据。而且，日益增增加的用用户提出出大量历历史性需需求，往往往导致致超大规规模数据据库（VLDB）的出现现。为了了满足这这些需求求，对作作为数据据仓库核核心的数数据库系系统提出出了很高高的要求求，而ORACLE数据库核核心能够够完全满满足这些些需求。Oracle数据仓库库系统工具具平台Oracle数据仓库库支持：3、任何访访问需求求（Any

24、Access）Oracle提供了基基于数据据仓库的的范围广广泛的工工具集，能够帮帮助各种种类型的的用户访访问数据据仓库中中存储的的数据，我们把把数据仓仓库的用用户分为为两类：第一类类是对数数据进行行随意查查询和报报告，深深入和旋旋转，这这类用户户需要一一种直接接和直观观的工具具，帮助助他们轻轻松地访访问数据据，从而而作出明明智的商商业决策策。另外外一类用用户是企企业的高高级管理理者和决决策者，他们需需要进行行更复杂杂更高级级更完全全的分析析（建模模，预测测和假设设分析等等），以以支持制制定商业业策略。上述两两类用户户体现了了整个企企业对于于信息访访问的需需求。今今天的数数据仓库库已经突突破了管

25、管理人员员和分析析人员的的范围，现在各各类企业业人员都都在使用用数据仓仓库，决决定选用用何种工工具实施施数据仓仓库，变变得越来来越重要要。数据仓库库市场份份额比较较Oracle提供完整整的产品品工具集集，满足足上述数数据仓库库的用户户需求Oracle数据仓库库国内部部分用户户电信云南移动动福建电信信深圳电信信天津移动动交通运输输中国民航航信息中中心中国货运运航空公公司中国东方方航空公公司能源中国石化化镇海炼化化上海电力力制造中国朗讯讯（Lucent)摩托罗拉拉（Motorola)上海施贵贵保长安汽车车集团南京汽车车武汉丽花花丝宝光明乳业业 政府国家统计计局北京市国国家税务务局北京市地地方税务务

26、局浙江公安安金融中国银行行中国工商商银行中国农业业发展银银行深圳建设设银行四川建行行TB级案例：上海证券交易所（监察系统）2.5TBOracle数据仓库库和商务务智能整整体解决决方案介介绍OracleETL方案Oracle存储和分分析方案案Oracle前端展示示方案什么是OracleWarehouse Builder?一个能设设计、部部署和管管理企业业数据仓仓库、数数据中心心和电子子商务智智能应用用的可扩扩展框架架构造数据据仓库ETL（抽取、转换、装载）功能设设计和部部署完整的生生命周期期管理包含在DeveloperSuite中OWB工作流程程关系性数数据平面文件件应用主机Oracle9ior

27、Oracle 10g抽取和转换数据6生成代码4设计目标数据仓库模型1映射源数据3部署数据仓库5OWBrepository源数据目标数据据仓库OWBClient2定义源数据STEP 1:在WarehouseBuilder中设置环环境为开始使使用WarehouseBuilder，我们首首先必须须创建一一个项目目（project）.STEP 2:创建数据据源建立基于于ORACLE数据库对对象得源源数据模模块。该该步骤仅仅是整个个解决方方案中的的第一步步。定义数据据源对象象的结构构。导入入数据源源元数据据定义数据据源对象象的结构构包括如如下行为为：1)定义和创创建针对对平面文文件的数数据源模模块2）定

28、义和和创建针针对关系系型数据据库的数数据源模模块3）从数据据源对象象导入元元数据到到数据源源模块STEP 3:设计数据据仓库该模块利用WarehouseBuilder创建表、视图、方案的的一些特特征。在在此部分分我们将将创建事事实表及及维。完完成这些些工作后后，就能能将数据据载入这这些结构构中定下下数据仓仓库。STEP4:设计映射射与转换换模型OWB的核心功功能是基基于ETL过程。利利用OWB映射设计计工具完完成这些些过程的的设计。将充分分利用前前面在OWB中定义好好的数据据源与数数据目标标，允许许客户用用PL/SQL开发辅助助数据转转换。STEP 5:配置，部部署，运运行在设计完完数据仓仓库

29、后，在数据据库中安安装它，并载入入数据。如何配配置在前前面中创创建的模模块，并并运行映映射，载载入数据据。STEP6:生命周期期管理数据仓库库是一个个一直在在进化的的系统。为了处处理数据据源及数数据目标标的变化化，OWB提供了用用户数据据源协调调及数据据仓库升升级的手手段。Oracle数据仓库库解决方方案OracleETL方案Oracle存储和分分析方案案Oracle前端展示示方案Oracle数据仓库库-数据管理理超越传统统海量数数据管理理能力最多的数据分区区技术物化视图图集成OLAP、DataMining和ETL服务位图索引引位图联合合索引ShareDisk的并行处理理和集群群数据压缩缩自动

30、存储储管理智能化自自我管理理Oracle数据仓库库和商务务智能整整体解决决方案介介绍OracleETL方案Oracle存储和分分析方案案Oracle前端展示示方案单一基础础架构支支持全面面的信息息访问中央数据仓库引擎Data WarehouseETLOLAPData Mining逻辑统一一，物理理集成完整展现现，性能能卓越只有OracleApplicationServer 10g能做到所有 SQL 查询工具即席查询工具Discoverer定制报表Oracle Reports集成开发接口Excel 插件 数据挖掘Discoverer方便访问问数据点击式，非常简简单拖放式的的布局交互式提提示右键单

31、击击以获得得有用的的选择多步骤任任务的向向导在任何级级别上获获取信息息功能强大大的下下钻特特性来自自于聚合合数据 报告您的的见解需要通知知其他人人吗？发布到OraclePortal以电子邮邮件方式式发送给给团队保存在Excel中输出到AdobePDF或者从任任何web浏览器中访问问！电子表格格插件作为Excel插件安装装QueryBuilder 向导驱动动的界面面导航OracleOLAP多维数据据集、维维和层次次异常、top/bottom、排名基于层次次、基于于时间创建和存存储已保保存的选选项Calc Builder向导驱动动的界面面创建和存存储基于于OracleOLAP的计算基于时间间的计算算、移动动平均值值 所有可用用的标准准Excel功能（例例如图形形、格式式化 ）与其他用用户共享享工作表表文件OracleReports基于web的一种灵灵活而功功能强大大的