数据仓库与联机分析处理技术综述.

1、科技信息 2010年第 35 期SCIENCE&TECHNOLOGY INFORMATION0引言数据仓库(Data Warehouse,DW1是信息领域中近年来迅速发展起来地数据库 新技术。数据仓库的建立 ,能充分利用已有地数据资源 ,把数据转换为信息 ,从中挖掘 出知识,提炼成智慧 ,最终创造出效益。所以 ,越来越多地企业开始认识到数据仓库应 用所带来地好处。计算机系统中存在着两类不同地数据处理工作 :操作型处理和分析型处理 ,也称 作 OLTP( 联机事务处理和 OLAP( 联机分析处理。操作型处理也叫事务处理 ,是指对数据库联机地日常操作 ,通常是对一个或一组 记录地查询和修改

2、 ,例如火车售票系统、银行通存通兑系统等。这些系统要求快速 响应用户请求 ,对数据地安全性、完整性以及事务吞吐量要求很高。分析型处理 ,是指对数据地查询和分析操作 ,通常是对海量地历史数据查询和分 析,例如金融风险预测预警系统、证券股市违规分析系统。这些系统要访问地数据 量非常大 ,查询和分析地操作十分复杂。两者之间地差异 ,使得数据仓库技术就应运而生了。1数据仓库技术数据仓库和数据库 2 只有一字之差 ,似乎是一样地概念 ,但实际则不然。数据仓 库是为了构建新的分析处理环境而出现地一种数据存储和组织技术。由于分析处理 和事务处理具有极不相同地性质 ,因而两者对数据也有着不同的要求。数据仓库概

3、 念地创始人 W.H.Inmon 在其 Building the Data Warehouse一书中 , 列出了操作型 数据与分析型数据之间地区别 ,基于这些区别 ,可以给出数据仓库的定义 :数据仓库是 一个用以更好地支持企业 (或组织决策分析处理的、面向主题的、集成的、不可更新的 ,随时间不断变化的数据集合。数据仓库本质上和数据库一样,是长期储存在计 算机内的、有组织、可共享地数据集合。数据仓库和数据库主要的区别是数据仓库中地数据具有面向主题的、集成的、 不可更新的和随时间不断变化的等四个基本特征。1.1主题与面向主题数据仓库中的数据是面向主题进行组织的。主题是一个抽象地概念,是在较高层次上

4、将企业信息系统中的数据综合、归类并进行分析利用地抽象;在逻辑意义上 ,它对应企业中某一宏观分析领域所涉及的分析对象。比如一家商场,概括分析领域的对象 ,应有地主题包括供应商、商品、顾客等。面向主题地数据组织方式是根据 分析要求将数据组织成一个完备的分析领域 ,即主题域。主题域应该具有以下两个特点 :(1独立性,如针对商品地分析所要求的是 “商品”主题域 ,它必须具有独立内涵。(2完备性,任何对商品地分析处理要求 ,应该能在 “商品”这一主题域内找到该分 析处理所要求的内容 ;如果对商品的某一分析处理要求涉及现存 “商品 ”主题之外地 数据,那么就应当将这些数据增加到 “商品”主题中来,从而逐步

5、完善 “商品”主题。或 许有人担心 ,要求主题地完备性会使得主题包含有过多的数据项而显得过于庞大。1.2数据仓库是集成的数据仓库的数据是从原有的分散的数据库数据中抽取来的 ,因此数据在进入数 据仓库之前 ,必然要经过加工与集成 ,统一与综合。这一步实际是数据仓库建设中最 关键、最复杂的一步。首先 ,要统一原始数据中所有矛盾之处 ;然后将原始数据结构作一个从面向应用 到面向主题的大转变 ;最后还要进行数据综合和计算 ;1.3 数据仓库是不可更新的数据仓库主要是供决策分析之用的 ,所涉及的数据操作主要是数据查询 ,一般情 况下并不进行修改操作。1.4数据仓库是随时间变化的数据仓库中的数据不可更新

6、3, 是指数据仓库的用户进行分析处理时是不进行 数据更新操作的 ,但并不是说 ,在数据仓库的整个生命周期中数据集合是不变的。数据仓库的数据是随时间变化不断变化的 ,这一特征表现在以下三个方面 :(1数据仓库随时间变化不断增加新的数据内容。(2数据仓库随时间变化不断删去旧的数据内容。(3 数据仓库中包含大量的综合数据 ,这些综合数据中很多与时间有关 ,一次,数据 仓库数据的键码都包含时间项 ,以表明数据的历史时期。2联机分析处理技术OLAP(On-Line Analytical Processing 即联机分析处理 4, 是以海量数据为基础的 复杂分析技术。 OLAP 支持各级管理决策人员从不同

7、的角度、快速灵活地对数据仓 库中的数据进行复杂查询和多维分析处理 ,辅助各级领导进行正确决策 ,提高企业的 竞争力。2.1多维数据模型多维数据模型是数据分析时用户的数据视图 ,是面向分析的数据模型 ,用于给分 析人员提供多种观察的视角和面向分析的操作。2.2多维分析操作常用的 OLAP 多维分析操作有切片 (slice、切块(dice、旋转 (pivot、向上综合 (roll-up 、向下钻取 (drill-down 等。通过这些操作 ,使用户能从多个角度多侧面观察 数据、剖析数据 ,从而深入地了解包含在数据中的信息与内涵。3数据挖掘技术面对日益激烈的市场竞争 ,客户对迅速应答各种业务问题的能

8、力的要求不断提高 ,不仅要求回答发生什么 ,为何发生 ,还要回答将发生什么。数据挖掘技术正是支持 回答 “将发生什么 ”这类业务问题的。 3.1 数据挖掘的概念数据挖掘 5是从大量数据中发现并提取隐藏在内的、人们事先不知道的但又 可能不用的信息和的一种新技术。数据挖掘技术涉及数据库技术、人工智能技术、机器学习、统计分析等多种技 术,它使决策支持系统 (DSS 跨入一个新阶段。3.2数据挖掘的数据源数据挖掘的数据主要有两种来源 6, 可以从数据仓库中来的 ,也可以直接从数据 库中来。这些实际的应用数据往往是不完全的、有噪声的、模糊的、随机的,因此要根据不同的需求在挖掘之前进行预处理。3.3数据仓

9、库的功能数据仓库的功能 7 主要有以下几种 :(1概念描述 :就是指归纳总结出数据的某些特性。(2关联分析 :若两个或多个变量的取值之间存在某种规律性 ,就称为关联。(3 分类和预测 :找到一定的函数或者模型来描述和区分数据类之间的区别 ,用这 些函数和模型对未来进行预测。(4 聚类:将数据分为多个类 ,使得类内部数据之 (下转第 764页数据仓库与联机分析处理技术综述李大志 1 张阿红 2(1.南阳理工学院后勤处河南南阳 473000;2.南阳理工学院软件学院河南南阳 473000【摘要】本文针对数据仓库 DW,OLAP 和数据挖掘 DM 三种技术进行了分 析综述。【关键词】 DW;OLAP

10、; 数据挖掘Data Warehouse and O n-line Analytical Processing Technology Overview【Abstract】 Based on data warehouse DW,OLAP and data mining DM three technology to carry on the analysis are reviewed in this pape【r. Key words】 DW;OLAP;Data Mining IT论坛739科技信息SCIENCE &TECHNOLOGY INFORMATION2010年第 35期(上接第

11、739 页间的差异最小 ,而类之间数据的差异最大。(5 孤立点的检测 :孤立点是指数据中的整体表现行为不一致的那些数据集合。(6 趋势和演变分析 :描述行为随着时间变化的对象所遵循的规律或趋势。4小结数据仓库 DW ,OLAP 和数据挖掘 DM 是作为三种独立的信息处理技术出现 的。本文详细分析了这三种技术 ,数据仓库用于数据的存储和组织 ,OLAP 集中于数 据的分析 ,数据挖掘则致力于知识的自动发现。【参考文献】1 王珊 ,等.数据库技术丛书之一 :数据仓库技术与联机分析处理 .北京:科技出版社,1998.2 Inmn W H.数据仓库 .王志海,等,译.北京:机械工业出版社 ,2000.

12、3Inmn W H , 等.数据仓库管理 .王天佑,译.北京:电子工业出版社 ,2000.4Kimball R ,等.数据仓库工 具箱.谭明金,译.北京:电子工业出版社 ,2003.5Imhoff C ,等.数据仓库涉及 .于戈,译.北 京 :机械工业出版社 ,2004.6Mattison R.Web 仓库工程与知识管理 .高军,译.北京 :清华大学出版 社,2003.7Bain T ,等.SQL Server2000数据仓库与 Analysis Services.邵勇,等,译.北京: 中国电力出版社 ,2003.作者简介:李大志（1977,男,河南南阳人 ,助理实验师。责任编辑 :汤静 科科

13、保护机制缺位、政策性出口信用保险和海外投资保险制度存在多方面等。3.2.2 金融服务体系不完善非洲国内金融市场发展水平较低 ,难以找到中国金融机构的海外分支 ,加之许多 国家市场存在较大的风险 ,因而提供融资服务的金融机构往往收取高额的利息 ,企业 融资成本较高 ,影响了发展。但是目前 ,中国金融机构对企业的支持大多位于国内 ,且 作用范围很有限。3.2.3各种政策间的协调不足 中国与非洲开展了政治外交、经济、文化等多个领域的交流和合作。各领域都 有一套促进的政策 ,但总体而言较为分散 ,没有形成合力。这就造成了政策的协调上 难度较大 ,不利于中非间互利共赢长期发展目标的实现。3.2.4投资行

14、业领域集中中国每年对非洲投资主要是制造业。制造业投资主体总数占53.4%,但是 ,因为纺织服装业也是许多非洲国家的支柱产业、出口创汇的重要产业,又无法和中国竞争,这就导致非洲一些以纺织服装业为主导产业的国家对中国纺织服装产品和产业 在全球的扩张充满戒备乃至敌意。一些非洲纺织企业甚至呼吁本国政府支持欧美对 中国纺织品出口重新设限。3.2.5 双方了解不够 ,合作中存在文化冲突作为两种截然不同的文化 ,中非在经济交往和合作中难免会遇到冲突。把自身 的观念和文化强加于对方 ,必然会引起冲突 ,给经济合作造成阻碍。另一方面 ,中国企 业在非洲投资时 ,履行社会责任的意识还比较淡薄 ,许多企业在环境保护

15、、劳资关系 等方面的处理上还欠妥当 ,一些企业还存在着无序竞争的情况 ,这些都影响了中非合 作的发展。4中国对非洲投资战略的建议鉴于以上分析存在的问题 ,中国对非洲投资应从以下几个方面进行战略调整 :4.1提升非洲国家的产业竞争力对非投资要重点促进东道国的产业发展。中国对非投资 ,要实现互利共赢的战 略目标 ,需要着力促进和提升非洲自身的产业能力。通过投资 ,完善东道国当地的产 业链,提供相关技术、培养专业技术人员和管理人才。4.2创新经济合作模式优惠贷款是长期以来中国对非援助的主要方式之一。为了在平等相待、互利共 赢的基础上推进非洲的工业化 ,增强非洲自身发展的能力 ,必须转变对非援助的方

16、式。可以考虑由优惠贷款等单方面的给予转变为投资合作基金等 ,既有利于中非经 贸合作的进一步推进 ,又能够在一定程度上避免来自西方的抱怨和指责。 4.3 营造适 合企业发展的金融环境非洲国家市场对金融的需求很强 ,但国内金融市场不发达、资本市场体系不完 善,过高的风险使得许多外国金融机构望而却步 ,因此 ,金融服务供求方面存在巨大的 缺口。然而 ,企业“走”向非洲 ,需要强有力的金融支持 ,尤其在海外融资、风险控制、 信用支持等方面需要更完善的服务。【参考文献】1项莹,蔡芳芳 .扩大对非洲直接投资的策略选择 J.国际经济合作 ,2006(7:4-6.2张刚 .外国石油公司在非洲的竞争趋势分析 J

17、.国际石油经济 ,2008(16:7-10.3 王圳 .加强中国与其他发展中国家的经贸合作 J.国经济合作 ,2006(3:16-19.4 马强 .我国对非洲投资合作问题的分析 .对外经贸实务 ,2008(11:21-23.5李桂 芳.中国企业对外直接投资分析报告 M. 北京:中国经济出版社 ,2007.6李献兵 ,郭玉 华 .我国中小企业在非洲的投资策略研究 J. 中国流通经济 ,2009(3:71-73.责任编辑 :汤静 科(上接第 754 页当 250us 的定时中断到了 ,判断一个周期是否到 ,到了就重新置初 值 50,置 P2.3口低电平(电机转将 49H (一个周期中为高电平的中断

18、次数的内容放入 48H 中,否则就将 48H 判断的内容不为 0就减 1,保持 P2.3为低电平本次中断就结束 为 0 就跳转 ,重新将 49H 的内容放入 48H 单元。这样我们只要通过改变 49H 中的内 容就可以改变 PWM 波的占空比。则电机两端电压随占空比变化而变化 ,因而控制 电机转速的变化。 2.3.2 显示程序简介本次设计的显示部分采用的是动态显示。所谓动态显示 ,就是一位一位地轮流 点亮各位显示器 (扫描 ,对于每一位显示器来说 ,每隔一段时间点亮一次。显示器的亮 度既与导通电流有关 ,也与点亮时间和间隔时间的比例有关。调整电流和时间参数 , 也可以实现亮度较高较稳定的显示。若显示器的位数不大于8 位,则控制显示器公共极电位只需一个 8位口（称为扫描口 ,控制各位显示器所显示的字形也需一个 8位口 （称为段数据口。本次设计使用的是 4位共阴极显示器。 89C51的 P0口作为段数据 口,接显示器的各