电子商务中的数据处理技术

数据仓库数据仓库概念及特点数据仓库的定义数据仓库是：用于管理决策支持的面向主题、集成、稳定、随时间变化的数据集合。数据仓库的特点：面向主题、集成、时变，不可修改。数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据集市是一种更小、更集中的数据仓库，是为企业提供分析企业数据的一条廉价途径。元数据是关于数据的数据，它描述了数据仓库的数据和环境。多维数据库就是以多维方式在组织数据。外部数据是不能在联机事务处理（OLTP）系统中找到，但为增强数据仓库中信息质量而所需的数据。数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库与数据库的区别数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库组织和管理数据的方法与普通数据库不同。主要表现在以下3个方面。①它依据决策要求，只从数据库中抽取那些需要的数据，并进行一定的处理。②数据仓库是多维的，即数据仓库中数据的组织方式有多层的行和列。③它采用分析型的数据处理而非普通的操作型的数据处理方式，支持决策处理而非常规事务处理。操作型数据的特点分析型数据的特点细节的综合的、经过提炼的在存取的瞬间是准确的代表过去的数据可更新不更新操作需求通常事先可知分析需求通常事先不知道生命周期符合SDLC生命周期不同于SDLC对性能（如操作时延）要求高对性能要求较宽一个时刻操作一个数据单元一个时刻操作一个数据集合事物驱动分析驱动面向应用面向分析一次操作数据量小一次操作数据量很大支持日常操作需求支持管理需求操作型数据和分析型数据的区别数据仓库的技术支持高性能的数据库服务器数据库互操作技术并行数据库技术数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库的特性数据仓库的数据是集成的。

数据仓库的数据是不可更新的。数据仓库的数据是面向主题的。数据仓库的数据是随时间不断变化的。数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库的应用目标优化企业内部管理控制：数据仓库的第二类应用目标是对企业的管理控制进行优化，包括产品生产和人员管理。为企业增加商业机会：数据仓库的第三类应用目标是为了企业增加商业机会。

作为企业的核心业务：以核心业务为主要目标的数据仓库是关键业务驱动的。数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库的体系结构产品的生产过程与数据仓库的数据处理过程的对比

产品的生产制造数据仓库的数据处理目的为客户和消费者提供他们所需的产品为某些分析目标提供他们所需的面向主题的，集成的，相对稳定的和随时间变化的数据集合库存存货：维护存货和过多的存货会导致效率低下，成本高昂孤立的数据：孤立的数据就像存货一样维护起来成本昂贵，只有将其转变成能传递给用户使用的知识，这些数据才有用。设计设计蓝图和原材料：对产品进行概念描述和设计，研究和确定需要什么原材料，哪些原材料能生产出最好的产品模型和数据元：对应用目标进行建模描述，研究和确定需要什么数据，哪些数据更能满足目标需求，并将这些数据集合成数据元生产部件：将这些原材料制成部件主题数据仓库：将数据元组合成主题数据仓库组装产品：将部件装配成产品数据中心：由主题数据仓库生成数据中心销售分销渠道：产品经由各种渠道（批发，直销，代销，零售等）销售出去分发途径：数据通过各种途径（因特网，内部网，报告，计算机程序等）分发出去产品完善产品使用过程：反馈，改进，升级，增强，淘汰数据使用过程：调用，增强，升级，废弃数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用数据仓库的功能

数据的抽取、转换和加载功能

数据仓库的功能

数据的清洗、融合与集成功能

数据存储管理和查询功能

运行维护功能

数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用联机分析处理(OLAP)OLAP是在联机事务处理（OLTP）基础上发展起来的。

OLAP工具可分为两大类，一类是基于多维数据库的，另一类是基于关系数据库的。联机分析处理技术也称多维分析，它是一种数据分析技术，能够完成基于某种数据存储的数据分析功能。OLAP服务器是一个高容量和多用户的数据操作引擎,用于支持和操作多维数据结构。数据仓库数据仓库概念及特点数据仓库的结构及功能联机分析处理技术（OLAP）数据挖掘技术数据挖掘的概念和内涵现代数据库技术商业智能商业智能的特点和作用商业智能的内涵商业智能的应用联机分分析处处理(OLAP)数据源源：可以是是操作作型数数据库库、历历史数数据、外部部数据或或从己己有的的数据据仓库库环境境所得得的信信息。抽取/传播：是从各各种数数据源源和不不同的的平台台收集集数据并将将它们们移动动到数数据仓仓库的的过程程。相关概念转换/清洗：：转换换主要要用于于合并并不同同数据据源的的数据据。清清洗确保保数据据仓库库具有有正确确的、、有用用的和和有意意义的的信息息。数据提提炼：创建数数据仓仓库的的一个个子集集、创创建计计算域域/虚虚拟域、、汇总总信息息和聚聚合信信息。数据存存储与与访问问数据仓仓库数据仓仓库概概念及及特点点数据仓仓库的的结构及及功能能联机分分析处处理技技术（（OLAP）数据挖挖掘技技术数据挖挖掘的的概念和和内涵涵现代数数据库库技术术商业智智能商业智智能的的特点和和作用用商业智智能的的内涵涵商业智智能的的应用用OLAP分析中中的维维度与与事实实维表的的本质质是多多维分分析空空间在在某个个角度度上的的投影影，多多个维表共共同建建立一一个多多维的的分析析空间间。在OLAP分析中中有一一些常常用的的维度度：时间维维、地理维维、机构维维、客户维维、产品维维。模型中中的事事实一一般用用维表表来描描述。。事实是是各个个维度度的交交点，，是对对某个个特定定事件件的度度量。。数据仓仓库数据仓仓库概概念及及特点点数据仓仓库的的结构及及功能能联机分分析处处理技技术（（OLAP）数据挖挖掘技技术数据挖挖掘的的概念和和内涵涵现代数数据库库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用多维OLAP分析图产品时间财务指标卷烟销售分析国产烟进口烟T1T2T3T4收入开销数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘掘的概念和内内涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用钻取收入开销产品时间财务指标卷烟销售分析进口烟国产烟Q1Q2Q3Q4杭产烟上海烟中华双喜数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘掘的概念和内内涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用切片数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘掘的概念和内内涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用旋转数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘掘的概念和内内涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用数据挖掘掘的定义义数据挖掘掘是从数数据中抽抽取正确确的、有有用的、、以前未未知的和综合合的可理理解的信信息，并并使用该该信息作作商业决决策的过程。。数据挖掘掘的意义义数据挖掘掘是一种种决策支支持的过过程，能高度自自动地分分析企业原有有的数据据，进行行归纳推推理，从从中挖掘掘出潜在在的模式，预预测客户户的行为为，帮助助企业的的决策者者调整市市场策略，从从而减少少风险，，辅助做做出正确确的决策策。数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘的的概念和内涵涵现代数据库库技术商业智能商业智能的的特点和作用用商业智能的的内涵商业智能的的应用联机分析处处理的局限限联机分析处处理需要对对用户的需需求有全面面而深入的的了解。抽取信息的的质量依赖赖于用户对对结果的解解释。常常需要以以假设为基基础。数据仓库数据仓库概概念及特点点数据仓库的的结构及功能能联机分析处处理技术（（OLAP）数据挖掘技技术数据挖掘的的概念和内涵涵现代数据库库技术商业智能商业智能的的特点和作用用商业智能的的内涵商业智能的的应用概念描述功功能关联分析功功能数据挖掘的功能分类和预测测功能聚类功能检测功能演变分析功功能数据仓库数据仓库概概念及特点点数据仓库的的结构及功能能联机分析处处理技术（（OLAP）数据挖掘技技术数据挖掘的的概念和内涵涵现代数据库库技术商业智能商业智能的的特点和作用用商业智能的的内涵商业智能的的应用金融业：分分析金融企企业影响业业务的关键键因素银行业：辅辅助金融政政策的制定定数据挖掘技术的应用保险业：发发现客户，，防止欺诈诈零售业：了了解各户购购买行为医疗与保健健：找到特特定疾病的的治疗方法法物流业：优优化物流网网络电信业：确确定电信模模式，捕捉捉盗用行为为数据仓库数据仓库概概念及特点点数据仓库的的结构及功能能联机分析处处理技术（（OLAP）数据挖掘技技术数据挖掘的的概念和内涵涵现代数据库库技术商业智能商业智能的的特点和作用用商业智能的的内涵商业智能的的应用数据挖掘的的过程数据仓库数据仓库概概念及特点点数据仓库的的结构及功能能联机分析处处理技术（（OLAP）数据挖掘技技术数据挖掘的的概念和内涵涵现代代数数据据库库技技术术商业业智智能能商业业智智能能的的特点点和和作作用用商业业智智能能的的内内涵涵商业业智智能能的的应应用用数据据挖挖掘掘关关键键技技术术分类类：：为为一一个个事事件件或或对对象象归归类类，，即即预预测测一一个个特特定定的的对对象象属于于哪哪一一类类。。聚类类：：根根据据一一定定的的聚聚类类规规则则把把整整个个数数据据分分成成不不同同的的组组，，即将将具具有有某某种种相相同同特特征征的的数数据据聚聚在在一一起起。关联联技技术术：：从大大量量的的商商务务事事务务记记录录中中发发现现潜潜在在的的关关联联关系系，，可可以以帮帮助助人人们们作作出出正正确确的的商商务务决决策策。关联规则关联分析“啤酒与尿布布”的故事购物篮分析数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用以数据仓库为为中心的商务务数据库系统统数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用现代数据库技技术的优越性性联机分析处理理从数据仓库库中的集成数数据出发，实现了分析方法和数数据结构的分分离。数据挖掘以数数据仓库和多多维数据库中中的大量数据据为基础，自动地发现数数据中的潜在在模式。数据仓库解决决了数据不统统一的问题。。数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用数据库技术对对电子商务系系统的支持数据仓库数据仓库概念及特点数据挖掘技术决策者分析工具浏览器数据仓库Web数据库内部业务EDI单证Web数据库业务数据库数据收集与发布Web系统决策支持系统决策EDI系统管理信息系统数据收集

数据格式转化商务企业数据库系统数据库技术对对电子商务系系统的支持数据的收集、、存储和组织织决策支持对EDI的支支持对Web支支持数据仓仓库数据仓仓库概概念及及特点点数据仓仓库的的结构及及功能能联机分分析处处理技技术（（OLAP）数据挖挖掘技技术数据挖挖掘的的概念和和内涵涵现代数数据库库技术术商业智智能商业智智能的的特点和和作用用商业智智能的的内涵涵商业智智能的的应用用商业智智能BI系统的的最终终目标标是使使用户户能够够消费费大量量有关关数据据，对对其进行行分析析从而而使企企业有有机会会增加加收入入或者者节省省成本本。商业智智能（（BI）系统统使组组织能能够通通过利利用客客户、、供应应商以及内内部业业务操操作的的有关关信息息来提提高商商业性性能。。数据仓仓库数据据仓仓库库概概念念及及特特点点数据据仓仓库库的的结构构及及功功能能联机机分分析析处处理理技技术术（（OLAP））数据据挖挖掘掘技技术术数据据挖挖掘掘的的概念念和和内内涵涵现代代数数据据库库技技术术商业业智智能能商业业智智能能的的特点点和和作作用用商业业智智能能的的内内涵涵商业业智智能能的的应应用用从多多个个来来源源收收集集数数据据集结结、、组组织织以以及及标标准准化化仓仓库库中中的的信信息息

商业智能系统

提供供分分析析工工具具绩效效信信息息架架构构能能根根据据基基础础指指标标设设定定企企业业目目标标数据据仓仓库库数据据仓仓库库概概念念及及特特点点数据据仓仓库库的的结构构及及功功能能联机机分分析析处处理理技技术术（（OLAP））数据据挖挖掘掘技技术术数据据挖挖掘掘的的概念念和和内内涵涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用商业智能能系统组组成图数据仓库库数据仓库库概念及及特点数据仓库库的结构及功功能联机分析析处理技技术（OLAP）数据挖掘掘技术数据挖掘掘的概念和内内涵现代数据据库技术术商业智能能商业智能能的特点和作作用商业智能能的内涵涵商业智能能的应用用实现商务务智能的的业务规规则和条条件用户面临临激烈的的市场竞竞争。户在IT方面必必须有足足够的的的资金。。用户的数据积积累已达到一一定规模。数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用商业智能系统统的主要优点点商业智能系统统着眼于终端端用户对业务务数据的访问问和业务数据的传传送，它同时时为信息提供供者和信息消消费者提供了支持。。商业智能系统统支持对所有有格式商务信信息的访问，，而不仅仅是那些存存储在数据仓仓库中的信息息。商业智能系统统不仅支持最最新的IT技术，同时也也提供了一系列的应用用解决方案。。数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应应用商业智能的管管理方式基于例外的管管理方式。基于事实的管管理方式。基于目标的管管理方式。数据仓库数据仓库概念念及特点数据仓库的结构及功能联机分析处理理技术（OLAP）数据挖掘技术术数据挖掘的概念和内涵现代数据库技技术商业智能商业智能的特点和作用商业智能的内内涵商业智能的应