第1章商务智能基本概念.ppt

第1章商务智能基本概念 信息技术的不断推广应用 将企业带入了一个信息爆炸的时代 每日 每时 每刻都有潮水般的信息出现在管理者的面前 等待管理者去处理 去使用 与此同时 企业的管理者在管理中面对来自不同部门的 相互矛盾的信息无法对所要解决的决策问题提出正确的解决方案 为此 需要一种新的信息处理技术能够使决策者们获取及时准确的信息 以理解商务活动并做出智能化的 更有效的决策 即能从海量的数据中提取有用的信息并转化为商务知识 从而告别 拍脑袋 决策方式 通过本章学习 可以了解 商务智能的发展及体系结构 数据仓库的总体结构框架 数据仓库的功能结构 数据仓库的环境支持结构 数据挖掘的基本原理 数据挖掘的应用范围和应用过程 1 1商务智能的基本概念 1 1 1商务智能的定义1989年美国加特纳公司的分析师HowardDresner首次提出 商务智能 美国IBM公司的定义Microsoft认为商务智能IDC国际数据公司BusinessObjects公司认为商务智能Teradata公司认为商务智能的目的美国MicroStrategy公司的定义 1 1商务智能的基本概念 商务智能是数据仓库 联机分析处理和数据挖掘等相关技术走向商业应用后形成的一种应用技术 该技术收集 汇总了与商务活动有关的各种数据 将其集成到数据仓库中 采用联机分析技术对商务活动进行实时的监控 分析 便于及时采取有效的商务决策 提升商务活动的绩效 应用数据挖掘技术对描述商务活动的数据进行挖掘 以获取有效的商务信息 从中提取商务知识 为企业商业发展寻找新的机遇 1 1商务智能的基本概念 1 1 2商务智能的发展与应用1 商务智能的发展从20世纪60年代计算机用于管理信息处理开始 经过40多年的发展 信息处理技术的发展经历了电子数据处理系统 EDPS ElectronicDataProcessingSystem 管理信息系统 MIS ManagementInformationSystem 和决策支持系统 DSS DecisionSupportingSystem 等阶段 1 1商务智能的基本概念 2 商务智能的作用作用主要体现在理解 改善 衡量和创造四个方面 3 商务智能的作用域战略管理 营销管理 市场管理 客户关系管理和风险管理等 1 1商务智能的基本概念 1 1 3商务智能的体系结构商务智能体系架构主要有比尔 恩门的信息工厂 扎克曼的企业体系结构 美国数据仓库研究院的商务智能体系结构以及加特纳公司的商务智能体系结构等 这些体系结构中均包含了商务分析 OLAP 数据挖掘和数据仓库四大部分 图1 1 1 1商务智能的基本概念 1 2数据仓库的发展与展望 1 2 1从传统数据库到数据仓库1 决策处理的系统响应问题2 决策数据需求的问题3 决策数据操作的问题4 数据仓库与传统数据库的对比 1 2数据仓库的发展与展望 表1 1数据仓库与数据库对比表 1 2数据仓库的发展与展望 1 2 2数据仓库的定义与基本特性WilliamH Inmon在1993年所写的论著 BuildingtheDataWarehouse 则首先系统性地阐述了关于数据仓库的思想 理论 为数据仓库的发展奠定了历史基石 在文中 将数据仓库定义为 一个面向主题的 集成的 随时间变化的 非易失性数据的集合 用于支持管理层的决策过程 1 2数据仓库的发展与展望 1 面向主题性面向主题性表示了数据仓库中数据组织的基本原则 数据仓库中的所有数据都是围绕着某一主题组织的 确定主题以后 需要确定主题应该包含的数据 不同的主题之间可能会出现相互重叠的信息 主题在数据仓库中可以用多维数据库方式进行存储 主题的划分中 必须保证每一个主题的独立性 1 2数据仓库的发展与展望 2 数据集成性根据决策分析的要求 将分散于各处的源数据进行抽取 筛选 清理 综合等工作 最终集成到数据仓库中 3 数据的时变性数据应该随着时间的推移而发生变化 不断地生成主题的新快照4 数据的非易失性数据不进行更新处理 1 2数据仓库的发展与展望 5 数据的集合性按照主题 以多维数据库方式进行存储的多维模式 以关系数据库方式进行存储的关系模式或以两者相结合的方式进行存储的混合模式6 支持决策作用 1 2数据仓库的发展与展望 1 2 3数据仓库的发展1 基于关系对象数据库的数据仓库2 网络的影响3 操作型动态数据仓库4 Web应用中的多智体技术 1 3数据仓库的体系结构 1 3 1数据仓库的概念结构数据源 数据准备区 数据仓库数据库 数据集市 知识挖掘库以及各种管理工具和应用工具 图1 2 1 3数据仓库的体系结构 1 3数据仓库的体系结构 1 3 2虚拟数据仓库结构不需要从业务系统中抽取数据到新的数据存储位置 数据仓库中 1 3数据仓库的体系结构 1 3 3数据集市结构 1 3数据仓库的体系结构 1 3 4单一数据仓库结构 1 3数据仓库的体系结构 1 3 5分布式数据仓库结构 1 4数据仓库的参照结构 数据仓库的基本功能包含 数据抽取 数据筛选 清理 清理后的数据加载 设立数据集市 完成数据仓库的查询 决策分析和知识的挖掘等操作 数据仓库的管理层分成数据管理与元数据管理两部分 主要负责对数据仓库中的数据抽取 清理 加载 更新等操作进行管理 数据仓库环境支持层包含数据传输和数据仓库基础两部分 1 4数据仓库的参照结构 1 4 1数据仓库基本功能层1 数据仓库的数据源业务数据 历史数据 办公数据 Web数据 外部数据以及数据源元数据 1 4数据仓库的参照结构 2 数据准备区功能结构 1 4数据仓库的参照结构 3 数据仓库功能结构 1 4数据仓库的参照结构 4 数据集市 知识挖掘库结构 1 4数据仓库的参照结构 5 数据仓库的数据存取与使用结构 1 4数据仓库的参照结构 1 4 2数据仓库的管理层1 数据仓库的数据管理层 1 4数据仓库的参照结构 2 数据仓库的元数据管理层 1 4数据仓库的参照结构 1 4 3数据仓库的环境支持层1 数据仓库的数据传输层 1 4数据仓库的参照结构 2 数据仓库的基础层 1 5数据挖掘技术概述 1 5 1数据挖掘的发展发展原因主要有 超大规模数据库的出现 先进的计算机技术 经营管理的实际需要和数据的精深计算能力 1 5数据挖掘技术概述 1 5 2数据挖掘的定义1 数据挖掘的技术定义数据挖掘是从大量的 不完全的 有噪声的 模糊的 随机的实际数据中 提取隐含在其中的 人们所不知道的 但又是潜在有用的信息和知识的过程 2 数据挖掘的商业定义一种崭新的商业信息处理技术 其主要特点是对商业数据库中的大量业务数据进行抽取 转化 分析和模式化处理 从中提取辅助商业决策的关键知识 1 5数据挖掘技术概述 1 6数据挖掘技术与工具 1 6 1常用数据挖掘技术1 传统分析类线性分析和非线性分析 回归分析 逻辑回归分析 单变量分析 多变量分析 时间序列分析 最近邻算法和聚类分析等技术 2 知识发现类人工神经网络 决策树 遗传算法 粗糙集 规则发现 关联顺序等 3 数据挖掘技术的发展文本数据挖掘 Web数据挖掘 可视化系统 空间数据挖掘和分布式数据挖掘技术等 1 6数据挖掘技术与工具 1 6 2常用数据挖掘工具1 按使用方式分类的数据挖掘工具决策方案生成工具 商业分析工具和研究分析工具三大类 2 按数据挖掘技术分类的数据挖掘工具基于神经网络的工具 基于规则和决策树的工具 基于模糊逻辑的工具和综合性数据挖掘工具等 3 按应用范围分类的数据挖掘工具专用型数据挖掘工具和通用型数据挖掘工具 1 6数据挖掘技术与工具 1 6 3数据挖掘工具的评价标准1 模式种类的数量2 解决复杂问题的能力3 操作性能4 数据获取能力5 挖掘结果的输出6 噪声数据的处理及挖掘工具的鲁棒性 1 6数据挖掘技术与工具 1 6 4常用数据挖掘工具选择从工具的实用性和技术性方面进行考察 1 7数据挖掘的应用 1 7 1数据挖掘与数据仓库大多数数据挖掘工具需要在集成的 一致的 经过清理的数据上进行挖掘 在数据仓库的构造过程中已经围绕数据仓库组建了包括 数据存取 数据集成 数据合并 异种数据库的转换 ODBC OLEDB的连接 Web访问和服务工具以及报表与OLAP分析工具等全面的数据处理和数据分析基础设施 数据仓库中的OLAP完全可以为数据挖掘提供有关的数据操作支持数据挖掘与数据仓库的应用已经紧密地捆绑在一起 1 7数据挖掘的应用 1 7 2数据挖掘过程数据挖掘过程一般需要经历