数据仓库技术PPT课件

数据仓库技术 2020 4 20 1 知识管理与数据分析实验室 主要内容 从数据库到数据仓库数据仓库的体系结构数据仓库的构建数据仓库关键技术数据仓库技术的应用主流厂商及产品值得注意的问题数据仓库技术的发展前景 2020 4 20 知识管理与数据分析实验室 2 从数据库到数据仓库 2020 4 20 知识管理与数据分析实验室 3 数据仓库的定义 概念的提出 由著名的数据仓库专家W H Inmon1992年出版的著作 BuildingtheDataWarehouse 一书中提出的 数据仓库的定义 数据仓库 DataWarehouse 是一个面向主题的 SubjectOriented 集成的 Integrate 相对稳定的 Non Volatile 反映历史变化 TimeVariant 的数据集合 用于支持管理决策 2020 4 20 知识管理与数据分析实验室 4 数据仓库的特点 2020 4 20 知识管理与数据分析实验室 5 数据仓库的面向主体性 2020 4 20 知识管理与数据分析实验室 6 数据仓库的集成性 2020 4 20 知识管理与数据分析实验室 7 数据仓库的相对稳定性和反应历史变化 2020 4 20 知识管理与数据分析实验室 8 数据仓库与传统数据库的区别 2020 4 20 知识管理与数据分析实验室 9 数据仓库的基本体系结构 一 2020 4 20 知识管理与数据分析实验室 10 数据仓库的基本体系结构 二 源数据 数据仓库的数据来源多个不同的数据源 它可以是通常的数据库系统 也可以是非传统的数据 如文件 HTML文件 知识库等 仓库管理系统 负责数据仓库的内部维护和管理 提供服务包括数据存储的组织 数据的维护 数据的分发及数据仓库的例行维护等 2020 4 20 知识管理与数据分析实验室 11 数据仓库的基本体系结构 三 数据仓库 存储已经按企业级视图转换的数据 供分析处理用 分析工具 用于完成实际决策问题所需要的各种查询检索工具 多维数据的OLAP分析工具 DM数据挖掘工具等 以实现决策支持系统的各种要求 2020 4 20 知识管理与数据分析实验室 12 数据仓库的数据组织结构 一 2020 4 20 知识管理与数据分析实验室 13 数据仓库的数据组织结构 二 源数据经过综合后 首先进入当前细节级 并根据具体需要进行进一步的综合 从而进入轻度综合级乃至高度综合级 老化的数据将进入早期细节级 由此可见 数据仓库中存在着不同的综合级别 一般称之为 粒度 粒度越大 表示细节程度越低 综合程度越高 2020 4 20 知识管理与数据分析实验室 14 数据仓库的构建 2020 4 20 知识管理与数据分析实验室 15 数据仓库的关键技术 数据的抽取 通过抽取过程将数据从联机事务处理系统 外部数据源 脱机的数据存储介质中导入数据仓库 数据的存储和管理 对大量数据的存储和管理 并行处理 决策支持查询的优化 联机分析处理 OLAP 技术 钻取 旋转 切片 数据挖掘技术 在从大量的 不完全的 有噪声的 模糊的 随机的数据中 提取隐含在其中的 人们事先不知道的 但又是潜在有用的信息和知识 2020 4 20 知识管理与数据分析实验室 16 OLAP分析 钻取 2020 4 20 知识管理与数据分析实验室 17 OLAP分析 旋转 2020 4 20 知识管理与数据分析实验室 18 OLAP分析 切片 2020 4 20 知识管理与数据分析实验室 19 数据仓库技术的应用 一 数据仓库在客户服务方面的应用同Internet和电子商务 多媒体技术专家系统和智能和呼叫中心等信息技术结合 为CRM提供技术基础 实现企业识别 保留及挽回最具价值客户 数据仓库在营销领域的应用把数据库采掘与预测模型以及台式显示工具结合起来 帮助市场营销人员对客户行为作深入的洞察分析 2020 4 20 知识管理与数据分析实验室 20 数据仓库技术的应用 二 数据仓库在证券业的应用处理客户分析 账户分析 证券交易数据分析和非资金交易分析等多个业界关心的问题 这是证券业扩大经营和防范风险的预警行动 数据仓库在银行领域的应用银行可以建立企业客户群和个人客户群的数据库 并对企业的结构 经营 财务及市场竞争等多个数据源进行统一组织 形成一个一体化的存储结构 为决策分析奠定基础 数据仓库在税务领域的应用制定有效的征税计划 2020 4 20 知识管理与数据分析实验室 21 主流厂商及产品 IBMParallelEditionInformixExtendedParallelServer XPS MetaCubeOLAP中间件MicrosoftSQLServerPlatoDataTransformationServicesNCRTeradataScalableWa