NIEH电子商务师--电子商务的数据仓库管理模块PPT课件

1 第6讲电子商务的数据仓库管理模块 NIEH电子商务师 2 考核内容 数据仓库技术的概念数据仓库技术的设计过程数据仓库的开发及实现过程数据仓库对电子商务支持的途径计算机仓库管理系统 WMS 3 有价值的知识 可怕的数据 4 数据爆炸 知识贫乏 苦恼 淹没在数据中 不能制定合适的决策 数据 知识 决策 5 数据处理一般分为两种类型 操作型数据处理 事务处理 指对数据库联机的日常操作分析型数据处理从大量的事务型数据库中抽取数据 并将其清理 转换为新的存储格式 涉及数据仓库 6 数据库 数据库 简单来说是本身可视为电子化的文件柜 存储电子文件的处所 用户可以对文件中的数据运行新增 截取 更新 删除等操作 数据库指的是以一定方式储存在一起 能为多个用户共享 具有尽可能小的冗余度 与应用程序彼此独立的数据集合数据库通常分为层次式数据库 网络式数据库和关系式数据库三种 7 在信息系统开发中使用较多的数据库模型是 A 关系型B 层次型C 环状型D 网状型 答案 A 8 在需求分析的基础上数据库设计一般经过 等基本步骤 A 概念结构设计B 逻辑结构设计C 物理结构设计D 数据库的建立和测试E 数据库运行和维护 答案 ABCDE 9 数据库系统 DATABASESYSTEMS 数据库系统 databasesystems 是由数据库及其管理软件组成的系统 它是为适应数据处理的需要而发展起来的一种较为理想的数据处理系统 也是一个实际可运行的存储 维护和应用系统提供数据的软件系统 是存储介质 处理对象和管理系统的集合体 10 数据库系统有大小之分 大型数据库系统有SQLServer Oracle DB2等 中小型数据库系统有Foxpro Access 数据库系统一般由数据库 数据库管理系统 DBMS 应用系统 数据库管理员和用户构成 DBMS是数据库系统的基础和核心 11 数据库系统一般由4个部分组成 1 数据库 database DB 是指长期存储在计算机内的 有组织 可共享的数据的集合 数据库中的数据按一定的数学模型组织 描述和存储 具有较小的冗余 较高的数据独立性和易扩展性 并可为各种用户共享 2 硬件 构成计算机系统的各种物理设备 包括存储所需的外部设备 硬件的配置应满足整个数据库系统的需要 3 软件 包括操作系统 数据库管理系统及应用程序 4 人员 主要有4类 12 第一类为系统分析员和数据库设计人员 系统分析员负责应用系统的需求分析和规范说明 他们和用户及数据库管理员一起确定系统的硬件配置 并参与数据库系统的概要设计 数据库设计人员负责数据库中数据的确定 数据库各级模式的设计 第二类为应用程序员 负责编写使用数据库的应用程序 这些应用程序可对数据进行检索 建立 删除或修改 第三类为最终用户 他们利用系统的接口或查询语言访问数据库 第四类用户是数据库管理员 databaseadministrator DBA 负责数据库的总体信息控制 DBA的具体职责包括 具体数据库中的信息内容和结构 决定数据库的存储结构和存取策略 定义数据库的安全性要求和完整性约束条件 监控数据库的使用和运行 负责数据库的性能改进 数据库的重组和重构 以提高系统的性能 13 数据库管理系统 数据库管理系统 databasemanagementsystem 是一种操纵和管理数据库的大型软件 用于建立 使用和维护数据库 简称dbms 14 数据库管理系统功能 1 数据定义 2 数据操作 DBMS提供数据操作语言DML DataManipulationLanguage 供用户实现对数据的追加 删除 更新 查询等操作 3 数据库的运行管理 15 4 数据组织 存储与管理 5 数据库的保护 6 数据库的维护 这一部分包括数据库的数据载入 转换 转储 数据库的重组合重构以及性能监控等功能 这些功能分别由各个使用程序来完成 7 通信 DBMS具有与操作系统的联机处理 分时系统及远程作业输入的相关接口 负责处理数据的传送 对网络环境下的数据库系统 还应该包括DBMS与网络中其他软件系统的通信功能以及数据库之间的互操作功能 16 数据库管理系统主要功能包括 数据库的建立和维护功能 数据操纵功能 数据库运行控制功能和 A 数据定义功能B 数据检索功能C 数据存储功能D 数据冗余控制功能 答案 A 17 数据库系统的开发设计过程 数据库系统的开发设计过程可分为 规划阶段 需求分析阶段 概念设计阶段 逻辑设计阶段 物理设计阶段 数据库实施阶段 运行与维护阶段 18 数据库系统的设计一般方法是需求分析 系统设计 系统实现 系统测试和 A 控制B 组织C 运行与维护D 执行 答案 C 19 ODBC即开放数据库互连 开放数据库互连 OpenDatabaseConnectivity ODBC 是微软公司开放服务结构 WOSA WindowsOpenServicesArchitecture 中有关数据库的一个组成部分 它建立了一组规范 并提供了一组对数据库访问的标准API 应用程序编程接口 这些API利用SQL来完成其大部分任务 ODBC本身也提供了对SQL语言的支持 用户可以直接将SQL语句送给ODBC 20 数据库系统的应用程序接口规范应用程序提供了一整套调用接口规范和基于动态连接库的运行支持环境 其简称是 A ADOB ODBCC OLAPD DBMS 答案 B 21 22 数据库管理系统主要功能包括 数据库的建立和维护功能 数据操纵功能 数据库运行控制功能和 A 数据定义功能B 数据检索功能C 数据存储功能D 数据冗余控制功能 答案 A 22 数据操纵功能主要包括 A 查询与检索数据B 插入数据C 删除数据D 建立数据库E 修改数据 答案 ABCE 23 数据库系统包括 A 管理系统B 硬件系统C 软件系统D 人员E 数据 答案 BCDE 24 1数据仓库技术的概念 数据仓库 英文名称为DataWarehouse 可简写为DW或DWH 数据仓库是为企业所有级别的决策制定过程提供支持的所有类型数据的战略集合 它是单个数据存储 出于分析性报告和决策支持的目的而创建 为企业提供需要业务智能来指导业务流程改进和监视时间 成本 质量和控制 25 数据仓库 由数据仓库之父比尔 恩门 BillInmon 于1990年提出 主要功能仍是将组织透过资讯系统之联机事务处理 OLTP 经年累月所累积的大量资料 透过数据仓库理论所特有的资料储存架构 作一有系统的分析整理 以利各种分析方法如联机分析处理 OLAP 数据挖掘 DataMining 之进行 并进而支持如决策支持系统 DSS 主管资讯系统 EIS 之创建 帮助决策者能快速有效的自大量资料中 分析出有价值的资讯 以利决策拟定及快速回应外在环境变动 帮助建构商业智能 BI 26 数据仓库之父比尔 恩门 BillInmon 在1991年出版的 BuildingtheDataWarehouse 建立数据仓库 一书中所提出的定义被广泛接受 数据仓库 DataWarehouse 是一个面向主题的 SubjectOriented 集成的 Integrated 相对稳定的 Non Volatile 反映历史变化 TimeVariant 的数据集合 用于支持管理决策 DecisionMakingSupport 27 数据仓库的重点与要求就是能够准确 安全 可靠地从业务系统中取出数据 经过加工后 供管理人员进行分析使用 加工后的数据必须是 A 有依据信息B 有结构信息C 有价值信息D 有规律信息 答案 C 28 数据仓库系统包含 数据源 数据的存储与管理 前端工具和 A 数据检索系统B 数据挖掘工具C OLAP服务器D 数据分析系统 答案 C 29 数据仓库是在企业管理和决策中面向主题的相关数据集合 其要素不包括 A 时间相关性B 数据不可修改性C 数据统一性D 集成性 答案 C 30 2数据仓库技术的设计过程 1 选择合适的主题 所要解决问题的领域 2 明确定义事实表3 确定和确认维4 选择事实表5 计算并存储fact表中的衍生数据段6 转换维表7 数据库数据采集8 根据需求刷新维表9 确定查询优先级和查询模式 31 3数据仓库的开发及实现过程 1 收集和分析业务需求2 建立数据模型和数据仓库的物理设计3 定义数据源4 选择数据仓库技术和平台5 从操作型数据库中抽取 净化 和转换数据到数据仓库6 选择访问和报表工具7 选择数据库连接软件8 选择数据分析和数据展示软件9 更新数据仓库 32 4数据仓库对电子商务支持的途径 数据仓库中的数据是为分析服务的 而分析需要多种广泛的不同数据源以便进行比较 鉴别 因此数据仓库中的数据必须从多个数据源中获取 这些数据源包括多种类型数据库 文件系统以及Internet网上数据等 它们通过数据集成而形成数据仓库中的数据 集成的方法 2 集成 统一 消除不一致的现象综合 对原有数据进行综合和计算 33 例如 水情数据仓库 水文信息气象信息大堤抗洪能力守堤抢险人员抗洪物资供应 34 数据仓库的应用目标 优化企业内部管理控制 数据仓库的第二类应用目标是对企业的管理控制进行优化 包括产品生产和人员管理 为企业增加商业机会 数据仓库的第三类应用目标是为了企业增加商业机会 作为企业的核心业务 以核心业务为主要目标的数据仓库是关键业务驱动的 35 数据挖掘都干了些什么 英国电信需要发布一种新的产品 需要通过直邮的方式向客户推荐这种产品 使直邮的回应率提高了100 36 数据挖掘都干了些什么 GUS日用品零售商店需要准确的预测未来的商品销售量 降低库存成本 通过数据挖掘的方法使库存成本比原来减少了3 8 37 数据挖掘都干了些什么 汇丰银行需要对不断增长的客户群进行分类 对每种产品找出最有价值的客户 营销费用减少了30 38 数据挖掘都干了些什么 美国国防财务部需要从每年上百万比的军火交易中发现可能存在的欺诈现象 发现可能存在欺诈的交易 进行深入调查 节约了大量的调查成本 39 数据挖掘都干了些什么 美国国内税务局需要提高对纳税人的服务水平 合理安排税务官的工作 为纳税人提供更迅捷 更准确的服务 40 通过数据挖掘您可以 发现最有价值的客户 41 通过数据挖掘您可以 使组合销售更有效率 42 通过数据挖掘您可以 留住那些最有价值的客户 43 通过数据挖掘您可以 用更小的成本发现欺诈现象 44 电信 流失银行 聚类 细分 交叉销售百货公司 超市 购物篮分析 关联规则 保险 细分 交叉销售 流失 原因分析 信用卡 欺诈探测 细分电子商务 网站日志分析税务部门 偷漏税行为探测警察机关 犯罪行为分析医学 医疗保健 数据挖掘应用领域 45 5WMS WMS是仓库管理系统 WarehouseManagementSystem 的缩写 仓库管理系统是通过入库业务 出库业务 仓库调拨 库存调拨和虚仓管理等功能 综合批次管理 物料对应 库存盘点 质检管理 虚仓管理和即时库存管理等功能综合运用的管理系统 有效控制并跟踪仓库业务的物流和成本管理全过程 实现完善的企业仓储信息管理 该系统可以独立执行库存操作 与其他系统的单据和凭证等结合使用 可提供更为完整全面的企业业务流程和财务管理信