数据物流论文范文-浅析基于CWM的广域物流系统平台建模word版下载

1、数据物流论文范文:浅析基于cwm的广域物流系统平台建模word版下载导读：本论文是一篇关于基于cwm的广域物流系统平台建模的优秀论 文范文，对正在写有关于数据论文的写作者有一定的参考和指导作用, 论文片段：m中,包含了 etl过程需要的方方面面的元数据模型，虽然 这些元模型在细节上不足以描述具体的etl过程，但是己经把etl过 程的大概框架描述出来，我们只需要在这些元模型的基础上，补充一 些和etl过程相关的细节方面的内容，就可以完成对etl过程的建模。 结束语 本系统这种设计思想可以带来两个方面的效果：其一，使 得系统建模部摘要:在开发广域物流系统平台etl的过程中，一个突出的理由就是 元数

2、据管理混乱，往往是开发前没有一个统一的标准、开发中不断变 更，最后导致开发出的产品难以维护。针对这个理由，本文提出了基于 cwm这个元数据标准来开发etl的思想，在开发过程中，一切都以cwm 元模型为依据进行设计和开发，彻底解决了元数据混乱的状况。关键词:广域物流系统平台数据仓库 元数据cwm（公共仓库元 模型）引言数据仓库系统的架构大体可以分为三部分：后台是数据存储和 计算引擎，前端是数据展现的用户界面,还有一部分就是数据转换抽 取加载（etl） o etl包括三个方面的内容:extraction（抽取）、 transformat ion （转换）和loading （加载），它在数据仓库和业

3、务系统 之间搭建了一座桥梁，确保新的业务数据能源源不断地进入数据仓库, 同时用户的分析和应用也能反应出最新的业务动态。虽然etl相关在 数据仓库架构的三部分中技术含量并不算最高,但其涉及到大量的业 务逻辑和异构环境,因此在一般的数据仓库项中etl部分往往是牵扯 精力最多的。cwm的结构分析及包的选择作为一种公共仓库元模型,cwm必须能够描述各种数据源和数据 仓库目标的元数据,cwm本身就是一个非常复杂的系统。要想将cwm 运用到实际的数据仓库系统中，必须提供易于实现的、小的、便于理 解的包。为了达到上述目的,我们将cwm组织成了 21个单独的包。每 个包都含有与在数据仓库和业务智能领域中的特定

4、部分相关的类、关 联和约束。在21个包中，有20个包要求在实现中依赖于其它一个或 多个包存在，唯一一个不需要其它包支持的包是cwm中最基本的部分: 核心包。其它所有的包最终都依赖于这个包。基于cwm开发广域物流系统平台etl过程中，我们本着通用性的 需求，在cwm中选择相应的元模型（包），建立满足需求的系统模型。实 现和使用整个cw元模型的一部分。这样的使用方式是cwm的个设 计原则所决定的。cwm的这个基本的设计原则就是:位于某一层中的元模型只依赖 于其下层中的元模型。这种结构使得各个实现可以只使用与其理由空 间紧密相关的那部分cwm元模型，从而使得同层元模型或底层与高层 元模型之间很少存在

5、或者根本不存在包之间的藕合理由。这也就意味 着一个特定的cwm元模型只依赖于块状图中位于它下方的包（不一定 是下方所有的包），同时，这些包不依赖于同一层中的任何其他的包。广域物流系统平台etl的根本目的就是从分散的应用系统数据 库中抽取数据加载到相应的主题数据库中，也就是说，数据目的格式 都是二维关系表，数据源格式大多也是二维关系表。所以，在数据格式 部分，只需要支持关系型数据库即可。这样，在资源层中，只需要包括 关系包就可以了，关于其他格式的数据源我们将在后续工作中完成。 另外，我们需要建立和关系型数据库管理系统的连接，所以，在基础层 中,我们还要考虑软件部署包。广域物流系统平台etl元数据

6、特点构建广域物流系统平台etl元数据管理架构之前另一个需要进 行重点考虑的便是广域物流系统平台etl元数据的特点，这会影响架 构师的决定。广域物流系统平台etl元数据来源并非单一，而存在多样性。设 计广域物流系统平台etl元数据管理架构时需要慎重考虑元数据的 特点。至少现在看来，广域物流系统平台etl元数据所具有的这些特 点依然存在，对元数据管理架构的设计影响非常大。构建广域物流系统平台etl元数据管理架构广域物流系统平台etl元数据管理架构目标不是为了元数据的 交换与共享，而是要针对上述的etl元数据特点，并结合典型的元数 据管理架构模式实现以下功能：(1) 元数据捕获，具体为元数据的收集、

7、分类和整理。(2) 元数据存储，具有易于扩展的元模型存储元数据。用户访问接口，提供元数据的创建、修改、删除和查询功能。(4) 支持元数据基本查询、数据谱系、数据质量保证和影响分析 高级应用。(5) 安全管理。广域物流系统平台etl元数据管理架构是一种集中式元数据架 构,其结构元素包括元数据源、集成处理、灵活的元模型、元数据库、 前端应用与用户接口和系统管理。我们可以发现在cwm中,包含了 etl 过程需要的方方面面的元数据模型，虽然这些元模型在细节上不足以 描述具体的etl过程，但是已经把etl过程的大概框架描述出来，我们 只需要在这些元模型的基础上，补充一些和etl过程相关的细节方面 的内容

8、，就可以完成对etl过程的建模。结束语本系统这种设计思想可以带来两个方面的效果:其一，使得系统 建模部分实现了快速建模,cwm己经为我们的系统完成了大部分的建 模工作，这有利于缩短我们整个etl系统的开发周期。其二，由于etl 过程的建模是在cwm元模型的基础上进行的，所以，我们开发的系统 中描述etl过程所使用的元数据对象和cwm模型中的对象之间存在着 对应关系。有利于广域物流系统平台etl和其他数据仓库工具之间进 行直接的元数据交换，节省了开发元数据桥的费用。参考文献："1 john poole, dan chang,彭蓉,刘进译公共仓库元模型m 机械工业出版社,2004:1-13, 413-4292 那英朝，邓苏等.数据仓库元数据管理研究j 计算机工 程，2003,29:8-103 雷琦，宁洪基于cwm的元数据管理系统的研究j计算机 科学,2004, 26（5） : 52-544 毛禹忠，张迪.intern