moDT-企业信息化的基石

1、OMDT企业信息化的基石单位：时间：MODT企业信息化的基石单位:北京芳草元源数据技术有限公司一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MODT和传统的的数据仓仓库的比比较MODT企业信信息化的的基石一、企业业信息系系统现状状经过几十十年的建建设，多多数企业业都建立立了适合合企业生生产和管管理的信信息系统统，如：CAD、CAM、CAPP、CAE、PDM、ANSYS、MES等工业生生产软件件，和OA、ERP、CRM、HR等工业管管理

2、软件件，这些些信息系系统在企企业的生生产、加加工、实实验、工工艺、模模型、标标准、规规范、图图纸、产产品知识识库、人人力资源源、财务务、技术术、办公公等领域域，发挥挥了重大大作用。一、企业业信息系系统现状状门户户安全全CAD数据1CAE数据3CAM数据2MES数据4HR数据6ERP数据5OA数据7其它它硬 件网网络络计算机辅辅助设计计算机辅辅助制造计算机辅辅助工程制造机制企业资源源计划人力资源办公现存信息息系统结结构图一、企业业信息系系统现状状企业现有有信息系系统的困困惑系统开发发、上线线时间各各异各业务系系统开发发商不同同1、各业务务系统独独立采用的技技术、方方案各有有所长采集的数数据分别别

3、标识各业务信信息系统统的数据标识识不统一一各业务信信息系统统分别采采集数据据一、企业业信息系系统现状状企业现有有信息系系统的困困惑2、数据重重复采集集数据标识不一致数据或没没有标准，或或标准不统一一提供支持持服务的的公司不不相同一、企业业信息系系统现状状企业现有有信息系系统的困困惑技术方案案及软件件不一致致3、互联共共享遇到到瓶颈一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MODT和传统的的数据仓仓库的比比较MODT企业信信息化的的

4、基石二、传统统思维的的企业信信息系统统集成（传统思思维集成成）1、现行信信息系统统集成的的思路现行的企企业信息息系统的的集成，大多是是“上下整合合”的思路路。“上整合” “下整合” 是通过云计算技技术，把企业业信息系系统所需需要的硬件设备备和基础软件件整合起来来，减少少通用软硬硬件的重复，降低投投资成本本，在硬件、网网络和基基础软件件方面，实现了了有效统统一。是企业应用用信息系系统层面面的整合，通过在在各应用信信息系统统之上搭建建平台，实现各各业务信信息系统统的协同同。二、传统统思维的的企业信信息系统统集成（传统思思维集成成）2、现行信信息系统统集成方方案图门 户安 全其 它网 络CAD数据1

5、CAE数据3CAM数据2MES数据4HR数据6ERP数据5OA数据7计算机辅助设计计算机辅助制造计算机辅助工程制造机制企业资源计划人力资源办公云计算平台整合平台二、传统统思维的的企业信信息系统统集成（传统思思维集成成）3、现行信信息系统统集成方方案的困困惑（主主要来自自上整合合）应用系统统多且复复杂，梳梳理难度度大原信息系系统开发发单位多多，协调调有难度度原信息系系统数据据标识不不致，统统一难度度大整合工作作量大资金需求求大（一一般都在在1000万以上，或更多多）有可能将将原信息息系统推推倒重来来一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思

6、思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MODT和传统的的数据仓仓库的比比较MODT企业信信息化的的基石1、新思维维集成思思路互联网思维的的企业信信息系统统的集成成，即新思维维集成的的思路是是：“下下整合合”。第二个“下整合合”第一个“下整合” 与传统思思维的集集成基本本相同，是通过过云计算技技术，把企业业信息系系统所需需要的硬件设备备和基础软件件整合起来来。是企业应用用信息系系统层面面的整合，但是，整合的的不是各各业务信信息系统统，而是是支撑业业务信息息系统的的元数据。通过统统一定义义标识各各应用信信息系统统的元数据，实实

7、现各业业务信息息系统的的协同。三、互联联网思思维的信信息系统统集成（新思维维集成）三、互联联网思思维的信信息系统统集成（新思维维集成）2、新思维维集成方方案框架架图网 络门 户安 全其 它CAD数据1CAE数据3CAM数据2MES数据4HR数据6ERP数据5OA数据7计算机辅助设计计算机辅助制造计算机辅助工程制造机制企业资源计划人力资源办公MODTAPPAPPAPPAPPAPPAPPAPPAPPAPPCPS云计算平平台门户户安全全CAD数据1CAE数据3CAM数据2MES数据4HR数据6ERP数据5OA数据7其它它硬 件网网络络计算机辅辅助设计计算机辅辅助制造计算机辅辅助工程制造机制企业资源源

8、计划人力资源办公现存信息息系统结结构图（信息系系统没有有集成）现行信息息系统集集成方案案图门 户安 全其 它网 络CAD数据1CAE数据3CAM数据2MES数据4HR数据6ERP数据5OA数据7计算机辅助设计计算机辅助制造计算机辅助工程制造机制企业资源计划人力资源办公云计算平台整合平台三、互联联网思思维的信信息系统统集成（新思维维集成）3、新思维维集成方方案的特特点1234将信息系系统的集集成内容容由系统统整合转转为数据据整合将集成路路径由“上整合合”转为“下整合合”新思维集集成方案案的核心心部分由由：云计算、CPS、MODT、原业务务系统、创新APP、门户等六部分分组成。将数据集集成方式式分

9、为两两层：自自动化层层和信息息化层自动化层层由CPS（信息息物理系系统）统统一完成成信息化层层由OMDT（源源元数据据）统一一完成三、互联联网思思维的信信息系统统集成（新思维维集成）4、新思维维集成与与传统思思维集成成的比较较1234保留了企企业的原原信息系系统，避避免推倒倒重来给给企业生生产管理理带来的的损失统一了企企业自动动化层面面和信息息化层面面的数据据，加快快了企业业信息系系统集成成的进度度适度内部部开放的的企业基基础数据据，使企企业新系系统开发发更便捷捷，使基基于互联联网的的应用开开发成为为可能。企业原信信息系统统的整合合，和新新信息系系统的开开发成本本，将大大幅度降降低。（1000

10、万以下）一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MODT和传统的的数据仓仓库的比比较MODT企业信信息化的的基石四、OMDT在企业信信息系统统集成中中的作用用1、MODT是什么？MODTMetaOriginalDaTa，元源数数据其中：MetaDaTa，元数据据，是对对原始数数据进行行解释的的数据MODT，元源数据，专指对对原始数据据的统一一资源描描述通俗地讲讲：MODT，包含元数据，或或原始数据据的数据字典典可以表征征原始数数

11、据四、MODT在企业信信息系统统集成中中的作用用2、OMDT在信息信信息系统统集成中中的作用用解决了数数据统一一的标识问题题解决了数数据统一采集集的方法法创新了企企业信息息系统集集成的思路降低了企企业信息息系统集集成的成本加快了企企业实现现智慧车车间、智慧工厂厂的进程MODT在信息信信息系统集成成中的作作用为企业适适应互联联网的的工业生生产环境境，提供了转转型和创创新发展展的数据支撑撑一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MO

12、DT和传统的的数据仓仓库的比比较MODT企业信信息化的的基石五、芳草MODT的特点芳草MODT是北京芳芳草元源数数据技术术有限公司，根据“海量非非结构化化数据管管理标准”，开发的的适应企企业信息息系统集集成在源源数据采采集、定定义、分分类、管管理方面面的软件件产品。该系统实实现对多多源异构构数据的的统一集集成管理理，支持持海量多多源异构构数据上上的查询询分析，分别经经过合成成数据集集和真实实数据集集的测试试，是国国家863项目的成成果之一一。1、芳草MODT五、芳草MODT的特点2、芳草MODT的系统架架构（一一）由原始数数据抽取取元数据并并上传数据集成成服务器数据校验验、填充充度检查，数数据

13、解析析元数据管理系统统数据加载载和导入原始数据据存放于于源系统数据访问问接口数据访问问接口数据访问问接口数据访问问接口五、芳草草OMDT的特点2、芳草OMDT的系统架架构（二二）查询请求求查询结果果汇总分布式查查询引擎擎原始数据据存放于于源系统数据访问问接口数据访问问接口元数据管理系统统子节点维维护概要图和和统计信信息访问请求求/结果五、芳草MODT的特点3、芳草MODT的技术方方案（一一）使用元数数据描述异构的原原始数据据元数据格格式：xmlDTD对异构的的原始数数据进行行统一的的资源描描述规范范原始数据据的类型型视频、文文本、网网页、图图片、传传感器数数据等原始数据据的存储储管理方方案关系

14、型(mysql,oracle等)非关系型型(hadoop,hive,spark等)五、芳草MODT的特点3、芳草MODT的技术方方案（二）基于元数数据的多多源异构构数据集成方案元数据抽取源系统主主动抽取取触发器日志解析析被动抽取取数据访问问接口五、芳草MODT的特点3、芳草MODT的技术方方案（二）基于元数数据的多多源异构构数据集集成方案案元数据集成使用数据据上传工工具-定时上传传、数据据更新时时上传自动校验验、解析析、加载载五、芳草MODT的特点3、芳草MODT的技术方方案（三）面向海量量数据的的分布式式查询系系统五、芳草MODT的特点4、芳草MODT的特色（一）对多源异异构数据据的支持持存

15、储在不不同地域域、不同同数据管管理系统统的数据据不同领域域、不同同结构的的数据元数据自自动集成成上传、校校验、解解析、加加载和管管理五、芳草MODT的特点4、芳草MODT的特色（二）良好的可可扩展性性数据规模模系统集群群松耦合式式的数据据管理不改变原原始数据据无需拷贝贝原始数数据数据加载载时间短短五、芳草MODT的特点5、芳草MODT的性能（一）数据集成成系统：安全性不改变原原始数据据各源系统统自定义义并实现现原始数数据访问问接口集成效率率数据上传传-网络带宽宽数据解析析-多线程+定时器数据加载载-使用HTTP协议五、芳草MODT的特点5、芳草MODT的性能（二）分布式查查询引擎擎：容错性-系

16、统的可可用性元数据分分布式存存储于集集群的HDFS，数据自自动备份份集群中子子节点的的维护（新增、删除、状态监监控）存储能力力目前系统统管理10亿条真实实web元数据分布式查查询引擎擎支持TB级别元数数据的查查询分析析检索效率率精准搜索索0.1s内五、芳草MODT的特点6、芳草MODT的部署环环境820个机器节点，其其中一个个master节点，其余为为slave节节点。Master节节点起到到协调调调配作用用，不作作为存储储数据的的节点。下面是是单个节节点的硬硬件和软软件配置置。硬件配置置：CPU：Intel(R)Core(TM)2 DuoCPUT7700 2.40GHz; 处理理器：4核;

17、内存存：32GB; 硬盘盘：720GB软件环境境：操作系统统：CentOS6.4；Hive1.1.0;Presto0.6.2; FusionDB 1.0一、企业业信息系系统现状状二、传统统思维的的企业信信息系统统集成（传统思思维集成成）三、互联联网思思维的信信息系统统集成（新思维维集成）四、MODT在企业信信息系统统集成中中的作用用五、芳草MODT的特点六、MODT和传统的的数据仓仓库的比比较MODT企业信信息化的的基石五、芳草MODT的特点六MODT和传统的的数据仓仓库的比比较数据仓库库1.面向主题题：针对对某一种种业务就就要建立立一个数数据仓库库。不能快速速适应变变化，传传统的数数据仓库库

18、业务主题是较较少变化化的，其其应对变变化的方方式是对对数据源源到前端端展现的的整个流流程中的的每个部部分进行行修改，然后重重新加载载数据，甚至重重新计算算数据，导致其其适应变变化的周周期较长长。因此在大数据据时代，分析处处在变化化的业务务环境中中，数据仓库库的模式将难难以适应应新的需需求数据大量量重复，不同的的业务系系统要有有自己的的一些数数据仓库库，在很很多的业业务的数数据仓库库中的数数据有很很多的重重复。五、芳草MODT的特点MODT和传统的的数据仓仓库的比较数据仓库库2.数据迁移移代价大大：在数据源源层和分分析层之之间引入入一个存存储管理理层，可可以提升升数据质质量并针针对查询询进行优优

19、化，但但也付出出了较大大的数据据迁移代代价和执执行时的的连接代代价五、芳草MODT的特点MODT和传统的的数据仓仓库的比较数据仓库库3.存储容量量的限制制：数据量在在不断变变化，可可能会由由TB级级升至PB级，并仍在在持续爆爆炸式增增长，而而传统的的数据仓仓库的容容量是有有限的。4.系统的硬硬件成本本：硬件平台台的变化化，传统统的数据据仓库部部署在高高端服务务器上。一旦数数据的增增加势必必要增加加高端服服务器。高端服务务器的价价格相当当高。而由中低低端硬件件(甚至普通通的pc机)构成的大大规模机机群平台台，成本本则大幅幅度的降降低，现现今企业业越来越越多将应应用层由由高端服服务器转转向了由由中低端端硬件构构成的大大规模机机群平台台五、芳草MODT的特点MODT和传统的的数据仓仓库的比较数据仓库库5.高负载下下查询速速度：在大量数数据，访访问人数数多的情情况下，访问速速度很慢慢，甚至至系统会会崩溃，因为访访问接口口单一。五、芳草MODT的特点MODT和传统的的数据仓仓库的比较