构建下一代数据架构释放Al的“数据智慧”_第1页
构建下一代数据架构释放Al的“数据智慧”_第2页
构建下一代数据架构释放Al的“数据智慧”_第3页
构建下一代数据架构释放Al的“数据智慧”_第4页
构建下一代数据架构释放Al的“数据智慧”_第5页
已阅读5页,还剩56页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

十年磨一剑,源自阿里巴巴最佳实践统一统一ID统一建模统一服务数据中台业务中台服务中台消费者……集团内部商家…………Dataphin智能数据建设与治理数据消费数据消费用中台方法论打造企业级"好数据"用中台方法论打造企业级"好数据"数据来源资产治理 数据来源资产治理 资产消费即席分析调用资产建设01WHY:AI时代数据架构的挑战 AI在企业中得到广泛使用数据是AI投产的重要影响因素现代数据架构的设计新兴数据架构–DataFabric相互协同相互协同架构理念业务人员自助访问业务数据,无需长链路的同步加工,打破通过数据虚拟化技术屏蔽物通过数据虚拟化技术屏蔽物理层,为用户提供统一的逻存储与计算完全分离,可以在低廉的存储上,运行任意用户通过单一接口查询分散在本地、云端的数据,无需技术底座问,无需复制数据。并且支持基于同一份存储,同时支持流批的读写,流批计算不再多云、多引擎的现代数据架构灵活入湖高效建设数据研发离线研发实时研发数据分析交互分析BI报表数据应用现代数据架构–OneCatalog数据资产开发与治理血缘离线采集准实时采集表指标血缘标签报表元数据现代数据架构–存算分离计算绑定离线采集准实时采集现代数据架构–数据虚拟化现代数据架构在产品中的落地来源多模式入湖全量全量增量增全量一体增全量一体fulldelta多引擎运行多引擎运行AW当前运行当前运行t1t2来源增量集成t2t2新增T3表DB新增T3表DB全量集成t3来源IIUUDt1IIUUDIIUUUt2IIUUUIIUUDIIUUD全量集成t3流批融合计算任务链路资产血缘数据链路实时集成任务实时SQL任务离线SQL任务流批融合计算-流批任务依赖来源增量集成t1t2T1T2查询加速逻辑层OLAP查询统一管控层权限安全审计质量虚拟化物理层物理层查询加速-一键切换模式Q解析规范性校验合法性校验...脱敏权限Q解析...规范性校验脱敏合法性校验权限多渠道消费质量虚拟化JDBC消费者多渠道消费-多引擎插件多引擎SDK多引擎SDK多引擎SDKA权限安全JDBCJDBCBClassLoaderClassLoader建设治理消费现代数据架构建设治理消费现代数据架构知识库:让AI看懂数据补充信息1指标库明确分析主题,构建业务指标2维度建模构建维度逻辑表、事实逻辑表企业知识库3概念模型确定主题域、业务对象、业务过程

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论