GREENPLUM CHORUS_数据分析工具

1、1 Copyright 2011 EMC Corporation. All rights reserved.GREENPLUM CHORUSGreenplum, EMC整合的数据分析平台2 Copyright 2011 EMC Corporation. All rights reserved.大数据大数据分析分析3 Copyright 2011 EMC Corporation. All rights reserved.大数据分析 大数据意味着数据集增长很快以至于传统的数据库工具很难处理 更大的数据集可以让分析师发现更多的商业趋势 然而， 大数据的获取，存储，搜索，共享，分析和可视化都是一个巨大

2、的挑战4 Copyright 2011 EMC Corporation. All rights reserved.安全，信息管理和存储战胜大数据数据计算平台数据分析数据分析协协作平台作平台数据科学数据科学领领域域专专家家数据分析数据分析师师集成工具分析工具5 Copyright 2011 EMC Corporation. All rights reserved.EMC大数据分析平台Greenplum Chorus企企业业数据分析数据分析协协作平台作平台Greenplum 数据数据库库扩展性最好的多节点数据库平台分析工具分析工具(商业智能, 统计分析)Greenplum Hadoop面向非结构化

3、数据的企业数据分析平台Greenplum DCA 一体机一体机专为大数据分析定制EMC / VMware存储和虚拟化技术6 Copyright 2011 EMC Corporation. All rights reserved.从大数据从大数据推推导导见见解解7 Copyright 2011 EMC Corporation. All rights reserved.数据分析现状 对企业数据仓库的访问严格管理 数据仓库中的计算负载通常很大 有可能可以发现非常有价值的见解的深入分析不被鼓励 数据分析的结果不再存储在数据库中，而是通过邮件来交换共享8 Copyright 2011 EMC Corpo

4、ration. All rights reserved.分析师面临的挑战无法记录从数据推导出见解的过程无法创建用作数据分析的沙箱数据浏览和移动很慢数据很难访问而且经常不可访问9 Copyright 2011 EMC Corporation. All rights reserved.Greenplum Chorus主要给三类用户提供帮助 数据库架构师和管理员 负责管理数据库和提供数据访问 监控数据流动 数据分析师 负责从数据推导见解 和数据库管理员紧密合作 公司管理层 负责解释投资回报 关注对数据的快速有效分析10 Copyright 2011 EMC Corporation. All righ

5、ts reserved.分析沙箱分析沙箱公有云数据公有云数据普通硬件虚拟机ChorusChorus自我服务的分析架构Hadoop企企业业数据数据仓库仓库11 Copyright 2011 EMC Corporation. All rights reserved.Chorus与企业数据仓库 数据仓库 管理数据 生成企业运营报告和财务汇总， Chorus 一个自我服务的架构，支持针对不同业务的分析沙箱 分析的结果可以影响企业发展方向和方案12 Copyright 2011 EMC Corporation. All rights reserved.Chorus 与Hadoop 把Hadoop作为一个

6、数据源注册到Chorus中 浏览Hadoop 分布式文件系统 (HDFS)目录 预览HDFS文件 把HDFS文件添加到分析沙箱中 为HDFS文件添加注解 统一的数据分析平台 结构化数据 (数据库表) 非结构化数据 (HDFS文件) 13 Copyright 2011 EMC Corporation. All rights reserved.Chorus 与 Aurora Chorus利用Aurora来创建虚拟数据库 可以创建和管理超过500个虚拟数据库 1个虚拟CPU/512M内存测试环境: 8 台主机6 Dell R815 2 Dell R91014 Copyright 2011 EMC C

7、orporation. All rights reserved.Chorus 企业数据云 整合数据源 整合结构化数据和非结构化数据 自我服务的架构 自己创建沙箱数据库 加快数据分析和形成商业方案的进程 协作环境 分析师通力合作，发现和创建见解 共享分析结果，代码和数据 开放和可扩展的平台15 Copyright 2011 EMC Corporation. All rights reserved.Chorus主要功能主要功能16 Copyright 2011 EMC Corporation. All rights reserved.Chorus 主要功能CHORUS自我创建自我创建分析沙箱分析沙

8、箱数据服务数据服务见解见解协作协作Open REST APIPersistence LayerServices Layer17 Copyright 2011 EMC Corporation. All rights reserved.自我创建数据分析沙箱 沙箱对应一个数据库模式， 有权限的用户可以自己创建沙箱. Greenplum数据库 通过Chorus/Aurora在虚拟机上创建 安装在物理机器上 沙箱是数据云中一个安全的分析场所，用户不用担心操作可能会影响到生产系统18 Copyright 2011 EMC Corporation. All rights reserved.19 Copyri

9、ght 2011 EMC Corporation. All rights reserved.20 Copyright 2011 EMC Corporation. All rights reserved.数据服务 数据中心 便于发现，描述，管理和共享 数据浏览和可视化 浏览数据模式和数据 搜索和可视化 数据集 定义数据集合 共享 调度导入21 Copyright 2011 EMC Corporation. All rights reserved.22 Copyright 2011 EMC Corporation. All rights reserved.23 Copyright 2011 EMC

10、 Corporation. All rights reserved.24 Copyright 2011 EMC Corporation. All rights reserved.25 Copyright 2011 EMC Corporation. All rights reserved.26 Copyright 2011 EMC Corporation. All rights reserved.27 Copyright 2011 EMC Corporation. All rights reserved.28 Copyright 2011 EMC Corporation. All rights

11、reserved.29 Copyright 2011 EMC Corporation. All rights reserved.30 Copyright 2011 EMC Corporation. All rights reserved.31 Copyright 2011 EMC Corporation. All rights reserved.32 Copyright 2011 EMC Corporation. All rights reserved.协作 社交网络风格 共享 发布 注解 开放但是安全33 Copyright 2011 EMC Corporation. All rights reserved.34 Copyright 2011 EMC Corporation. All rights reserved.35 Copyright 2011 EMC Corporation. All rights reserved.见解 通过见解驱动业务 定义，发布和共享见解 从已有的见解中发现和学习 围绕见解和注解来协作 建立见解知识库36 Copyright 2011