商业智能的利器.ppt

1、,商业智能的利器 Sybase IQ,卢东明 技术总监 Sybase软件中国有限公司 T,Business Intelligence,Busi-ness, 还是Business?,Business Intelligence,商业智能（BI）是什么？ 商业智能（Business Intelligence，BI）系统使组织能够通过利用客户、供应商以及内部业务操作的有关信息来提高商业性能。BI 系统的最终目标是使用户能够消费大量有关数据，对其进行分析从而使企业有机会增加收入或者节省成本。 BI 系统通常需要从多个来源收集数据 例如整个公司的事务数据库和诸如客户关系管理与供应链管理的不同相关应用程序。

2、 BI系统集结、组织以及标准化仓库中的信息，比如数据仓库和数据集市中的信息。提供分析工具，以支持专家运行数据查询以及发现模式和潜在的诊断问题。,BusinessIntelligence,商业智能（BI）无处不在,零售业 商品广告促销的竞争 销售模式 竞争管理 市场分析 客户评价 分析型CRM,制造业 优化供应链 流程智能 订单生命周期 存货分析 供应商遵从 发送分析,电信 获得和留住客户 呼叫行为分析 拥塞分析 服务使用分析 促销效用 分析型CRM,金融 风险管理 信用风险 货币风险 资产与负债管理 分析型CRM,所有行业 性能 损益P Winter Corporation TopTen Pr

3、ogram: Spotlight on Sybase IQ, 2004; InfoSizing DW Reference Architecture Report, June 2004,Sybase IQ: 速度快速查询和加载，垂直存储,数据垂直存储 每一列分别存储 只存取被查询使用到的列 降低大量的系统 I/O,垂直存储,Other RDBMS,SYBASE IQ,r1,r2,r3,r4,r5,r1,r2,r3,r4,r5,查询响应 以垂直存储实现快速查询,Sybase IQ: 数据是按列存储的，而不是按行存储,好处: 只存取查询所需的数据 数据类型是一致的，因而可以很容易被压缩 数据库易于修

4、改和管理,特殊存储方式垂直存储（按列存储）,Sybase IQ 数据大量被压缩，降低存储空间和维护成本,数据压缩 显著降低存储空间和维护成本,LOAD,LOAD,Base table: 0.2 - 0.5TB,Indexes: 0.05 - 0.3TB,Aggr/Summ: 0 - 0.1TB,Summaries Aggregates,1 - 2TB,Indexes,0.5 - 3TB,Base table “RAW data” no indexes,0.9 - 1.1TB,2.4-6TB,Transactional DBMS,加载相同数据: “传统的数据仓库” 是Sybase IQ数据仓库的

5、36倍,0.25 - 0.9TB,输入数据: 1TB 数据源：文件，ETL，复制，ODS,9种类型的索引,分别针对不同的数据类型和数据特征，以最大效率地发挥索引的优势。,Sybase IQ存储压缩实例,2005年WinterCorporation世界十大数据仓库 TopTen Award Winners ,为何 Sybase IQ 能够快速增长?数据爆炸,Source: /research/projects/how-much-info-2003/,Web 174TB on the surface,Instant Messaging 274T

6、B per year,Email 400,000TB per year,Transactions Growing 125% per year,数据量,Time,Sybase IQ 可伸缩性Multiplex 随业务需求扩展,多路技术结构 卓越的可伸缩性和灵活性,单一的 IQ 数据仓库 多节点共享访问 只有一个数据存储 无数据分区 无分布式锁管理 每个节点不依赖于其他节点 增加服务器和 CPUs TB级磁盘 近乎无损失的性能,Reader Nodes,Writer Node,Shared Disks,速度 快速响应 10-100 倍的快速查询响应 基于列的存储结构 实时数据访问 无处不索引 I/

7、O 减少 90% 可扩展性 适应大量的用户数 同时支持成百上千的用户数 从GB到上百个TB的数据 接近实时的新数据装入数据仓库的用户查询几乎不受影响,Sybase IQ 产品优势,低TCO 经济性 30-70% 数据压缩, 而不是数据膨胀 低成本 更少硬件 更少的数据存储设备 更少的支持维护人员 灵活性 开放的标准 ANSI SQL (ODBC,JDBC) Unix, Linux, Windows 任何的查询 任何的schema,What Our Customers Say,“With Sybase IQ, we provide some of the worlds largest asset

8、 managers the ability to quickly analyze millions of stock and portfolio transactions.” Chris Escobar, Vice President of Analytical Products, ITG “Sybase IQ saves both storage space and increases the speed at which data can be retrieved. ” Lewis Walker, Assistant Director for Application Development

9、, U.S. Security and Exchange Commission “The IBM and Sybase IQ combination offers unbeatable cost/performance and gives S&H Solutions a competitive edge in retail analytics. ” Steve Ritacco, CTO, S&H Solutions “Sybase IQ is our secret weapon.” Jeff Butler, Director of Research Databases, Office of Research, U.S. Internal Revenue Service,BI 应用广泛,强大的、已建立的和快速增长的客户群 在世界上750个地方有 1700 客户系统 在过去的12个月里，增加 145 新企业应用,Mainframe,IBM DB2,MicrosoftSQL Server,Oracle,Sybase ASE,Trading,Order Processing,Provisioning,Inventory,Financials,BI 工具,数据集成