SQL-Server-2012-商业智能及数据仓库解决方案

SQLServer2012

商业智能及数据仓库解决方案议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现商业智能的宏观价值目标数据信息知识决策行动应用环境赋予含义分析归纳指导辅助落实创造价值“利用各种不同的应用程序和技术，收集、存储、分析、共享数据并提供数据访问，从而帮助企业用户更容易的、更快速的获取更丰富的数据，以做出更好的业务决策。”更容易更快速更丰富用商业智能技术挖掘数据价值数据的价值在数据上的投资洞察力/预见力预测数理统计分析神经元网络数据挖掘在线分析工具多维分析KPI仪表盘平衡计分卡在线分析知识信息报表和查询报表SQL查询数据数据收集和存储数据仓库ETL工具商业智能实现的三大基本阶段数据整合数据清洗高性能数据移动快速建立数据仓库数据集成SQLServerIntegrationServices层次化业务分析消除IT架构与应用之间的隔阂实时商业智能深入数据挖掘数据模型SQLServerAnalysisServices自定义报表数据展现与门户集成即席报表数据展示SQLServerReportingServices微软一直处于商业智能的领先位置MicrosoftBIvsCrystalReport数据集成数据建模数据展示数据管理（一个都不能少）商业智能是集成的考虑最终用户的感受熟悉的工具和环境系统和工具使用的学习成本自助分析价值的最大化，是让更多的人使用TCO商业智能平台是整体的多个异构工具带来成本的增加，不仅仅是购买成本，管理成本，学习成本，维护成本都会有影响商业智能≠报表系统整体商业智能平台架构数据集成层SQLServerIntegrationServicesEPR/CRMODS/DW表单、文档业务系统业务系统ETL引擎数据层SQLServerDB数据仓库分析&报表引擎SQLServerAnalysis&Tabular多维模型表格模型协同与展示层报表查询、平衡记分卡、多维分析、KPI、仪表板战略决策分析KPI考核体系资源计划管理企业行为修正浏览器、客户端、交互式展示面向数据面向用户用户自服务元数据主数据数据质量数据生命周期管理权限、认证议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现BI项目构建过程分析模型源系统客户端设计数据仓库

导入数据

构建分析模型

查询数据34查询工具报表分析数据挖掘2数据仓库1数据仓库面临的挑战数据生命周期延长从传统的单纯的“写-查-备”，扩展了更多分析、处理的数据应用。数据可追溯性，影响分析我们的数据从哪里来？到哪里去？干了什么？基础数据分散基础数据过于分散，各系统“各自为政”难以标准化多个副本，相互隔离；基础数据变得不基础企业数据生命周期管理——从多个方面入手为企业提供可信的数据企业数据生命周期管理不仅解决管理，更要提供数据优化手段，提升IT的价值数据的管理和优化，需要具备对数据的可追溯的洞察能力清洗管理集成提高数据质量基于业务的知识与业务数据系统集成统一基础数据数据标准化避免重复工作，减少数据冲突数据血缘追溯基于业务的知识与业务数据系统集成与数据平台紧密集成嵌入业务才能快速实现价值避免为了解决老问题，反而产生新问题SQLServer集成服务SQLServer商业智能应用组件高性能数据整合平台图形化界面加快开发速度数据仓库特性：列存储索引使用VertiPaq压缩，xVelocity内存优化

C1C2C3C5C6C4…行存储列存储页面性能实例1TBTPC-DS数据库catalog_sales事实表，包含14.4亿行数据32逻辑处理器，256GB内存Warmstart查询SELECTw_city,w_state,d_year,SUM(cs_sales_price)AScs_sales_priceFROMwarehouse,catalog_sales,date_dimWHEREw_warehouse_sk=cs_warehouse_skandcs_sold_date_sk=d_date_sk

andw_statein('SD','OH')andd_yearin(2001,2002,2003)GROUPBYw_city,w_state,d_yearORDERBYd_year,w_state,w_city;性能示例:结果

总

CPU时间运行时间无列存储502秒501秒列存储31.0秒1.10秒速度16X455X满足海量数据仓库应用企业核心数据仓库应用实现从几十TB到几百TB数据量的扩展基于完全的MPP架构提供高性能的服务灵活性多家硬件提供商基于分布式架构灵活部署最全面的解决方案完整覆盖桌面，数据集市以及海量数据仓库应用与微软商业智能平台深度整合包含全面的BI工具：ETL，多维分析，报表，主数据管理，流数据分析处理等SQLServer2012数据仓库

垂直与横向扩展–以HP服务器为例从1TB扩展几百TBParallelDataWarehouse:MPP(MassiveParallelProcessing)入门级DWProLiantDL370SMP2Proc–8core6TB–14TB基础级DWProLiantDL38xSMP

2Proc–12Core10TB-20TB典型DWProLiantDL58xG7SMP4Proc–32Core20TB-40TB高端DWProLiantDL980SMP8Proc–64core50+TB

企业级大规模数据仓库MicrosoftParallelDWMPP高可用线性扩展500TB可扩展的数据仓库“并行数据仓库运行复杂查询的速度大约提升160倍，提供超过1Tb/小时的数据加载并完全集成到一个完整的BI解决方案中。”灵活性与选择大规模、低成本>24TB分析解决方案¹>600TB具有真正MPP的数据仓库²¹来源：Microsoft客户的证据：Yahoo²来源：Microsoft测试完整的BI解决方案—DirectEdge,USStockExchange议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现BI项目构建过程分析模型源系统客户端设计数据仓库

导入数据

构建分析模型

查询数据34查询工具报表分析数据挖掘多维2数据仓库1表格BI语义模型数据模型业务逻辑和查询数据访问BI语义模型ROLAPMOLAPMDX多维模型VertiPaqDirectQueryDAXTabular第三方应用PowerPivot数据库LOB应用文件ODataFeeds云服务报表SharePointExcel灵活聚合模型计算权限利用OLAP客户端，可以实现对数据的灵活分析提供快速的数据查询用业务语言实现对数据的描述将复杂的计算简单化简单、易用的数据级管理权限多维模型表格模型三种不同类型的OLAPMOLAPROLAPHOLAP内置数据挖掘算法可视化的数据挖掘工具与导航8种数据挖掘算法集成DecisionTreesNaïveBayesianClusteringSequenceClusteringAssociationRulesNeuralNetworkTimeSeriesTextMining行业标准的领导者DMX,XML/A支持第三方算法嵌入关联销售销售预期客户分类客户行为分析风险管理信用评估欺诈检测流量点击分析….SQLServer数据挖掘并不神秘示例-你可能从未发现的模型TotalCount>68,IPCallCount>68,Fanout>22,TotalDuration>7078业务含义：广泛的联络范围，大量的IP呼叫用户群议题微软整体商业智能平台构建高质量数据仓库高效数据分析与数据挖掘前端数据展现IT部门一直忙碌于让商业智能跟上快速增长的业务需求…自服务式商业智能传统的商业智能IT专家用户现有的数据在线业务应用文件数据ETL/数据质量分析报表仪表板和记分卡提供功能多维数据集数据仓库数据准备电子表格专业的工具对现有数据进行抽取、清洗、划分…通过仪表板及记分卡的功能来满足用户对报告的需求然而业务的发展先于IT系统的，所以用户需要更加灵活…迅速打破自服务式商业智能的管制障碍!是否能在灵活与控制之间找到平衡点？商业智能领域的发展演变集成开发环境业务价值重用开发效率用户生产力系统能力报表控件开放性业务洞察力灵活的视图高交互性丰富的展示方式开发者直观的数据展示普通用户高级用户IT专家开发

协作

业务效率为用户提供最适合的工作平台开发人员IT专家高级用户普通用户操作&协同SQLReportBuilder

PowerPivot嵌入统一的开发工具VisualStudio统一的管理工具MgmtStudio

自服务PowerViewPerformancePointServiceExcel报表ReportingServicesSQLServerPowerPivot–自助式分析“PowerPivoting”处理海量数据只需轻点鼠标，用户就可以针对自己的业务数据，创建和发布直观、交互的自助式分析应用Excel中的PowerPivotSharePoint中的PowerPivotSQLServerPowerPivot–自助式分析MicrosoftSharePoint2010SharePoint:自助式BI的发布和共享平台直接在Excel中处理海量数据

DataAnalysisExpressions(DAX)广泛支持各种数据源基于列的压缩技术PowerPivotforExcel:增强的分析和洞察能力在多个维度间分解数据值数据钻取选项，提供更加灵活的导航能力快速将任何视图转化为分解视图SQLServer报表服务–企业报表平台直观的设计使用与数据绑定的查询、表、图形、地图、仪表板和标识控件，简化设计过程.。快速创作便于最终用户使用.流畅地发布SharePoint。报表共享在无需IT人员帮助下，自由发布定义好的查询、报表和图形。可以与发布的数据内容保持同步,。与SharepPoint集成。组件式开发重用预先定义的查询、数据和报表子组件。可以使用报表中的数据集作为桌面分析的数据源。SQLServer报表服务-多种图表展示方式SQLServer报表服务-灵活的表格样式SteppedorBlockgroupingPivotCustomSubtotalsNon-pivotcolumnsNestedcontrolsMulti-PivotCustomHeadersSQLServer报表服务-组件式开发重用报表组件重用通用的报表元素以加快报表制作，降低成本和方便最终用户。SharePoint作为共享和编辑报表组件的中心，可以自动同步发布的内容对象。新报表源报表SQLServer报表服务-多种报表交付方式SQLReportBuilderHTMLCSVTIFXMLRSSMicrosoftWordMicrosoftExcelAcrobatPDFSQLServerPowerView–自助式报表创建支持最新的商业智能语义模型PowerView

应用嵌入SharePoint基于Silverlight实现数据切片器交互式数据透视表数字仪表板和KPI指示器办公环境的集成能力Excel—最强大的分析客户端ExcelWeb多维数据分析仪表盘基本分析报表销售数据分析ReportingServices：报表展现Excel：OLAP分析Dundas：图表及仪表盘49与各类数据源连接并进行实时更新与形状、图示、超链接进行交互实时数据展现在浏览器中浏览Visio图表Pre-Betascreenshots,subjecttochange数据可视化技术展示南方电网供电量51应用案例–上海中山医院电子病历系统应用案例-同一屏幕多维度交叉分析53应用案例-鱼骨图直接展示出层级关系54应用案例-推演式分析助您打好“预算仗”55应用案例–XX航空公司运能分析移动端展现微软商业智能技术直观的用户界面+先进的数据可视化技术=方便实用的决策系统©2011MicrosoftCorporation