神通BI产品介绍.ppt

1、神通商业智能汇报,汇报人：黄瑞,神通全系产品,神通数据库 （标准版| 企业版| 安全版）,BI套件,行业定制版本,核心平台,KSTORE | 嵌入式数据库 | 军用数据库,神通xCluster集群件,K-Miner （数据挖掘系统） K-Cuber （OLAP系统） K-Front （智能报表系统 ） K-Fusion（ ETL系统）,集群套件,神通BI与企业数据分析,知识可视化,数据仓库,分析模型,业务展现,平面文件,关系数据库,应用系统,数据集市,仪表盘,多维报表,数据挖掘 模型,OLAP模型,基础数据,数据仓库,标准报表,zz,K-Miner 分类、预测、聚类 、关联,K-Cuber 切

2、片切块、上钻下钻、 同比环比、指标预警,K-Front 报表的设计、 生成、展现、打印,K-Fusion 抽取、转换、加载,神通BI,K-Miner 分类、预测、聚类 、关联,K-Cuber 切片切块、上钻下钻、 同比环比、指标预警,K-Front 报表的设计、 生成、展现、打印,K-Fusion 抽取、转换、加载,神通BI,神通K-Fusion,可视化流程定义 50多种数据源，支持关系数据库、文本数据、分布式文件系统等 30多种数据转换节点 全表比对、时间戳、自增字段、数据库日志、触发器等增量抽取策略 分布式部署 支持用户自定义节点 执行过程可视化监控 ETL元数据管理功能,神通K-Fusi

3、on：面向多种数据源抽取和加载,数据仓库,数据源,K-Fusion,抽取、转换,神通K-Fusion：ETL流程Demo,神通K-Fusion：ETL流程Demo,查找表数据：,条件：,性别 IS NOT NULL,神通K-Fusion：增量ETL,全表比对,时间戳,序列,触发器,DB日志分析,数据库（T0）,数据仓库,数据库（T1）,神通K-Fusion：所见即所得的流程设计,顺序,分支,循环（逻辑）,神通K-Fusion： ETL流程的执行(调度),神通K-Fusion： ETL流程的执行(监控),神通K-Fusion：可扩展的ETL能力(节点层面),神通K-Fusion：丰富的性能提升机

4、制,数据库批量加载 （OCI等原生驱动加载）,节点间并行处理,数据分片,1,1,1,1 2 3 4,1 3,2 4,K-Miner 分类、预测、聚类 、关联,K-Cuber 切片切块、上钻下钻、 同比环比、指标预警,K-Front 报表的设计、 生成、展现、打印,K-Fusion 抽取、转换、加载,神通BI,神通K-Cuber,快速建模工具和专家建模工具 钻取、行列互转、预警等多维操作 自动聚合技术 分块缓存策略 多维元数据管理 数据权限管理,神通K-Cuber：多维建模工具,快速建模工具Quick Designer可实现5步建模； 专家建模工具Expert Designer可满足高级用户建立

5、复杂OLAP模型； 支持星型和雪花型模型。,将ER关系模型转为OLAP模型,多维元数据 管理,神通K-Cuber：立方体和多维分析,建模,神通K-Cuber：数据分析流程,应用场景：某企业订单分析,神通K-Cuber：选取维度,神通K-Cuber：选取指标,神通K-Cuber：有效性分析,指标,维度,神通K-Cuber：多维分析(品类),神通K-Cuber：缩小分析范围,神通K-Cuber：多角度细化分析,神通K-Cuber：选择分析数据范围,神通K-Cuber：缩小数据范围,神通K-Cuber：图表分析(省级),神通K-Cuber：图形细化分析粒度,神通K-Cuber：图表分析(市级),神通

6、K-Cuber：月环比分析,2010年4月和5月环比,总订单金额环比增长率,神通K-Cuber：日同比分析,2009年2月8日和3月8日同比,总订单金额的同比增长率,神通K-Cuber：原子数据列表,神通K-Cuber：图形分析,钻取贵州省， 并选择毕节地区,钻取厨房用品,神通K-Cuber：图形分析,钻取贵州省， 并选择毕节地区,钻取厨房用品,K-Miner 分类、预测、聚类 、关联,K-Cuber 切片切块、上钻下钻、 同比环比、指标预警,K-Front 报表的设计、 生成、展现、打印,K-Fusion 抽取、转换、加载,神通BI,神通K-Miner,40种算法 MPP+SMP并行计算架构

7、 算法性能高效 灵活的任务调度 模型生命周期管理 B/S架构 挖掘元数据管理,神通K-Miner：并行计算架构(1),全节点采用MPP架构，实现多任务的并行和部分算法单任务粗粒度并行； 单节点采用SMP架构，实现所有算法的细粒度并行，并确保内存的节约。 K-Miner为唯一一款所有算法实现并行的数据挖掘软件。,基于E-As（调度引擎-挖掘代理）的分布式挖掘架构 Master-Slaver(s)算子模式的并行挖掘算法 节点内并行和跨节点并行相结合 基于数据分布的负载均衡 数据就近挖掘策略 对HDFS、神通数据库集群等数据源的支持及扩展,神通K-Miner：并行计算架构(2),基础数据层,数据仓库

8、 / 数据集市,调度引擎,消息 服务,单节点 并行调度,认证 服务,集群 日志,负载 均衡,挖掘代理,建模分析 服务,实时响应 服务,数据转换 服务,资料库,元数据管理,服务管理,模型管理,开发接口层,本地应用API,WebService接口,图形API,网络协议接口,应用层,应用程序,基于数据挖掘的报表,引擎监管与监控,第三方应用,数据挖掘核心,日志管理,数据挖掘 算法,统计分析 算法,模型监控预警,多节点 并行调度,神通K-Miner：架构,K-Miner分布式挖掘拓扑图,数据 挖掘,属性筛选,分类预测,回归预测,聚类分析,关联分析,时间序列,属性筛选,属性重要性打分,基于信息增益的属性打

9、分,主成分分析,决策树,分类回归树,神经网络分类,支撑向量机分类,分类组合模型,多元线性回归,神经网络回归,支撑向量机回归,回归组合模型,K均值聚类,分布估计聚类,基于K均值的层次聚类,购物篮分析,属性关联分析,序列模式分析,ARX时间序列,ARMA时间序列,基于卡方检验的属性筛选,朴素贝叶斯,贝叶斯网络,逻辑回归,广义线性回归,两阶段聚类,统计 分析,描述性统计,数据探测,异常检测,层次聚类,方差分析,归纳分析,列联表,相关分析,分布估计,函数拟合,因子分析,单因子方差分析,双因子方差分析,样本层次聚类,属性层次聚类,K-sigma异常检测,线箱图异常检测,离散化,K-Miner 算法,神通

10、K-Miner：算法列表,共计40个,神通K-Miner：海量数据处理能力,神通K-Miner：高效的执行速度,大部分算法执行速度远快于国外相同算法,分类算法准确率对比， 准确率越高越好。,回归算法准确率对比， 相关系数越高越好。,算法准确度和SPSS Modeler相当， 有的K-Miner略好，有的Modeler略好,神通K-Miner：和领袖厂商相当的算法准确度,神通K-Miner：灵活的任务监管和调度策略,神通K-Miner：模型快速发布、预警及更新机制,元数据管理,主流数据挖掘工具,对比测试-测试环境,CPU:英特尔E7450 2.4GHz 6核心 *4 内存：64G 节点数：1,硬

11、件环境,操作系统环境： Windows 2003 Server 64bit 集群并行数据库环境： 神通xCluster3.5 * 1 神通KSTORE3.5 * 2实例 数据挖掘对比产品： 神通K-Miner5.0 IBM旗下SPSS Modeler15,软件环境,分类测试： 电信客户流失(103万行) 税务稽查选案（20万行） 中彩客户分析（678万行） UCI运动检测（230万行） 回归测试： 增值税预测（72万行） 聚类测试： 中彩客户分群（220万行）,数据环境,对比测试-测试结果1,对比测试-测试结果2,6.96倍,对比测试-SMP并行测试,K-Miner 分类、预测、聚类 、关联,

12、K-Cuber 切片切块、上钻下钻、 同比环比、指标预警,K-Front 报表的设计、 生成、展现、打印,K-Fusion 抽取、转换、加载,神通BI,神通K-Front,可视化报表设计器 支持中国式报表和各种复杂报表 支持30多种图形和地图 支持多维分析模型和数据挖掘模型 支持领导仪表盘制作,神通K-Front：主要功能,所见即所得的设计风格，拖拽式报表布局加快开发进度 支持生成Html、Word、Excel、PPT、PDF等格式 支持多样的可视化报表元素，包括网格、表、图片、图表和交叉表等 支持设计各种复杂型报表 内置丰富的数据处理函数，满足制作报表的需求 支持关系型数据、多维数据、数据挖

13、掘模型等数据源 支持样式模版、资源库的可重用的报表部件，加快报表开发效率,神通K-Front：图表式报表,图表式报表 表格 图形 柱形图、饼图、折线图、面积图、条形图、散列图等 雷达图、仪表盘等,神通K-Front：主从报表,主从报表 可基于单元格钻取 可基于图元素钻取 任意深度钻取,神通K-Front：主从报表,主从报表 可基于单元格钻取 可基于图元素钻取 任意深度钻取,神通K-Front：交叉报表,交叉报表 斜线表格 横向扩展、纵向扩展,斜线表头,神通K-Front：图标预警,神通K-Front：对多维数据源支持,神通K-Front可以利用神通K-Cuber建立多维数据模型设计、生成报表。,多维