数据分析与数据挖掘实战案例

杨大川dyang@数据分析与数据挖掘

实战案例讲师简介杨大川-迈思奇科技有限公司CTO微软MVP.2004（最有价值专家）曾任美国硅谷Annuncio公司首席工程师招商迪辰产品研发部总经理现兼任中科院客座教授Minesage:迈思奇科技有限公司微软数据分析/挖掘领域合作伙伴面向企业客户提供完整的数据分析/挖掘解决方案Agenda从数据到信息传统报表系统的挑战数据分析与实战案例数据挖掘与实战案例总结：商业智能的巨大潜力现代企业的IT系统企业资源计划系统(ERP)

客户关系管理系统(CRM)

供应链管理系统(SCM)

电子商务系统(EBiz)人事管理系统(HR)财务系统(Fin)……呼叫中心市场活动系统客户关系管理互联网系统财务系统采购系统人事系统库存系统最终结果：大量的数据这里有几根火柴？报表系统的答案：40根Agenda从数据到信息传统报表系统的挑战数据分析与实战案例数据挖掘与实战案例总结：商业智能的巨大潜力挑战难以挖掘出潜在的规则难以交互分析了解各种组合

难以追溯历史数据形成孤岛数据太多信息太少随着数据量的增大难度越来越大Agenda从数据到信息传统报表系统的挑战数据分析与实战案例数据挖掘与实战案例总结：商业智能的巨大潜力现在呢？数据分析：OLAP技术数据集市数据仓库源系统客户端CubeOLAPDemo互联网行业电信财务和预算房地产互联网行业–门户网站传统的网站流量分析工具简单的静态报表后台处理，大量信息丢失无法针对业务层面深入分析OLAP解决方案18个角度随心所欲的分析瞬间获得结果非常容易切入业务层面发现更多的宝藏电信行业手机产业的迅猛发展导致：海量的数据海量的用户激烈竞争与频繁的策略调整OLAP数据分析的价值发现不断变化的规律辅助正确的决策好的决策=$$$财务和预算财务软件有很多用友金蝶预算的方式有很多Excel专用系统OLAP可以分析什么？鸟瞰图的分析方式房地产买房？卖房？租房？房价的趋势如何？不同地区的变化不同类型的变化供求关系的变化OLAP的解决方案专业化的KPIAgenda从数据到信息传统报表系统的挑战数据分析与实战案例数据挖掘与实战案例总结：商业智能的巨大潜力商业智能包含的范围数据挖掘数据报表数据分析深入数据挖掘工具(SQL2005)关联销售销售预期客户分类客户行为分析风险管理信用评估欺诈检测流量点击分析….TextMiningDemo图书音像销售–关联模型自行车销售–决策树搜索引擎历史数据CustID980001980002980003980004980005980006CustIDBook980001天龙八部980001鹿鼎记980002丁丁历险记-丁丁在刚果980002丁丁历险记-月球探险980002神雕侠侣980003围城980004数据挖掘指南980004数据库实战宝典980004SQLServer2005历史数据（Nested）Book天龙八部鹿鼎记丁丁历险记-丁丁在刚果丁丁历险记-月球探险神雕侠侣围城数据挖掘指南数据库实战宝典SQLServer2005CustID980001980002980003980004关联模型:Association同类集合规则图示预测……自行车销售某体育用品商店拥有大量会员部分会员是购买自行车的用户问题：决定客户是否可能购买自行车的因素？性别年龄交通距离拥有的汽车数目拥有的子女数目收入……决策树：DecisionTree找到潜在客户搜索引擎IT新宠百度神话GoogleYahooMSN如何发现词与词之间的关联？我们销售关键词给企业如果知道与某个词关联最强的N个词…潜在的价值是无限的Agenda从数据到信息传统报表系统的挑战数据分析与实战案例数据挖掘与实战案例总结：商业智能的巨大潜力解决商业智能

数据挖掘找出潜在规则，辅助决策OLAP、数据分析提供了更及时、更丰富的信息报表系统提供了最基本的信息问题：OLAP的目的是什么？StaticReportingDat