《大数据时代》读书分享课件

1、大数据时代生活、工作与思维的大变革Living, working and thinking big changesBIGDATAA REVOLUTIONTHAT WILL TRANSFORM HOWWE LIVE WORK AND THINK 大数据：一场生活、工作和思考的变革第1页，共49页。WHAT ISBIG DATA 人类每天产生的数据：视频、电话、电脑、文字、监控、车流量、医疗、保险金融、销售第2页，共49页。第3页，共49页。这些由我们创造的信息背后产生的这些数据早已远远超越了目前人力所能处理的范畴这些数据对我们有什么用？视频：大数据运用IBM与广东省中医院第4页，共49页。大数据

2、时代大数据时代的思维变革第5页，共49页。一场生活、工作与思维的大变革 大数据开启了一次重大的时代转型。就想望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式，成为新发明和新服务的源泉，而更多的改变正蓄势待发第6页，共49页。一场生活、工作与思维的大变革More,not one but all开启重大的时代转型精确性与混杂性关注信息I，而非技术T因果还是相关一切皆可量化从最不可能的地方提取数据数据化，而非数字化量化一切，数据化核心文字、方位、沟通世间万物的数据化无穷无尽的数据创新数据再利用重组数据可扩展数据数据折旧值数据废气开放数据给数据估值大

3、数据价值链大数据掌控公司 大数据技术公司大数据思维公司和个人数据中间商未来企业竞争力第7页，共49页。预测，是大数据的核心，准确的预测是最大的竞争力大数据带来大挑战！让数据来说话一切专家的经验只是来源于判断和估算，而大数据分析是精算第8页，共49页。大数据时代大数据时代的思维变革第9页，共49页。Google通过全美各地区搜索H1N1及流感相关关键字频率和分布，得出疫情爆发警报对冲基金通过全球Twitter用户每天关于情绪的关键字进行以亿为单位的数据分析，用以为买入和抛售股票做参考依据BOSTON爆炸案，第二天抓获嫌疑犯，制止再次作案，Google glass和3D打印技术的发展，对于数据时代

4、的贡献沃尔玛如何做零售数据分析大数据例子第10页，共49页。谷歌通过数以亿计的关键字分析，例如“治疗感冒的药物、发烧头痛”，如该地区普遍性短期内爆发关键字搜索4.5亿条，则有可能发生流感通过与美国疾病防控中心以往流感数据对比，发布流感预警能够提前2周，并且准确率高达97%ThenH1N1Google第11页，共49页。流感地域分布图第12页，共49页。人类认知世界的技术正在进入云计算大数据时代第13页，共49页。1880年穿孔卡片制表机与美国人口普查大数据与乔布斯的癌症治疗，30亿条数据Farecast初始数据12000万条，每年每条航线的每个航班我们可以分析更多的数据，有时候甚至可以处理和某

5、个特别现象相关的所有数据，而不再依赖于随机采样-发现在样本时代无法发现的细节信息数据如此之多，以至于不再热衷于追求精确度不再热衷于寻找因果关系：狂犬病与感冒 数据化意味着我们要从一切太阳底下的事物中汲取信息，甚至包括我们以前认为和信息搭不上边儿的事情大数据先锋微软与语料库数据添加英国石油公司与无线感应器麻省理工与通货紧缩预测软件第14页，共49页。大数据时代大数据时代的思维变革第15页，共49页。一场生活、工作与思维的大变革More,not one but all开启重大的时代转型精确性与混杂性关注信息I，而非技术T因果还是相关一切皆可量化从最不可能的地方提取数据数据化，而非数字化量化一切，数

6、据化核心文字、方位、沟通世间万物的数据化无穷无尽的数据创新数据再利用重组数据可扩展数据数据折旧值数据废气开放数据给数据估值大数据掌控公司 大数据技术公司大数据思维公司和个人数据中间商未来企业竞争力第16页，共49页。多效地理定位与UPS的最佳行车路径，4000万公里，300万顿汽油，3万吨二氧化碳排放用手机数据预测疾病传播和城市繁荣：手机定位与人群分布北京的出租车GPS两年记录，为司机提供不同时段出行的最佳路线来自微软亚洲研究院的成果Twitter的数据用来统计各种情绪，新浪微博用全国上亿用户收集旅游、购物、数码消费等，140个字可以用来监听并预测电影票房日本先进工业技术研究所与汽车防盗系统屁

7、股的研究世间万物都可以数据化：睡眠枕头、哮喘和腕带、Apple耳机、手机监测帕金森和各种神经疾病患者的动作姿态大数据先锋大数据与经济效益 手机定位还能做什么？屁股能预测了，椅子会很忙第17页，共49页。一场生活、工作与思维的大变革More,not one but all开启重大的时代转型精确性与混杂性关注信息I，而非技术T因果还是相关一切皆可量化从最不可能的地方提取数据数据化，而非数字化量化一切，数据化核心文字、方位、沟通世间万物的数据化无穷无尽的数据创新数据再利用重组数据可扩展数据数据折旧值数据废气开放数据给数据估值大数据价值链大数据掌控公司 大数据技术公司大数据思维公司和个人数据中间商未来

8、企业竞争力WHATS NEXT第18页，共49页。Reptcha的数据再利用移动运营商的数据再利用IBM，电动汽车动力与电力供电系统优化预测丹麦对38万手机用户和11000多中枢神经肿瘤患者数据重组Google街景可扩展性数据：GPS采集、wifi、Automobile数据折旧和数据废气：多久折旧，折旧后的价值，Google和微软的拼写检查，浏览记录、停留时间、鼠标悬停位置、输入信息奥巴马2008年1月21日发表总统备忘录公开数据，涵盖47个数据集和172个机构Facebook的66亿美元和1040亿美元之差大数据先锋取之不尽用之不竭的数据创新数据的真实价值，就像漂浮在海洋中的冰山，第一眼只能

9、看到冰山的一角，而绝大部分价值都隐藏在表面之下第19页，共49页。一场生活、工作与思维的大变革More,not one but all开启重大的时代转型精确性与混杂性关注信息I，而非技术T因果还是相关一切皆可量化从最不可能的地方提取数据数据化，而非数字化量化一切，数据化核心文字、方位、沟通世间万物的数据化无穷无尽的数据创新数据再利用重组数据可扩展数据数据折旧值数据废气开放数据给数据估值大数据价值链大数据掌控公司 大数据技术公司大数据思维公司和个人数据中间商未来企业竞争力WHATS NEXT第20页，共49页。大数据掌控公司拥有数据分析技术的公司有大数据思维的公司和个人数据中间商大数据掌控公司

10、ITA software与数据授权farecast与微软、googleVISA&Mastercard与商户推荐手续费换数据埃森哲与无线传感监测系统-20辆车、30-50万公里，60万美元Flightcaster的大数据思维参考运输统计局、联邦航空和气象局汽车制造商与供应商的数据交易第三方数据公司中国的BAT数据中间商：交通数据处理公司IntrixThe-N与电影票房预测Back第21页，共49页。大数据掌控公司拥有数据分析技术的公司有大数据思维的公司和个人数据中间商数据分析技术公司Back ITA software与数据授权farecast与微软、googleVISA&Mastercard与商

11、户推荐手续费换数据埃森哲与无线传感监测系统-20辆车、30-50万公里，60万美元Flightcaster的大数据思维参考运输统计局、联邦航空和气象局汽车制造商与供应商的数据交易第三方数据公司中国的BAT数据中间商：交通数据处理公司IntrixThe-N与电影票房预测第22页，共49页。大数据掌控公司拥有数据分析技术的公司有大数据思维的公司和个人数据中间商有大数据思维的公司和个人Back ITA software与数据授权farecast与微软、googleVISA&Mastercard与商户推荐手续费换数据埃森哲与无线传感监测系统-20辆车、30-50万公里，60万美元Flightcaste

12、r的大数据思维参考运输统计局、联邦航空和气象局汽车制造商与供应商的数据交易第三方数据公司中国的BAT数据中间商：交通数据处理公司IntrixThe-N与电影票房预测第23页，共49页。大数据掌控公司拥有数据分析技术的公司有大数据思维的公司和个人数据中间商How weworkBack ITA software与数据授权farecast与微软、googleVISA&Mastercard与商户推荐手续费换数据埃森哲与无线传感监测系统-20辆车、30-50万公里，60万美元Flightcaster的大数据思维参考运输统计局、联邦航空和气象局汽车制造商与供应商的数据交易第三方数据公司中国的BAT数据中间

13、商：交通数据处理公司IntrixThe-N与电影票房预测第24页，共49页。大数据时代大数据时代的思维变革第25页，共49页。大数据时代的隐忧上网通讯 电子商务 购物、消费、医疗生活的全部Anytime anywhereAnybody第三只眼在注视着你这种感觉你的保险缴纳额度你的医疗费用你的子女抚养权你的授信额度和其他禁飞名单 维稳上访为你还未犯的罪坐牢信息掌控与责任并举从个人许可到使用者责任承担个人动因及预测分析数据独裁斯大林时代的故事第26页，共49页。第一它们从顾客需要的数据（能够创造商业价值）开始，而不是聚焦在它们已有的数据以及这些已有数据能告诉他们什么。主要工作是在幕后找出什么是顾客

14、需要的（通过数据、工具、信息），然后得到答案。第二不是把你的见解分享给一小撮商业领袖，而是直接把它融入、应用到商业应用或者工作流程，让最多的人来利用这些大数据的结论。第三 拥有绝对的数据使用权。在这个基于云的大数据世界，第三方数据的获取、管理、使用都必须是合法的。第27页，共49页。半结构化数据结构化数据非结构化数据企业非结构化数据越来越多中国500强企业日数据生成量中国500强企业数据中心数据年增长率中国企业级数据中心数据存储量正在快速增长，非结构化数据呈指数倍增长，如果能有效的处理和分析，非结构数据中也富含了对企业非常有价值的信息。第28页，共49页。13各行业企业对大数据的关注程度 目前

15、企业的数据系统架构存在问题2目前企业数据分析处理面临的问题存在的问题第29页，共49页。大数据应用案例（中信银行信用卡中心）第30页，共49页。大数据如何应用在企业营销决策中？ 交通银行在太原市如何设立交通网点和ATM（数据废气利用）美特好应该学习沃尔玛什么？（零售数据对城市消费预测、购物车路径分析）计生办、医院妇产科数据与早教、童装市场的关联卫生厅和各大医院个人数据对于医药行业市场的指导作用各种社会化媒体大数据分析对于4S店汽车销售的促进太原市交通指挥中心、出租车公司GPS数据对户外广告的指导作用旅游局、旅行社接待量、线路、微博数据统计对于阶段性旅游产品、旅游广告投放的意义第31页，共49页

16、。大数据如何应用在企业营销决策中？太原自行车租用点数据能用来做什么？保健品、健康食品、绿色农业能够用哪些数据来进行哪些分析和营销渠道调整？交通银行十八个消费、收入维度分析每个家庭如何精准营销各类个人、家庭理财产品空调、空气净化器与媒体报道、空气质量、城区经济分布商业综合体应用大数据如何做营销？销售管理系统与客流统计系统、停车场车流管理系统、会员管理系统及各商家子系统打通如何利用大数据分析实现精准营销？市场营销、经济学、信息管理、统计学、向电商学习运营部、库管、收银台、推广部、策划部协同作战第32页，共49页。大数据时代大数据时代的思维变革第33页，共49页。 塔吉特：比父亲更早知道女儿怀孕 曾

17、经有一位男性顾客到一家塔吉特超市店中投诉，商店竟然给他还在读书的女儿寄婴儿用品的优惠券。这家全美第二大零售商，会搞出如此大的乌龙？但经过这位父亲与女儿进一步沟通，才发现自己女儿真的已经怀孕了。大数据案例探讨一、未卜先知怀孕案例你如何比你的竞争对手更早发现潜在的客户？第34页，共49页。关键环节一：数据信息记录 一家零售商是如何比一位女孩的亲生父亲更早得知其怀孕消息的呢？每位顾客初次到塔吉特刷卡消费时，都会获得一组顾客识别编号，内含顾客姓名、信用卡卡号及电子邮件等个人资料。日后凡是顾客在塔吉特消费，计算机系统就会自动记录消费内容、时间等信息。再加上从其他管道取得的统计资料，塔吉特便能形成一个庞大

18、数据库，运用于分析顾客喜好与需求。他又是如何做到的？第35页，共49页。关键环节二：数据模型建立 Andrew Pole想到了Target有一个迎婴聚会(baby shower)的登记表。Andrew Pole开始对这些登记表里的顾客的消费数据进行建模分析，不久就发现了许多非常有用的数据模式。比如模型发现，许多孕妇在第2个妊娠期的开始会买许多大包装的无香味护手霜;在怀孕的最初20周大量购买补充钙、镁、锌的善存片之类的保健品。最后Andrew Pole选出了25种典型商品的消费数据构建了“怀孕预测指数”，通过这个指数，Target能够在很小的误差范围内预测到顾客的怀孕情况，因此Target就能早

19、早地把孕妇优惠广告寄发给顾客。第36页，共49页。关键环节三：建立和用户沟通渠道那么，顾客收到这样的广告会不会吓坏了呢？Target很聪明地避免了这种情况，它把孕妇用品的优惠广告夹杂在其他一大堆与怀孕不相关的商品优惠广告当中，这样顾客就不知道Target知道她怀孕了。第37页，共49页。根据Andrew Pole的大数据模型,Target制订了全新的广告营销方案，结果Target的孕期用品销售呈现了爆炸性的增长。Andrew Pole的大数据分析技术从孕妇这个细分顾客群开始向其他各种细分客户群推广，从Andrew Pole加入Target的2002年到2010年间，Target的销售额从440

20、亿美元增长到了670亿美元。大数据的应用分析你应该如何运用大数据？第38页，共49页。白云下面数据跑蓝蓝的天上白云飘二、大数据在外企第39页，共49页。IBMOracleEMCMicrosoft角力大数据 EMCEMC的大数据解决方案专注于使组织更有效地使用他们从不同来源产生的数据，包括网络上，网页上，消费者，监控系统和传感器。EMC的数据计算产品事业部正在开发分析工具以解决大数据现象。EMC的大数据解决方案包括40多个产品。2010年7月收购数据库软件供应商Greenplum，花费3亿美元2009年七月收购数据复制解决方案提供商Data Domain，花费24亿美元不一定和大数据完全相关，E

21、MC从2009年起收购了Archer Technologies, SourceLabs, FastScale Technology, Configuresoft, and Varonis Systems。IBMIBM的策略是提供一个全面的方法来解决前所未有的信息爆炸提出的挑战，因为信息量无论在流量、种类、速度还是活力上都是爆炸式增长IBM一直致力于扩大对包括数据仓库中的大数据、信息流和结构化数据的分析在过去四年中，IBM已经投入超过120亿美元进行了23项相关并购，其中包括：2010年9月收购数据库分析供应商Netezza公司，花费17亿美元2010年10月收购网络分析软件供应商Coremet

22、rics2009年10月收购数据分析和统计软件提供商SPSS, 花费12亿美元2009年1月收购业务规则管理软件供应商ILOG, 花费3亿4千万美元2007年花费20亿美元收购商务智能软件供应商Cognos微软微软提供了高性能计算能力，并在2005年靠Windows Compute Cluster服务器进入相关市场最近，微软的HPC部门开发了该公司的Dryad并行处理技术社区技术预览(CTP),第一步是向Windows HPC Server的用户提供处理大数据工具甲骨文甲骨文大数据提供的数据库和数据库软件主要用于配合Sun的硬件，特别是它的最高端服务2009年7月收购专注于数据复制和实时数据集成解决方案的私人企业GoldenGate Software第40页，共49页。国外已经开始投资应用美国国务院采用大数据技术开发新的美国护照系统IBM宣布投资1亿美元用于大数据研究美国IT公司开始意识到大数据技术能够为公司创造价值大数据公司引入汽车行业高管人员扩展营销业务第41页，共49页。三、大数据在电商中的商业价值双“十一”背后的技术讨论第42页，共49页。