大数据与互联网经济解读课件

大数据与互联网经济解渎大数据概念与应用大数据的概念与意义大数据的来源13大数据应用场景14大数据处理方法02af40●1.1大数据的概念与意义第一章大数据概念与应用1.从“数据”到“大数据时至今日,“数据”变身“大数据”,"开启了一次重大的时代转型大数据”这一概念的形成,有三个标志性事件008年9月,美国泪然(Nate)杂志专刊—-Thenextgoogle第一次正式提出“大数据”1年2月日,钢学3(Sene)杂志专刊Dealingwithdata,通过社查的方式,第一次综合分了大巍框对人们生活造成的,详述了人类正临的数框垸2019年5月,麦肯锝乐究院发布报告Bigdata:Thenextfrontierforin,competition,andproductity第一次给大数框出程对时清斯衾是其大小起出了常效库I具取秆分吁能力釣数030f4001.1大数据的概念与意义第一章大数据概念与应用价值高(Value量大(oume)大数据有巨大的潜在价值,但同其呈几何从2019年至2020年,人类的数据机模指数发式长相比,某一对象或模块数将扩大50倍,每年产生的数据量将增长挹的价值密廈较饭,这无疑给我们开发海到44万亿GB,相当于美国国家酸书馆≡数据垍加了难度和成本数据显的数百万倍,且每18个月一凿。4V速度快(Velocity)特征多(variety随着现代馬测、互联网、计鎬机技大数据与传统数据比,数据来源广、维术的发展,数据生成、存、分析度多、类型杂,各种机器仪表在自动产生处理的速度远远超出人们的想象力数据的同时,人自身的生活行为也在不新创造数据;不仅有企业组织内部的业务数据的显著特征据,还有海相关的外部数据。040f400O1.1大数据的概念与意义第一章大数据概念与应用2.大数据的技术支撑数据源整合进行存储、清洗云计算、硬件性价比的提行、计算速度被来越决挖掘、分析后得出结果直到高以及软件技术的进步◆优化企业管理提南效率大数据存情成本下降放力,机拥有人的智慧智能设备、传感器的普及,推动物联网、人工智能的发展●O1.1大数据的概念与意义第一章大数据概念与应用1)存储∶存储成本的下降云计算出现之前云计算出现之后计算出现后,数据存储服务衍生出了新非常高的的商业漠式,数据中心的出现降低了公司例如,公司要建设网站,需要购置和部的计算和存储成本署服务器,安排技术人员维护服务器例如,公司现在要建设网站,不需要去购保亚数据存储的安全性和数据传输的畅买服务器,不需要去雇用技术人员维护服通性,还会定期清理数据,跨出空间以务器,可以通过租用硬件设备的方式解决便存馅新的数据,机房整体的人力和管同题玛成本都很高存情成本的下降,也改变了大家对数据的看法,更加愿意把1年、2年甚至更久远的历史数据保存下来,有了历史数据的沉淀,才可以通过对比,发现数据之间的关联和价值,正是由于存谄成本的下降,才能为大数据搭建最好的基础设施06af400O1.1大数据的概念与意义第一章大数据概念与应用2)计算:运算速度越来越快海量数据从原始数据源到产生价值,期间会经过存储、清洗、挖、分析等多个环节,如果计算速度不够快,很多事青是无法实现的。所以,在大数据的发展过程中,计算速度是非常关踺的因素●分布式系统基础架构Hadoop的出现,为大数据带来了新的曙光HDFS为海量的数据提供了存储MapReduce则为海量的数据提供了并行计算,从而大大提高了计算效率Spark、Storm、Impala等各种各样的技术进入人们的视野07af400O1.1大数据的概念与意义第一章大数据概念与应用3)智能:机器捋有理解数据的数据带来的最大价值就是大数据让机器变得有智慧,同时人工智能进步提升了处理和理解数据的能力。例如谷歌AlphaGo大胜世界围冠车李世石2阿里云小A成功预测出《我是歌手》的总决赛歌王iPhone上智能化语音机器人Si微信上与大家聊天的微软小冰08af4001.1大数据的概念与意义第一章大数据概念与应用3.大数据的意义美国著名管理学家爱德华戟明所言:“我们信靠上帝。除了帝,任何人都必须用数据来说话。(1)有数据可说在大数据时代,万物皆数”,“呈化一切”,“切都将被数据化",人类生活在一个海呈、动态、多样的数据世界中,数椐无处不在、无时不有、无人不用,数据貮像阳光、空气、水分样常见,姸放大澆望远澆、显微那殳重要。(2)说数据可靠大数据中的^数烂”真实可靠,它实质上是表征事物現象的_种符号语言和逻辑关系,貝冋靠性的数理哲学基础是世界同构原坦。世界貝有物质统性,统的世界中的—切事协都存在时空致性的同构关系,这意味莓任恫事物旳属性和规律,只妻通过适当综码,均可以通过统一的数字信号表达出来。因此,“用数据说话”、“让数据发声”,已成为人类认知世界的-种全新方法。09af4001.1从“数据”到“大数据第一章大数据概念与应用风马牛可相及在大数背景下,因海至无限、包罗万象的数据存在,让许多看似