大数据课件20190214.doc

课题名称 大数据与脱贫攻坚设计者 林植 一、概述 学科说明互联网信息科普类课程 课题来源 打破贫困村的信息壁垒，在互联网使用方面的短板。 概述学习内容 网络、信息、大数据的应用，及如何用大数据创造价值 概述这节课的价值以及学习内容的重要性让农村朋友了解大数据，信任大数据，使用好大数据工具。以技术知识的革新，推进脱贫攻坚工作。二、教学目标分析从知识与技能、过程与方法、情感态度与价值观三个维度对该课题预计要达到的教学目标做出一个整体描述。让农村朋友了解大数据，信任大数据，使用好大数据工具。 三、学习者特征分析贫困村的农民朋友，授课要用通俗易懂的语言。尽量减少理论和复杂的逻辑推演，简单直接地阐述厉害关系。四、教学策略选择与设计通过提出问题，解答问题的方式和自由讨论的方式展开课程的内容。 五、教学资源与工具设计 第一书记整合农村人力资源，村支部协调进行宣传和串讲。 六、教学过程（一）什么是大数据2014年11月19日21日，第一届世界互联网大会在中国浙江乌镇举办。（有多少人去过乌镇？谈谈对乌镇的感受）世界互联网大会到今年2018年已经是第五届了。人人都想着自己的家乡能像乌镇一样，除去社会、经济、文化、卫生等等理由，最简单的理由就是美。世界互联网主要邀请国家和地区政要、国际组织的负责人、互联网企业领军人物、互联网名人、专家学者，涉及网络空间各个领域，体现多方参与。（会议到底说了什么？）初期的会议围绕全球互联网治理、网络安全、互联网与可持续发展、互联网知识产权保护、技术创新以及互联网哲学等诸多议题进行探讨交流。2018第五届大会重点探讨人工智能、5G、大数据、网络安全、数字丝路等议题。此外，大会将继续发布一批成果性文件和本年度全球互联网领域顶级领先科技成果。今天我们的课程就来讲一个新的概念大数据。（数据和数值的区别？数据和信息的区别？）数据(data)是事实或观察的结果，是对客观事物的逻辑归纳，是用于表示客观事物的未经加工的的原始素材。数据可以是连续的值，比如声音、图像，称为模拟数据。也可以是离散的，如符号、文字，称为数字数据。数据是指对客观事件进行记录并可以鉴别的符号，是对客观事物的性质、状态以及相互关系等进行记载的物理符号或这些物理符号的组合。它是可识别的、抽象的符号。它不仅指狭义上的数字，还可以是具有一定意义的文字、字母、数字符号的组合、图形、图像、视频、音频等，也是客观事物的属性、数量、位置及其相互关系的抽象表示。例如，“0、1、2.”、“阴、雨、下降、气温”“学生的档案记录、货物的运输情况”等都是数据。数据经过加工后就成为信息。农产品中的数据：现实中的每一个物件都带有可以转化为信息的数据。以福山村最畅销的农产品葡萄为例。一串葡萄就可以收集到不下十种数据：一串多少颗、什么颜色、什么口味、什么品种、多重、坐果时间、收获时间、含糖量、含水量、平均果粒直径、保质期等，当然还有大家最关心的售价。那么这些数据有什么用呢？假设你是一个收购商，你是否会选取几个信息为基础定立标准来控制你的收购价？那么作为生产者，我们是否也会考虑他们的要求标准来控制我们的产品，然后再以各种信息为讨价还价的根据？可以说在大数据的时代，信息和数据就等于是金钱。你掌握了信息的主动权，就等于掌控了市场的主导权。信息与数据既有联系，又有区别。数据是信息的表现形式和载体，可以是符号、文字、数字、语音、图像、视频等。而信息是数据的内涵，信息是加载于数据之上，对数据作具有含义的解释。数据和信息是不可分离的，信息依赖数据来表达，数据则生动具体表达出信息。数据是符号，是物理性的，信息是对数据进行加工处理之后所得到的并对决策产生影响的数据，是逻辑性和观念性的；数据是信息的表现形式，信息是数据有意义的表示。数据是信息的表达、载体，信息是数据的内涵，是形与质的关系。数据本身没有意义，数据只有对实体行为产生影响时才成为信息。数值就仅仅是数，不含有具体现实的信息。数据是有现实信息的数值，数据通过归类化身为数值在计算机中以二进制进行统计计算。（二）大数据的作用与特点大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 1 在维克托迈尔-舍恩伯格及肯尼斯库克耶编写的大数据时代 2 中大数据指不用随机分析法（抽样调查）这样捷径，而采用所有数据进行分析处理。大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。通过大数据的后两种特性可以见得大数据所产生的计算结果是有价值和真实性的。简单来说大数据的计算结果可以算是一种商品。反观前三种特性：大量、高速、多样，大数据可以高效的将商品与市场需求对接，最大程度消除信息的不对称，稳定与优化市场资源配置。（三）大数据产品介绍商品是一种二重的东西，即使用价值和交换价值。具体劳动创造商品的使用价值，它反映人和自然的关系，是劳动的自然属性。抽象劳动即为商品的价值（交换价值），它是价值的实体，代表的是社会成员通过交换相互支配对方劳动的社会关系，即代表的是人支配人行为（劳动）权力，而不是具体的财富（使用价值），体现了商品生产过程中，社会成员相互交换支配对方行为（劳动）的社会关系。抽象劳动的凝结，形成商品的的价值。在计算机系统中，数据以二进制信息单元0,1的形式表示。以下是大数据的产品与应用。从上面图中所列的我们可以看到大数据现在主要用在商业市场分析、营销预测、风险评估等方面，那么到底什么是大数据了。首先，大数据具有以下几个基本的特征2：第一：数据量大：数据量级已从TB（1012字节）发展至PB乃至ZB，可称海量、巨量乃至超量。第二：类型繁多：愈来愈多为网页、图片、视频、图像等半结构化和非结构化数据信息。第三：价值密度低：以视频安全监控为例，连续不断的监控流中，有重大价值者可能仅为一两秒的数据流；360全方位视频监控的“死角”处，可能会挖掘出最有价值的图像信息。第四：速度快时效高：大数据时代对其时效性要求很高，这是大部分数据挖掘最显著的特征。第五：真实性：大数据来源于现实，最终影响和应用于现实。从以上我们就可以初步的知道什么是大数据了，大数据并不是很多很多的数据，也不是存储了很多数据就叫大数据。因为“大数据”只是个简称，说全一点应是“大数据挖掘”，没经过挖掘的大数据如同没有开采出来的原油，对人来说一点用处都没有，但大数据也不是一般意义上所研究的数据挖掘。说完整点，结合上面两张图片中所示的内容，可以认为现在层面上的大数据是“大数据的自动挖掘”3。以前的数据分析或挖掘，是指人通过数据去进行分析，挖掘出一些规律性的东西以供以后使用。（四）大数据产品如何应用于脱贫攻坚有人说大数据可以实现所谓的计划经济，但是就目前来看还是不行的。现在信息对等已经实现，但是现实中的突变量还在，大数据在对应突变量方面还存在短板。互联网+已经让大数据工具就在手边，如何使用，如何利用大数据脱贫是我们最关心的问题。自从4G网络普及后，大数据工具一直影响着我们的生活，我们也都在用，例如：浏览器、手机导航、打车软件、叫餐软件、网购等等。今后还会有医疗、烹饪、教育等等，都可以应用大数据。大数据当前用于扶贫方面最直接的就是网络平台推销农产品。当下还有一些叫做订制式服务。举个例子，比如我们村的荒田很多，城市里有很多退休老人想种田，自己种自己吃，吃不完还能送朋友，但是他们没有田。这下通过大数据平台让他们对接起来，大数据就会告诉他们我们村适合种什么，如果有他们想要的他们就可以下单订制土地和耕种计划，大数据提供种植的技术信息还有种苗等采购信息。但是我们村太远，他们来不了怎么办？首先，可以先在订制的田地周边安装网络摄像头，他们可以通过手机和电脑看到自己所订制的田地的情况。而后，大数据提供一个网络雇佣工人的平台，村子附近有劳动力的人如果都使用了这个平台，那么他们就会收到这样的信息，就和打车软件一样抢单，谁快谁先做，谁做的好优良记录就多。用户通过大数据工具实现了P2P B2C的直接对接，用户足不出户就可以把想做的事情直接做完。有人就会质疑了，如果有人在雇佣中不守规矩，偷懒了，会怎么样？这个时候大数据又发挥他的作用了，大数据能够提供双方的信用信息。如果有个体多次违约，就会被大数据记录黑名单，这样不守信用的事情在大数据的约束下只会越来越少。因此大数据提供了有力的信用保证。以上的这类服务当前是有的，只是还不够成熟。一旦将来普及了，中国将进入人人都能通过网络进行多元化的种植养殖的大农合时代。农产品的一切信息都被大数据记录捕捉，彻底告别那个易毒而食的时代。贫困村所有的资源通过大数据和互联网+的工具都可以充分利用起来。大数据可以说为打赢脱贫攻坚战提供了信息方面的保障。利用大数据来做订制式服务有以下几点好处：1、 打破信息壁垒，充分利用社会资源，降低生产成本：发达地区和单位利用其占据信息资源的优势和信息技术的垄断地位，对欠发达地区和单位在安全、经贸、科技、文化等方面进行制约。简单说就是信息灵通的组织可以从最低价的地方收购，然后去最经济的地方出售。如果信息不灵通，也许你刚刚5元一斤卖了产品给一个收购商，结果后脚来了一个6元收购的，你是否感觉卖亏了？如果你能够知道所有收购商的价格和需求量就不会出现低价贱卖的情况。这就是掌握信息不对称造成的贸易差，信息灵通的组织就可以最大化赚取中间的差额利润。而大数据软件是让所有人都获得对等的信息，未来的交易会更加公平，就看你是否愿意使用大数据工具。有了大数据工具以后一边买不到、一边卖不掉的情况会越来越少。对于农村来说所有的产品都会卖干净。有句话说世界上没有垃圾，只有放错了地方的资源。大数据就可以让资源去它该去的地方。2、 减少中间环节，节约仓储空间： 同样，大数据让需求和生产直接对接，打破信息壁垒的同时，加快了交易的节奏，通过信息传输沟通替代了人的跑路沟通，许多产品需要存储的时间变短，甚至不需要存储，这边生产出来那边就卖了，甚至没生产出来就被预订了。这对生产单位，尤其是贫困村是极为有利的缩短了产品销售周期，同时大大节约了成本。3、 依照需求订制服务，产品多样化（哥白尼式的产销革命、节约资源、推动创新）： 大数据带来的好处不但是以上两点说的节约，今后可以有上述说的订制式服务，客户的各种各样的需求，都可以用订单来解决，而不是产品生产出来后去找需求差不多的客户。而是在生产过程中就满足了客户的个性需求。客户需要多少生产多少。简单说就是要什么样做什么样，要多少做多少，一点都不浪费。4、 生产过程全监控，产品质量与安全责任自负，减少纠纷： 订制式服务通过大数据采样和过程监控，所有产品都有对应的代码可以查到生产源，追溯每一个过程。这些信息在大数据传输中几乎不需要成本，非常便捷。如果产品出了问题，每个环节都可以查，以后的问题产品会越来越少，你的产品一旦有问题就会被大数据系统记录下黑点。通过大数据的产品质量和安全都是有保障的，如果问题不是出在你的生产，而是出在运输过程，那么同样你也不会背黑锅。5、 交易信用保障，降低资金风险： 现在的交易很多都用支付宝与微信，首先假币是不可能的，而通过有信用的正规的第三方，记录都是可以查的，所有交易方都是实名认证的，赖账逃跑等情况未来是不存在的。（五）大数据时代社会面临的问题大数据的价值在于存储信息后的再使用。其中关键的一个问题是要收集、保存一切信息，这与隐私保护又是互相冲突的两个对立面。大数据时代必然会导致人们更多的个人信息被搜集和捕捉，这势必会使很多人感到不舒服甚至不安。如果站在大数据的角度而言，在大数据的时代，在大数据时代，每个人身上能够被获取的数据点不再是百十个而是高达百万甚至上亿个，谁都根本不可能把某一个人身上的所有数据点全部掌握。所以在保护个人隐私的时候我们可能需要换一种思考方式。我们的关注重点不应该是要不要提供出这些数据，而是如何使用这些数据。掌握有数据资源和分析能力的个人或者团体，很容易利用自己先有的技术优势将人们的个人的意志和被公平对待的要求否决掉。个人或者团体一旦拥有这些数据资源，且又没有合理有效的监督的时候，很容易利用这些数据作出不为人知的具有破坏性的事情，并且这些行为是极其隐蔽的。而现今保护数据的隐私或者不利用数据做一些不正常的事情完全依靠的是数据搜集者和分析者的基本道德和素质。但这并不能完全有效的保证数据使用数据的团体或个人完全遵守相关的职业操守。应此，在这种情况下，对于个人而言，需要加强自我数据的保密意识，防范可能存在的风险。对于团体和企事业单位而言，首先要加强保密意思，建立行之有效的保密管理措施，在有可能留下隐私数据的情形下要充分考虑隐私暴露而可能