《大数据技术与应用》教案

gg大数据技术与应用》教案3/193/19《大数据技术与应用》教案20XX20XX学年第M学院（部）： 教研室（系）： 授课班级： 课程学分： 课程学时： 课程周学时： 使用教材：大数据技术与应用-微视频版章节名称授课形式

1121章大数据概论掌握大数据分析的过程，技术及工具教学目的及掌握大数据分析的过程，技术及工具教学目的及要熟悉大数据的概念及特征求熟悉大数据的当前应用及前景发展大数据采集方式教学重点大数据存储技术大数据分析技术教学难点大数据特征的理解和大数据分析处理的过程大数据基本槪念大数据的特征教学内容大数据的分析过程，涉及大数据的采集，存储以及分析。大数据的具体应用和大数据的发展前景1、教学方法：介绍/演示大数据的基本概念和特征示例说明大数据的特征的类型，加强概念的理解。教学方法与手段设计 （3）示例说明使用大数据分析过程的步骤以及各自的类型（4）示例说明大数据与人工智能的关系，以及大数据的发展应用前景2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突出。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计

涉及有关大数据的发展背景或前景可以学生讨论回答PPt的播放做到适时呈现、对过程有动态演示。章节名称2章大数据集群系统基础授课形式教学目的及要求理论课■案例讨论课□实验课■习题课□其他□熟悉大数据集群概念及系统组成章节名称2章大数据集群系统基础授课形式教学目的及要求理论课■案例讨论课□实验课■习题课□其他□熟悉大数据集群概念及系统组成LinUX操作系统以及常用指令熟悉虚拟技术掌握大数据集群部署教学重点•用VMWareWOrkStatiOnXCentOS7、SeCUreCRT的安装和使教学难点使用三台服务器作为集群节点，部署网络配這、安全配置、时间同步及实现登录大数据集群系统的槪述及分类，集群的目的•LinUX系统简介与特性LinUXLinUX常用命令，目录操作，文件浏览查找以及归档，系统教学内容类，网络类，进程类等命令虚拟化技术简介、原理及优势劣势VirtualBo×,VMWareWOrkStation,KVM等•CentOS大数据集群系统的组成，架构操作实践：大数据集群的部署思考题和作业1章课后习题实验内容无章节名称3HadOOP分布式系统授课形式章节名称3HadOOP分布式系统授课形式理论课■案例讨论课□实验课■习题课□其他□Hadoop系统及其优点教学目的及要求Hadoop原理及运行机制HadOOPHadOOPJaVaHadoop安装与配置教学重点VMWareHadoop教学难点VMWareHadoop1、教学方法：（1）介绍大数据集群系统的原理，组成，架构；教学方法与手段设计（2）LinUX系统命令行进行集群的部署。2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计（2）涉及有关集群部署时，通过示例演示完成：（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业2章课后习题实验内容（1）完成课本实例集群的部署；（2）LinUX系统的命令行操作教学内容

HadOOP系统的发展历程及其优点的介绍HadOOP原理的介绍HDFS,MaPRedUCe组件的介绍VMWareHadOOP运行环境VMWareHadOOP在线帮助和相关资源1、教学方法：（1）介绍/Hadoop的运行环境教学方法与手段设计

（2）VMWare2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突出。（PPt课件）以文字描述为主，要点及关键词用不同颜色标注：板书设计

Hadoop时，通过示例演示：PPt的播放做到适时呈现、对过程有动态演示。思考题和作业3章复习题：填空题&思考题实验内容 熟悉HadOOP运行环境章节名称授课形式教学目的及要求教学重点•教学难点 •

442+24HDFS分布式文件系统理论课■案例讨论课□实验课■习题课□其他□HDFS的常规操作ECliPSeHDFS的操作实践HDFS的设计前提与目标，及架构组成ECliPSe进行操作实践HDFS的原理、数据读写的原理ECliPSeHDFS进行目录创建删除，列目录以及文件的上传下载HDFS的介绍HDFS的设计前提与目标教学内容

NamenOde和Datanode文件系统的名字空间数据复制，及英中的特性HDFS的读写流程HDFS中Sheil及JaVaAPlECIiPSeHDFS的操作1、教学方法：（1）介绍/HDFS相关知识点；教学方法与手段设计

ECliPSeHDFS项目，及常规操作。2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。章节名称5MaPRedUCe分布式计算授课形式章节名称5MaPRedUCe分布式计算授课形式理论课■案例讨论课□实验课■习题课□其他□MaPRedUCe架构，原理及工作机制教学目的及要求MaPRedUCeWOrdCOUnt编程实例MaPRedUCe倒排索引编程实例教学重点•MaPRedUCe的基本原理、架构以及工作机制等知识内容教学难点••MapReduceWOrdCOUnt编程实例；MapReduce倒排索引编程实例MaPRedUCe架构和原理MaPRedUCe的工作机制教学内容IDLEMaPRedUCeWOrdCOUnt实例IDLEMaPRedUCe倒排索引实例（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计（2）HDFS的创建及操作时，通过示例演示；（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业4章习题：简答题实验内容HDFS的应用1、教学方法：1、教学方法：（1）MaPRedUCe架构，原理及工作机制：（2）IDLEMaPRedUCe倒排教学方法与手段设计索引实例（3）IDLEMaPRedUCeWOrdCount实例2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计（2）MapReduce实例时，通过示例演示；（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业5章复习题：填空题&思考题实验内容MaPRedUCeWOrdCOUntMaPRedUCe倒排索引编程章节名称授课形式

662+26HBaS分布式数据库应用理论课■案例讨论课□实验课■习题课□其他□HBaSe的架构及存储教学目的及要求

HBaSe的集群部署，SheII操作，过滤器HBaSe编程HBaSe架构与存储的介绍HBaSe部署时，参数配置，运行与测试教学重点教学难点

HBaSeSheIl操作命令HBaSe的各种过滤器HBaSe的表编程及过滤查询编程HBaSeSheIl各种操作命令HBaSe相关过滤器HBaSe的编程HBaSe简介，包括架构与存储教学内容

HBaSeHBaSe参数配置HBaSe运行与测试HBaSe的general操作，namespace操作，DDL操作以及授权HBaSe过滤器，包括行，列，列名，值，前缀，列前缀，行键，首次行键，单列值，单列排除，包含结束，列计数等。HBaSeJaVaAPI,实现表的创建删除，数据查询等HBaSe提供的过滤类进行査询1、教学方法：（1）HBaSeHBaSe的配宜及相关操作：教学方法与手段设计（2）HBaSeSheIl操作命令，过滤器及编程。2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突出。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计（2）HBaSe代码时，通过示例描述：（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业6章习题：简答题&实践题HBaSeSheIlH实验内容BaSe的使用。章节名称授课形式教学目的及要求

772+27YARN资源分配理论课■案例讨论课□实验课■习题课□其他□了解统一资源调度平台YARN架构及其工作流程YARN的基本原理、架构及其工作流程教学重点 •YARNSheIl实例操作教学难点

YARNShell实例的命令及其操作统一资源管理和调度平台介绍YARN的优势对比教学内容 •YARN架构及工作流程YARNShell实例的具体操作1、教学方法：介绍统一资源管理和调度平台：教学方法与手

YARNYARN的架构和工作流程，介绍段设计 YARN的优势，具体操作YARNSheIl实例。2、辅助手段：多媒体演示。3PPt课件)以文字描述为主，要点及关键词用不同颜色标注：板书设计

YARNSheIl实例的具体命令和操作，通过示例演示；PPt的播放做到适时呈现、对过程有动态演示。章节名称授课形式

882+28SPark集群计算理论课■案例讨论课□实验课■习题课□其他□SPark的生态系统及架构教学目的及要求

熟悉SParkRDDSPark集群部署及应用案例SParkRDD工作流程思考题和作业7章复习题：填空题&思考题思考题和作业7章复习题：填空题&思考题实验内容YARNSheIl实例的操作教学难点 • SPark编程应用，SPark算法实现Spark及其特性SPark生态系统的组成及应用框架RDDs,作业调度，内存管理，检査点支持SPark集群部署所需软件包并解压教学内容 •完成参数配置及运行SPark交互RDD的转化操作，行动操作PairRDD的转化操作，行动操作RDD的其他操作1、教学方法：（1）1、教学方法：（1）SParkRDD；（2）PythOnRDD的相关操作。教学方法与手段设计（3）PythOnSParkW法实例。2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注；板书设计（2）RDDSpark算法时，通过示例描述：（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业8章习题：简答题&实践题8-1〜8-50PythOn进实验内容RDD相关操作章节名称9SPark机器学习章节名称9SPark机器学习授课形式理论课■案例讨论课□实验课■习题课□其他□SParkMLlibLOCalVeCtOr数据类型（本地向虽:）、教学目的及要求LabeIedPOint类型（标签向量）、LOCalmatrix数拯类型（本地矩阵）、ROWMatriX类型（分布式矩阵）、IndeXedRoWMatriX类型、COOrdinateMatrix类型、BIOCkMatriX类型DataFrameAPlRDDAPl的基本统计SParkMLIib的LOCalVeCtOr数据类型（本地向量）、LabeledPOint类型（标签向量）、LOCalmatrix数据类型（本地矩阵）、R教学重点 OWMatriX类型（分布式矩阵）、IndeXedRoWMatriX类型、nateMatrix类型、BlOCkMatriX类型DataFrameAPlRDDAPI体步骤比较Spark实例中的聚类问题和随机森林问题K-MeanS算法教学难点 •分析莺尾花数据，学习随机森林算法，掌握数据集的训练、评与预测方法SParkMLIib数据类型槪述LOCalVeCtOr数据类型（本地向量）LabeledPOint类型（标签向量）LOCalmatrix数据类型（本地矩阵）教学内容

ROWMatriX类型（分布式矩阵）IndeXedROWMatriX类型COOrdinateMatriX类型BIOCkMatriX类型DataFrameAPIRDDAPI的基本统计比较聚类问题和随机森林问题的实例操作1、教学方法：1、教学方法：通过示例说明常用内置数据类型的泄义、声明和使用。教学方法与手段设计2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注：板书设计（2）涉及有关常用数据类型的使用以及聚类问题和随机森林问题，通过示例描述：（3）PPt的播放做到适时呈现、对过程有动态演示。思考题和作业9章复习题：填空题&思考题求HiVe编程•HiVe原理及数据处理教学重点求HiVe编程•HiVe原理及数据处理教学重点HiVe的数据类型和文件格式教学难点•HiVe实例，如表、数据的命令应用章节名称IOHiVe数据仓库应用授课形式理论课■案例讨论课□实验课■习题课□其他□HiVe的数据类型和文件格式教学目的及要熟悉数据定义，数据操作以及数据查询HiVe组成模块，执行流程概述MetaStOre存储模式教学内容教学方法与手

Hive,配置参数并运行测试HiVeBeeline了解基本数据类型与文件格式数据的定义，操作，查询HiVe编程1、教学方法：（L）HiVe运行环境，数据类型和文件格式；HiVe进行数据相关操作。段设计 （3）示例说明HiVe中，JDBC函数应用及相关实例。2、辅助手段：多媒体演示。3、对于重点和难点，通过例题讨论讲解、师生互动、作业等来突岀。（PPt课件）（1）以文字描述为主，要点及关键词用不同颜色标注；板书设计

HiVe数据操作及编程时，通过示例描述：PPt的播放做到适时呈现、对过程有动态演示。思考题和作业10章习题：简答题&实践题实验内容 完成课本中的实例，熟悉HiVe的使用11112+2章节名称授课形式教学目的及要

ZOOKeePer协调服务理论课■案例讨论课□实验课■习题课□其他□ZOOKeePerZAB及数拯模型，集群部署的过程和配置ZOOKeePer在HadOOPYARNHA、SParkHA和HiV求 eHA的应用及配置方法ZOOKeePer在单节点故障的解决办法ZOOKeePer基本的读写操作编程案例实现教学重点

ZOoKeePer的特性及其应用

ZOOKeePer集群的操作编程ZOOKeePer的数据模型和事件监听器的工作机制ZOOKeePer集群部署的操作及相关基本命令了解ZOOKeePer在Hadoop,HBas