《大数据采集、预处理与可视化（微课版）》教学日历

XXXXXXXX大学

教学日历系主任：XXX（签字）主管教学负责人：XXX（签字）填报时间：202x年X月X日审查同意时间：202x年x月xx日教学周数： 14自第1周至第14周教学总时数：56学时本学期总学时数：_56_本学期周学时：4202x/202x学年第2学期讲课:系（部）：XXXX任课教师 XXX实验课:课程名称：数据采集与优化教学班号：^cxxx校外教学:38学时18学时 学时课堂讨论：学时校内现场教学：学时大作业学时月日第一周星期—章/节教学内容教学要求作业布置内数课时课外时数备注次周1?1第课第1章1、大数据时代2、大数据相关概念及特征3、大数据系统简介了解大数据时代的特点及大数据的发展历程了解大数据的基本概念及特征理解大数据的作用熟悉大数据生态系统及关键技术，理解大数据技术之间的相互关系22*1第课第1章4、大数据思维5、大数据伦理6、大数据安全掌握大数据思维了解大数据伦理原则理解大数据安全技术3222周第1次课第2章1、Python的安装与运行2、数据类型与运算符3、程序控制结构掌握Python的安装熟练掌握数据类型与运算符熟悉程序控制结构222周第2次课第2章4、函数与模块5、文件操作熟练掌握函数与模块的应用掌握文件读写操作方法322周第1次课实验1Python基本操作1、Pythonshell及IDLE操作2、运算符操作3、字符串操作4、列表操作5、元组操作6、字典操作7、函数与模块8、文件操作22机房3周第2次课第3章1、大数据采集概述2、网络爬虫技术了解大数据采集的相关概念、数据来源熟悉数据采集方法及采集平台熟练掌握网络爬虫技术22工周第1次课第3章3.33、数据抽取技术熟练掌握数据抽取技术224第课第3章3.4案例：网络租房信息采集能够综合应用数据采集方法,获取多种类型的数据3225周第1次课实验2大数据采集技术1、网络爬虫技术2、数据抽取技术3、各类数据采集技术的综合应用22机房5第课第4章1、大数据预处理概述了解数据质量的相关概念理解数据预处理的主要任务熟练掌握数据清洗技术中的缺失22月日第一周星期—章/节教学内容教学要求作业布置课内时数课外时数备注2、数据清洗值处理方法、噪声数据处理方法、冗余数据处理方法、数据格式与内容处理方法6周第1次课第4章3、数据集成4、数据变换5、数据归约熟练掌握数据集成技术中的实体识别问题、冗余问题以及数据值冲突检测与处理方法掌握数据变换技术中的数据规范方法熟练掌握数据归约中的过滤法、包装法和嵌入法226周第2次课实验3大数据预处理常用技术1、数据清洗2、数据集成3、数据变换4、数据归约5、数据脱敏22机房7周第1次课第4章6、数据脱敏7、案例：汽车行驶工况数据预处理了解数据脱敏类型熟练掌握数据脱敏方法能够综合应用数据预处理方法，实现对多种类型数据的预处理3227周第2次课实验4大数据预处理综合应用采用预处理技术实现汽车行驶工况数据的预处理22机房上周第1次课第5章1、Excel数据获取2、Excel数据清洗与转换熟练掌握使用Excel获取文本数据、网站数据、数据库数据的方法熟练掌握Excel中的常用数据分析函数、删除重复行、文本查找与替换、字符串截取、数据的转置、数据的查询和引用、字母与数字转换的常用函数322上周第2次课第5章3、数据抽取与合并4、案例：房价行情的对比分析熟练掌握Excel中的中的数据抽取与合并函数能够综合应用Excel数据分析方法,对多种类型的数据进行预处理3222周第1次课实验5Excel数据获取与预处理综合应用1、数据获取2、数据清洗与转换3、数据抽取与合并4.Excel数据预处理函数的综合应用22机房2周第2次课第6章1、Python数据预处理基础2、数据的分组、分害1、合并和变形了解科学计算库NumPy和数据分析库Pandas熟练掌握数据的分组、分割、合并和变形的常用方法22第6章3、数据缺失值、异常值和重复值的处理4、时间序列数据处理熟练掌握数据缺失值、异常值和重复值的处理方法掌握时间序列数据处理方法2210周第2次课实验6Python数据预处理技术1、数据的分组、分割、合并和变形2、数据缺失值、异常值和重复值的处理3、时间序列数据处理4、文本数据分析22机房¥1第课第6章6.5-6.65、文本数据分析2、案例JMDB5000电影数据预处理熟练掌握文本数据分析方法能够综合应用数据Python数据预处理方法,对数据进行多种类型的预处理322月日第一周星期—章/节教学内容教学要求作业布置课内时数课外时数备注*1第课实验7Python数据预处理综合应用采用Python数据预处理技术，实现IMDB5000电影数据的预处理22机房周■12第课第7章1、数据可视化概述2、数据可视化的理论基础了解数据可视化的相关概念、发展历程及其作用理解数据可视化的流程、设计要素熟悉数据可视化的相关图表2212周第2次课第7章2、数据可视化的理论基础3、Python数据可视化方法掌握数据可视化的相关图表掌握Python数据可视化方法2213周第1次课第7章7.33、Python数据可视化方法熟练掌握和应用Python数据可视化方法322周次321第课实验8Python数据可视化方法实现1、使用Matplotlib绘制基础图表2、使用Seaborn绘制统计图表3、WorldCloud绘制词云图4、使用Networkx绘制网络图5、Python数据可视化方法的综合应用22机房第7章7.44、Pyecharts数据可视化方法熟练掌握和应用Pyecharts数据可视化方法2214周第2次课实验9Pyecharts数据可视化方法实现使用Pyecharts数据可视化方法实现2020年东京奥运会奖牌看板的综合展示22机房注:1、