大数据应用技术基础 教案 项目1 大数据与网络爬虫

XX学校《大数据应用技术基础》学科教案授课课题任务1发布网站授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】1.理解IIS（InternetInformationServices）作为Web服务器软件的基本概念和主要功能，包括托管网站、提供Web服务等。2.掌握本地回环地址（及localhost）的含义和作用，理解其在访问本地网站中的应用。3.了解IIS中默认网站（DefaultWebSite）的概念，知道其默认物理路径及默认首页的设置。【能力目标】1.能够独立启动IIS并找到DefaultWebSite，查看并理解其基本设置，特别是网站物理路径。2.能够将网站文件正确复制到IIS默认网站目录（C:\inetpub\wwwroot）中。3.能够使用浏览器通过或localhost成功访问本地发布的网站，并验证网站发布是否成功。【素养目标】1.培养严谨细致的操作习惯，在网站发布过程中准确执行每一步操作，确保结果正确。2.提升自主探究和解决问题的能力，通过任务实施和拓展尝试，主动发现并解决可能遇到的问题。3.树立规范操作和安全意识，初步了解Web服务器管理的基本流程和注意事项。教学重点及突破策略教学重点：1.IIS的启动及DefaultWebSite基本设置的查看，特别是网站物理路径的确认。2.将网站文件正确复制到IIS默认网站目录的操作步骤。3.使用或localhost在浏览器中成功访问本地网站。突破策略：1.通过教师演示与学生同步操作相结合的方式，详细讲解IIS的启动路径和DefaultWebSite基本设置的入口，确保学生能找到并理解网站物理路径。2.提供清晰的操作图示（如图1-1至图1-5），引导学生一步步完成文件复制，并强调复制位置的准确性，可让学生互相检查文件是否复制到位。3.解释的含义后，让学生亲自动手在浏览器中输入该地址进行访问，并对比不同输入（如localhost、带文件名的地址）的结果，加深理解。教学难点及突破策略教学难点：1.理解IIS作为Web服务器的工作原理，以及网站文件存放路径与浏览器访问之间的关系。2.当访问网站失败时，如何初步判断问题所在（如文件是否复制正确、路径是否有误等）。突破策略：1.采用类比法，将IIS比作“商店管理员”，网站目录比作“商店货架”，网站文件比作“商品”，浏览器访问比作“顾客进店购物”，帮助学生理解服务器、文件路径和访问的关系。通过任务实施中的步骤，让学生直观感受“将商品上架（复制文件）”后“顾客才能购买（浏览器访问）”。2.预设常见错误场景（如文件未复制到正确目录、文件名错误等），引导学生观察错误提示，并根据提示和操作步骤进行排查。组织学生小组讨论，分享遇到的问题及解决方法，培养问题解决能力。教学方法和手段（含信息化技术）1.讲授法：讲解IIS、等基本概念和理论知识。2.演示法：教师通过屏幕投影演示IIS的启动、网站设置查看、文件复制及浏览器访问的完整过程。3.实践操作法：学生在电脑室中跟随教师指导或根据操作步骤独立完成网站发布的各项任务。4.多媒体教学手段：利用PPT展示理论要点、操作图示（如图1-1至图1-6），辅助教学。5.小组讨论法：针对操作中遇到的问题及拓展任务进行小组内讨论交流。课程思政元素1.工匠精神：培养学生在操作过程中的耐心、细致和严谨态度，每一个步骤都关系到最终网站能否成功发布，引导学生追求精益求精的技术操作。2.问题解决与创新意识：鼓励学生在遇到访问失败等问题时，不气馁、不放弃，积极思考解决方案，并通过拓展任务尝试创新应用，激发学习主动性和探索精神。3.信息安全意识：初步引导学生认识到Web服务器管理的规范性，虽然本次任务是本地发布，但为后续学习网络安全、数据安全等知识埋下伏笔，培养学生的信息安全观念。教师教学实施学生学习活动课程引入提问：同学们平时浏览的网站是如何发布到互联网上，让大家能够访问的呢？引出本地网站发布的概念，说明本节课我们将学习如何在自己的电脑上（本地）使用IIS发布一个网站，并成功访问它，激发学生的学习兴趣。授课过程1.讲解必备知识：介绍IIS的定义、主要功能（托管网站、提供Web服务、默认网站），重点解释（本地回环地址）的含义和作用。通过PPT展示相关概念和图示。2.任务分析：结合【任务分析】，向学生说明本次任务的目标是在IIS实现网站发布并浏览网站，明确两个核心步骤：复制网站文件到IIS默认目录、用浏览器浏览网址。课堂实操内容1.指导学生执行“开始”菜单找到并启动IIS（可演示不同Windows版本的启动方式）。2.引导学生在IIS中找到并打开“DefaultWebSite”，然后单击“基本设置”。3.指导学生在“基本设置”对话框中单击“...”按钮，以打开网站物理路径选择窗口。4.让学生观察并记录查看到的网站目录（通常为C:\inetpub\wwwroot），强调该路径的重要性。5.引导学生打开资源管理器，导航到上述网站目录，将准备好的网站文件复制到该目录下。教师巡视，检查学生操作是否正确。6.指导学生打开浏览器（如Chrome、Edge等），在地址栏输入网址“”，按回车键，观察是否能查看到网站首页内容。若成功，则网站发布成功。分享经验：解释即localhost，访问的是本地计算机自身。7.针对学生在操作过程中出现的问题（如无法找到IIS、访问失败等）进行集中解答和个别辅导。课堂小结知识总结：1.回顾IIS的作用和默认网站的设置。2.重申（localhost）的本地访问功能。3.总结网站发布的关键步骤：复制文件到IIS默认目录、浏览器访问本地地址。优秀经验：邀请操作较快或成功解决问题的学生分享自己的操作心得或遇到问题的解决方法，如如何快速找到IIS、如何确认文件是否复制正确等，供其他同学学习。课程引入思考教师提出的问题，积极参与课堂互动，对网站发布产生好奇心和学习兴趣。授课过程1.认真听讲，理解IIS、等基本概念，观看PPT展示，做好笔记。2.明确本次任务的目标和主要步骤，了解任务实施的整体流程。课堂实操内容1.根据教师指导，在自己的电脑上尝试找到并启动IIS服务，对照图1-1检查是否正确启动。2.在IIS界面中找到“DefaultWebSite”，尝试单击“基本设置”选项，观察弹出的对话框。3.按照教师要求，单击“基本设置”中的“...”按钮，查看网站物理路径，理解其含义。4.记录下网站目录路径（C:\inetpub\wwwroot），并在资源管理器中导航到该目录。5.将提供的网站文件复制到该目录下，确保文件复制完整、位置正确。可以与同桌互相检查文件复制情况。6.打开浏览器，在地址栏准确输入“”，尝试访问网站。若成功看到首页，体验成功的喜悦；若失败，记录错误现象，准备向教师或小组同学求助。7.积极参与问题讨论，若自己遇到问题，主动向教师或同学请教；若其他同学有问题，在能力范围内提供帮助。课堂小结知识总结：跟随教师一起回顾本节课学习的重点知识，梳理网站发布的流程和关键节点，巩固所学内容。优秀经验：认真听取同学分享的优秀经验，学习他人的操作技巧和解决问题的思路，反思自己操作中的不足。作业：应用本节课的例子，在本节课任务的基础上，设计一个有应用内容的页面作品，可以自选主题或升级老师给的主题，内容自行设置。1.主题选择：可以是个人介绍、兴趣爱好展示、班级活动宣传、某一学科知识点讲解等。2.页面内容：至少包含标题、正文文字（不少于3段）、一张或多张图片（可从素材库选取或自行制作）。3.文件准备：将设计好的页面文件（如HTML文件、图片文件等）整理好。4.发布验证：将整理好的页面文件复制到IIS默认网站目录（C:\inetpub\wwwroot），并尝试通过/文件名（如/myweb.html）在浏览器中访问，确保能够成功浏览。5.提交要求：下节课前将所设计的页面文件（压缩包形式）提交给教师，并准备简短展示和说明。教学反思：1.学生对IIS的启动和基本设置操作可能不够熟练，尤其是不同Windows操作系统版本的差异可能导致部分学生找不到IIS入口。下次教学可提前了解学生电脑的系统版本，并准备多种启动方式的说明或图示。2.网站文件复制到目录这一步，虽然简单，但仍可能有学生复制到错误路径或遗漏文件。后续可加强对学生操作过程的巡视指导，或采用小组互助的方式，让组长协助检查。3.对于的理解，部分学生可能停留在“输入就能访问”的层面，未能深入理解其作为本地回环地址的原理。未来教学中可适当增加简单的网络原理科普，或通过对比访问其他IP地址（如同学电脑的IP）的方式，加深理解。4.任务拓展部分可以激发学生的探索欲望，但课堂时间有限，可能无法让所有学生充分尝试。可将拓展任务作为选做的课后作业，并鼓励学生在学习小组中交流拓展成果。5.课程思政元素的融入还可以更自然和深入，例如在讲解操作规范时，强调数据安全和知识产权保护意识，引导学生树立正确的网络行为观念。XX学校《大数据应用技术基础》学科教案授课课题编写爬虫程序爬取网页所有td标签授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】1.理解爬虫程序的基本概念及工作流程，掌握使用requests库发送HTTPGET请求获取网页内容的方法。2.熟悉parsel库的功能，学会运用Selector类解析HTML文档，并掌握通过CSS选择器定位table、tr、td等标签的技巧。3.了解Python变量的定义、赋值及应用，掌握Python基本缩进语法在循环结构中的使用规范。【能力目标】1.能够独立在IIS中发布网站，并通过浏览器验证网站发布是否成功。2.具备使用PyCharm创建项目、编写爬虫代码的能力，能够解决代码编写过程中模块导入的问题（如安装requests和parsel库）。3.能够运用所学知识编写爬虫程序爬取网页中的td标签内容，并正确运行程序查看输出结果。【素养目标】1.培养学生对大数据技术的兴趣，激发其主动探索和学习的热情。2.提升学生的问题解决能力，在遇到代码报错、模块缺失等问题时，能积极思考并寻求解决方案。3.树立学生规范编写代码的意识，培养其严谨的逻辑思维和良好的编程习惯。教学重点及突破策略教学重点：1.requests库的使用，包括发送GET请求获取网页内容以及设置响应编码。2.parsel库中Selector类的应用，特别是通过CSS选择器定位td标签的方法。3.Python循环结构结合缩进语法遍历提取到的标签元素。突破策略：1.结合实例演示requests.get()函数的参数和返回值，让学生直观理解如何获取网页内容；通过代码练习，让学生亲自操作设置response.encoding，体会编码设置对中文显示的影响。2.详细讲解parsel库的知识链接内容，结合代码示例，分步骤演示从解析HTML文档到使用CSS选择器定位table、tr、td标签的过程，引导学生跟随操作，加深理解。3.强调Python缩进语法的重要性，通过对比正确和错误的缩进代码示例，让学生明白缩进在区分代码块中的作用；在讲解for循环遍历vtr时，带领学生分析循环体内部代码的缩进要求，确保学生掌握。教学难点及突破策略教学难点：1.在PyCharm中安装requests和parsel库时可能遇到的问题及解决方法。2.理解爬虫程序从发送请求、解析文档到提取标签内容的整体流程，并将各部分知识融会贯通。3.对爬取到的td标签内容进行正确处理和输出，确保结果符合预期。突破策略：1.提前在教学用机上模拟可能出现的模块安装问题，如网络连接失败、权限不足等，并准备好相应的解决方法；在学生操作过程中，巡回指导，及时帮助学生解决安装遇到的问题，对于共性问题进行集中讲解。2.采用流程图的形式展示爬虫程序的整体工作流程，将任务实施的每个步骤与流程中的环节对应起来；在讲解代码时，逐行分析代码的作用，说明各变量之间的关系，帮助学生理清思路，理解各部分知识是如何协同工作的。3.引导学生仔细观察代码参考中打印item2的结果，分析输出内容的结构；鼓励学生尝试对提取到的td标签内容进行进一步处理，如提取文本等，通过实践操作加深对数据提取和输出的理解。教学方法和手段（含信息化技术）教学方法：采用任务驱动法、案例教学法、演示讲解法和实践操作法相结合。以“编写爬虫程序爬取网页所有td标签”为任务主线，通过实际案例演示爬虫程序的开发过程，讲解相关知识点，然后让学生亲自动手实践，完成任务。

教学手段：利用多媒体教学设备展示PPT课件、代码示例和操作步骤；使用PyCharm集成开发环境进行代码编写和调试演示；借助IIS服务器发布网站，供学生进行爬虫测试；通过网络资源提供相关的库文档和学习资料，方便学生课后拓展学习。课程思政元素1.培养学生的规则意识和法律意识，强调在进行网络爬虫操作时，要遵守网站的robots协议，尊重他人的知识产权，不得爬取非法或敏感信息。

2.激发学生的创新精神，鼓励学生在掌握基本爬虫技术的基础上，思考如何将爬虫技术应用于实际生活和学习中，解决实际问题。

3.培养学生的团队协作精神，在实践操作环节，可以组织学生分组讨论、互相帮助，共同解决遇到的问题，体验团队合作的重要性。教师教学实施学生学习活动课程引入通过提问的方式引入本节课的主题，如“同学们，我们在浏览网页时经常会看到各种表格数据，那么如何将这些表格数据自动提取出来呢？”引导学生思考，然后介绍本节课的任务——编写爬虫程序爬取网页所有td标签，激发学生的学习兴趣。授课过程1.讲解爬虫的基本概念和工作流程，让学生对爬虫有一个整体的认识。2.介绍任务实施的第一步：在IIS发布网站。详细说明在资源管理器中打开网站目录C:\inetpub\wwwroot，复制网站文件到该目录的操作步骤，并分享经验：发布网站后，在浏览器访问localhost或，若成功看到网页内容，表示网站发布成功。3.讲解使用PyCharm创建项目的过程，包括执行File/NewProject...，在CreateProject窗口中设置项目目录D:\Pycharm目录，单击“Create”按钮，以及在弹出的OpenProject对话框中单击“ThisWindow”按钮。4.重点讲解爬虫代码的编写：-导入requests库和parsel库中的Selector类，说明导入模块的方法，以及当提示需要导入模块时，如何执行Installpackage操作安装requests和parsel库。-讲解requests.get()函数的使用，包括参数url的设置，以及获取响应对象后设置response.encoding='utf8'来确保中文正常显示，将响应文本赋值给vhtml变量。-介绍使用Selector类解析HTML文档，创建items变量存储解析结果，然后通过items.css('table')定位table标签，赋值给vtable变量；再通过vtable.css('tr')定位tr标签，赋值给vtr变量。-讲解for循环遍历vtr，在循环体中使用item.css('td')定位td标签，并打印输出结果。5.讲解必备知识：Python的缩进语法和变量的用法。通过代码示例说明缩进在表示代码块中的作用，以及变量的赋值、定义和应用，如response、vhtml、items等变量的作用。课堂实操内容指导学生按照任务实施的步骤进行操作：1.让学生在自己的电脑上通过IIS发布网站，并验证发布是否成功。2.引导学生使用PyCharm创建项目，按照代码参考编写爬虫程序，在编写过程中，提醒学生注意模块的导入和安装，以及代码的缩进。3.学生完成代码编写后，指导他们鼠标右击main.py，执行Run'main'运行程序，查看输出结果。4.在学生实操过程中，巡回指导，及时解决学生遇到的问题，如网站发布失败、模块安装不上、代码报错等。课堂小结知识总结：本节课主要学习了编写爬虫程序爬取网页所有td标签的方法，包括在IIS发布网站、使用PyCharm创建项目、编写爬虫代码（涉及requests库发送请求、parsel库解析HTML和定位标签、Python循环和变量的使用等）。重点掌握了requests库和parsel库的基本用法，以及Python缩进语法在代码编写中的应用。优秀经验：1.在发布网站后，及时通过浏览器访问验证发布结果，确保后续爬虫操作有正确的网页来源。2.编写代码时，注意代码的缩进规范，避免因缩进错误导致程序运行失败。3.遇到模块缺失问题时，能够根据提示正确安装所需的库，保证代码的正常运行。课程引入积极思考老师提出的问题，对爬虫技术产生好奇心，明确本节课的学习任务。授课过程1.认真听讲，理解爬虫的基本概念和工作流程，做好笔记。2.跟随老师的讲解，了解在IIS发布网站的步骤和验证方法，记住相关的操作要点和经验分享。3.学习使用PyCharm创建项目的操作流程，熟悉PyCharm的界面和基本操作。4.重点关注爬虫代码的编写过程，理解每一行代码的作用：-学习导入模块的方法，知道当提示模块缺失时如何安装requests和parsel库。-理解requests.get()函数获取网页内容的过程，以及设置响应编码的重要性。-掌握使用Selector类解析HTML文档和通过CSS选择器定位标签的方法，明白vtable、vtr等变量的含义和作用。-理解for循环遍历vtr并提取td标签的逻辑。5.认真学习必备知识，掌握Python缩进语法和变量的用法，能够分析代码中的缩进和变量应用。课堂实操内容1.在老师的指导下，动手在自己的电脑上操作IIS发布网站，并通过浏览器访问验证发布是否成功。2.独立使用PyCharm创建项目，按照代码参考尝试编写爬虫程序，遇到模块导入问题时，根据老师讲解的方法安装相应的库，注意代码的缩进是否正确。3.运行编写好的爬虫程序，观察输出结果，与预期结果进行对比。4.在实操过程中，遇到问题及时向老师或同学请教，积极解决问题，完成任务。课堂小结知识总结：回顾本节课学习的主要内容，梳理爬虫程序编写的步骤和涉及的知识点，加深对requests库、parsel库、Python缩进和变量的理解和记忆。优秀经验：学习和借鉴优秀经验，反思自己在操作过程中存在的问题和不足，为今后的学习和实践积累经验。作业：

应用本节课的例子，在本节课任务的基础上，设计一个有应用内容的页面作品，可以自选主题或升级老师给的主题，内容自行设置。

1.选择一个感兴趣的主题，如电影排行榜、书籍信息列表、天气预报数据等，创建一个包含表格数据的网页，并通过IIS发布。

2.编写爬虫程序爬取自己创建的网页中的td标签内容，要求对爬取到的数据进行简单处理，如提取文本内容并打印输出，或者将数据保存到文本文件中。

3.在程序中添加适当的注释，说明代码的功能和各部分的作用，养成良好的编程习惯。

4.运行程序，确保能够成功爬取并处理数据，记录程序运行过程中遇到的问题及解决方法。教学反思：

1.本节课的教学内容较多，涉及网站发布、PyCharm使用、爬虫代码编写等多个环节，部分学生可能在操作过程中跟不上节奏，需要在今后的教学中合理安排时间，适当增加学生自主操作和练习的时间，确保学生能够充分掌握每个环节的操作。

2.在讲解爬虫代码时，对于requests库和parsel库的部分函数和方法，学生可能理解不够深入，只是机械地模仿代码。后续可以通过更多的案例分析和练习，让学生理解这些库的底层原理和更多的用法，提高学生的灵活应用能力。

3.课堂上学生遇到的问题具有多样性，有些问题是老师提前没有预料到的。在今后的教学中，要更加注重学生的个体差异，加强对学生的个性化指导，对于共性问题及时进行集中讲解，提高教学效果。

4.课程思政元素的融入还可以更加自然和深入，例如在讲解爬虫的合法性时，可以引入一些实际的案例，让学生更深刻地认识到遵守法律法规的重要性，真正将思政教育融入到专业知识的教学中。XX学校《大数据应用技术基础》学科教案授课课题编写爬虫程序爬取网页所有div标签授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】1.理解HTML中div标签的定义、作用及基本属性。2.掌握Python爬虫的基本流程，包括发送HTTP请求、获取网页内容、解析HTML文档。3.熟悉BeautifulSoup库的基本使用方法，特别是find_all()方法用于查找特定标签。【能力目标】1.能够独立在IIS服务器上发布静态网站。2.能够使用PyCharm开发环境，并正确安装所需的第三方库（如beautifulsoup4）。3.能够编写简单的爬虫程序，利用BeautifulSoup库爬取网页中指定class的div标签内容并输出。【素养目标】1.培养学生的编程思维和问题解决能力，能够分析任务需求并转化为实际代码。2.提升学生的信息素养，了解数据获取的基本方法，树立数据安全和合法使用意识。3.激发学生对大数据技术的兴趣，培养其自主学习和探究精神。教学重点及突破策略教学重点：1.BeautifulSoup库的安装与基本使用，特别是find_all()方法的参数设置和返回结果处理。2.爬虫程序的核心逻辑：发送请求、获取响应、解析HTML、提取div标签。3.理解HTML页面结构，能够识别目标div标签及其属性（如class="card"）。突破策略：1.采用演示教学法，教师逐步演示BeautifulSoup库的安装过程和find_all()方法的具体用法，并配合简单示例帮助学生理解。2.将爬虫程序分解为多个步骤（请求、响应、解析、提取），分阶段讲解和练习，使学生掌握每个环节的关键代码。3.提供实际的网页案例（如图1-15所示的网站首页），引导学生查看网页源代码，识别div标签的结构和属性，增强直观认识。教学难点及突破策略教学难点：1.当PyCharm提示“Unresolvedreference'bs4'”时，如何正确安装beautifulsoup4库。2.理解response.encoding='utf8'的作用，确保网页内容正确解码，避免中文乱码问题。3.对find突破策略：1.详细演示安装beautifulsoup4库的步骤（如图1-16所示），包括如何通过PyCharm的提示进行安装，以及手动通过pip命令安装的方法，并强调安装成功的提示（如图1-17所示）。2.讲解网页编码的基本概念，通过对比设置encoding前后的效果，让学生理解其重要性，并在示例代码中明确标注该语句。3.结合“知识链接”中对div标签和find_all()方法的解释，通过修改class_参数的值（如尝试不同的class名称），让学生观察输出结果的变化，加深对参数作用的理解。教学方法和手段（含信息化技术）1.讲授法：讲解HTMLdiv标签、爬虫基本原理、BeautifulSoup库等理论知识。课程思政元素1.法治意识：强调网络爬虫的合法性，引导学生遵守法律法规，尊重网站的robots协议，不得爬取未经授权的敏感信息或进行恶意爬取行为。教师教学实施学生学习活动课程引入提问：同学们在浏览网页时，是否想过如何获取网页中的特定信息？例如，如何批量获取一个招聘网站上的职位信息卡片？引出本节课的主题——编写爬虫程序爬取网页所有div标签。授课过程1.讲解任务分析：明确本次任务是爬取网站数据表，包括在IIS发布网站、浏览网站首页、编写爬虫程序并打印结果。2.知识链接讲解：-详细介绍div标签：作为HTML块级元素，用于组织页面结构，可通过class属性标识样式（结合任务中职位信息被div标签包裹的例子）。-介绍BeautifulSoup库：用于从HTML中提取数据，重点讲解find_all()方法的语法和作用，如div_tags=soup.find3.任务实施步骤讲解与演示：-步骤1：指导学生在资源管理器中打开C:\inetpub\wwwroot目录，复制网站文件以发布网站。-步骤2：启动PyCharm，创建新项目，打开main.py文件。演示输入代码，当出现“Unresolvedreference'bs4'”提示时，演示如何安装beautifulsoup4库。-步骤3：逐行解释参考代码的含义：使用requests.get()获取网页内容，设置encoding为utf8避免乱码，创建BeautifulSoup对象解析HTML，使用find_all()找到所有class为'card'的div标签，并进行遍历打印。-步骤4、5：演示执行Run'main'运行程序，并展示终端中爬取到的网站代码结果。课堂实操内容1.学生按照教师演示的步骤，在自己的电脑上操作：发布网站、创建PyCharm项目、安装beautifulsoup4库、输入并运行参考代码。2.教师巡视指导，及时解决学生在操作过程中遇到的问题，如库安装失败、代码输入错误、运行无结果等。3.鼓励学生尝试修改代码中的参数，如将class_='card'改为其他可能的class值，观察输出结果的变化。课堂小结知识总结本节课主要学习了如何使用Python的requests库和BeautifulSoup库编写爬虫程序，爬取网页中特定class的div标签。重点掌握了爬虫的基本流程、BeautifulSoup库的安装与find_all()方法的使用，以及HTMLdiv标签的作用。优秀经验表扬在实操过程中能够快速完成任务并积极尝试修改代码的学生，分享他们解决问题的思路和方法，如有的同学通过查阅错误提示成功安装了库，有的同学仔细检查了网页源代码找到了正确的class属性值。课程引入思考教师提出的问题，回忆自己浏览网页的经历，对如何获取网页特定信息产生兴趣，明确本节课的学习目标。授课过程1.认真听讲任务分析，了解本次任务的具体要求和步骤。2.学习知识链接内容，理解div标签在HTML中的作用和BeautifulSoup库的功能，特别是find_all()方法的用法。3.仔细观看教师的任务实施演示，记录关键步骤和操作要点，如网站发布路径、库安装方法、代码各部分的作用。课堂实操内容1.按照教师的指导，亲自动手操作：将网站文件复制到指定目录发布网站，在PyCharm中创建项目，尝试输入代码。2.当遇到“Unresolvedreference'bs4'”时，按照教师演示的方法安装beautifulsoup4库，并确认安装成功。3.输入参考代码后，运行程序，观察终端输出结果是否与教师展示的一致（如图1-19）。4.在完成基本任务后，尝试修改代码中的参数，探索不同参数对爬取结果的影响，并记录自己的发现。5.遇到问题时，先自行思考，尝试解决，若无法解决则向教师或同学请教。课堂小结知识总结回顾本节课学习的主要知识点，梳理爬虫程序的编写流程，加深对div标签和BeautifulSoup库使用方法的理解。优秀经验倾听优秀同学的经验分享，学习他们解决问题的方法和学习态度，反思自己在学习过程中的不足。作业：应用本节课的例子，在本节课任务的基础上，设计一个有应用内容的页面作品，可以自选主题或升级老师给的主题，内容自行设置。1.选择一个感兴趣的主题，如电影排行榜、图书信息、体育新闻等，自行构建一个包含多个div标签（具有特定class属性）的简单HTML页面，或在教师提供的网站基础上进行内容升级。2.编写爬虫程序，爬取自己设计或升级后的网页中所有特定class的div标签内容。3.对爬取到的内容进行简单的整理或输出格式化，例如将结果保存到文本文件中，或只提取div标签内的部分关键信息（如标题、简介等）。4.记录程序编写过程中遇到的问题及解决方法，形成简短的实验报告。教学反思：1.本次课的实操环节较多，学生对PyCharm环境和库安装的熟悉程度不同，部分学生可能在安装beautifulsoup4库时遇到困难，下次课可以提前准备好离线安装包或更详细的安装指引。2.对于HTML标签和网页结构的理解，部分学生可能基础较弱，在讲解div标签时，可以增加一些简单的HTML示例页面，让学生直观感受div标签的布局作用，为后续爬虫提取奠定更好的基础。3.代码讲解部分，可以采用断点调试的方式，逐步运行代码，展示每一步的执行结果，帮助学生更好地理解程序的执行流程和各变量的含义。4.任务拓展中提到了使用parsel库的代码，虽然本节课重点是BeautifulSoup，但可以简要介绍parsel库作为另一种解析方式，拓宽学生的知识面，激发其进一步学习的兴趣。5.课程思政元素的融入可以更加自然，例如在讲解爬虫合法性时，可以结合一些实际案例，让学生更深刻地认识到遵守网络规则的重要性。XX学校《大数据应用技术基础》学科教案授课课题编写爬虫程序爬取网页所有img标签授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】

1.理解HTTP协议的基本概念及工作流程，包括客户端请求与服务器响应的交互过程。

2.掌握HTTP状态码的常见类型及其含义，能够通过响应对象获取并判断状态码。

3.熟悉爬虫程序的基本构成，了解requests库用于发送HTTP请求的方法以及BeautifulSoup库解析HTML文档的基本操作。

【能力目标】

1.能够使用requests库发送GET请求获取网页内容，并正确设置编码以确保文本解析的准确性。

2.学会运用BeautifulSoup库解析HTML文档，通过find_all()方法定位并提取网页中的img标签。

3.具备分析爬取结果的能力，能够从提取的img标签中获取src属性值并进行输出展示。

【素养目标】

1.培养严谨的程序设计思维，在编写爬虫代码过程中注重代码的规范性和逻辑性。

2.提升问题解决能力，面对爬取过程中可能出现的编码错误、标签定位不准确等问题，能主动思考并尝试解决。

3.树立信息安全和网络道德意识，了解爬虫技术的合法使用边界，遵守网络爬虫的相关规范。教学重点及突破策略教学重点：

1.requests库的使用，包括发送GET请求获取网页响应以及对响应内容进行编码设置。

2.BeautifulSoup库解析HTML文档，并通过find_all()方法精准提取网页中的img标签。

3.从提取到的img标签中正确获取src属性值。

突破策略：

1.通过演示具体的代码示例，详细讲解requests.get()方法的参数和返回值，让学生直观理解如何获取网页内容；针对编码问题，展示不同编码设置对结果的影响，强调response.encoding='utf8'的重要性。

2.结合HTML文档结构示意图，讲解BeautifulSoup库的初始化过程以及find_all()方法的参数用法，以实际网页为例，带领学生逐步分析如何定位img标签。

3.通过实例代码展示如何遍历img_tags列表，并使用img['src']获取属性值，引导学生注意属性获取时可能出现的KeyError问题及处理方法。教学难点及突破策略教学难点：

1.理解HTTP协议中客户端与服务器之间的请求-响应机制，以及如何将其与爬虫程序的工作流程相结合。

2.对BeautifulSoup库解析HTML文档原理的理解，以及在复杂HTML结构中准确提取目标标签的技巧。

突破策略：

1.利用动画或流程图演示HTTP请求与响应的全过程，将抽象的协议流程具象化；在讲解爬虫程序时，将每一步代码与HTTP协议的相应环节对应起来，帮助学生建立联系。

2.提供不同结构的HTML示例文档，让学生练习使用BeautifulSoup库进行解析和标签提取，从简单到复杂逐步提升难度；引导学生使用浏览器开发者工具查看网页HTML结构，辅助定位目标标签。教学方法和手段（含信息化技术）1.讲授法：通过PPT课件讲解HTTP协议、HTTP状态码、爬虫程序基本构成等理论知识。

2.演示法：在PyCharm开发环境中现场演示爬虫程序的编写、运行过程，展示如何使用requests库和BeautifulSoup库。

3.实践操作法：让学生在电脑室中跟随老师的指导，亲自完成爬虫程序的编写和调试，体验爬取img标签的过程。

4.信息化技术手段：使用多媒体课件展示理论知识和代码示例；利用PyCharm开发工具进行代码编写和运行演示；借助浏览器开发者工具辅助学生查看网页HTML结构。课程思政元素1.培养学生的规则意识和法律观念，强调网络爬虫的使用必须遵守网站的robots协议，不得侵犯他人的知识产权和隐私，引导学生在合法合规的前提下使用技术。

2.激发学生的创新精神，鼓励学生在掌握基本爬虫技术后，思考如何将其应用于数据分析、信息整合等有益领域，为社会发展贡献力量。

3.培养学生的团队协作能力，在实践操作环节可以组织学生分组讨论问题、交流经验，让学生学会在团队中互相学习、共同进步。教师教学实施学生学习活动课程引入

通过提问的方式引发学生兴趣，如“大家平时浏览网页时，会看到很多图片，这些图片是如何在网页中显示的呢？它们的地址信息是怎样的呢？”，进而引出本节课的主题——编写爬虫程序爬取网页所有img标签。

授课过程

1.讲解HTTP协议的基本概念，包括客户端发送请求和服务器返回响应的过程，结合生活中的例子帮助学生理解。

2.介绍常见的HTTP状态码及其含义，重点讲解200OK、404NotFound等状态码，通过代码示例展示如何获取响应对象的status_code属性。

3.讲解爬虫程序的基本构成，介绍requests库和BeautifulSoup库的作用，演示如何安装这两个库。

4.详细讲解使用requests库发送GET请求获取网页内容的方法，包括requests.get()函数的参数、响应对象的text属性以及编码设置。

5.讲解BeautifulSoup库解析HTML文档的方法，包括BeautifulSoup对象的创建、find_all()方法的使用，重点演示如何使用find_all('img')提取所有img标签。

6.讲解如何遍历提取到的img标签列表，获取每个img标签的src属性值并打印输出。

课堂实操内容

1.指导学生在资源管理器中打开网站目录C:\inetpub\wwwroot，将网站文件复制到该目录下，完成网站的IIS发布准备。

2.引导学生启动PyCharm，创建Python项目，并在main.py文件中输入参考代码。

3.学生自主调试代码，老师巡视指导，帮助学生解决代码编写过程中遇到的问题，如语法错误、库未安装等。

4.运行程序，查看终端输出的爬取结果，验证是否成功获取到img标签的src属性值。

课堂小结

知识总结

本节课主要学习了使用requests库和BeautifulSoup库编写爬虫程序爬取网页img标签的方法，包括HTTP协议基础、HTTP状态码、爬虫程序的编写步骤等内容。重点掌握了requests.get()获取网页内容、BeautifulSoup解析HTML以及提取img标签src属性的操作。

优秀经验

表扬在实操过程中代码编写规范、问题解决能力强的学生，分享他们的学习经验，如认真阅读参考代码注释、积极查阅库文档等。课程引入

思考老师提出的问题，积极参与课堂互动，对网页图片的显示原理产生好奇心，明确本节课的学习目标。

授课过程

1.认真听讲，跟随老师的思路理解HTTP协议的工作流程，记录重点概念和知识点。

2.学习常见HTTP状态码的含义，结合代码示例理解如何获取和判断状态码。

3.了解requests库和BeautifulSoup库的功能，按照老师的指导安装这两个库。

4.仔细观看老师演示requests库的使用方法，记录关键代码和参数。

5.学习BeautifulSoup库解析HTML文档的过程，重点关注find_all('img')方法的使用。

6.理解遍历img标签列表并获取src属性的代码逻辑。

课堂实操内容

1.按照老师的指导，在资源管理器中进行网站文件的复制操作，为网站发布做准备。

2.启动PyCharm，创建Python项目，在main.py文件中输入参考代码，注意代码的缩进和语法。

3.自主调试代码，遇到问题时先尝试自己解决，如检查语法、确认库是否安装等，无法解决时向老师或同学请教。

4.运行程序，观察终端输出结果，验证爬取效果，若结果不正确则检查代码并进行修改。

课堂小结

知识总结

回顾本节课学习的知识点，梳理爬虫程序编写的流程，明确自己掌握的内容和需要进一步巩固的部分。

优秀经验

认真听取优秀学生的经验分享，学习他们的学习方法和解决问题的思路，反思自己在学习过程中的不足。作业：

应用本节课的例子，在本节课任务的基础上，设计一个有应用内容的页面作品，可以自选主题或升级老师给的主题，内容自行设置。

1.选择一个自己感兴趣的主题，如“爬取XX旅游网站的景点图片地址”“爬取XX电商网站的商品图片地址”等。

2.确定目标网页，分析该网页的HTML结构，找到图片对应的img标签。

3.使用本节课学习的爬虫技术，编写程序爬取该网页中所有img标签的src属性值。

4.对爬取到的图片地址进行整理和展示，可以将结果保存到文本文件中，或通过简单的方式在控制台进行格式化输出。

5.在作业报告中说明所选主题、目标网页、爬取过程中遇到的问题及解决方法。教学反思：

1.本节课的教学内容紧密围绕任务展开，通过理论讲解和实践操作相结合的方式，学生对爬虫程序爬取img标签的方法有了一定的掌握。但在HTTP协议和BeautifulSoup库原理的讲解上，可能还不够深入，部分学生理解起来仍有难度，后续可以考虑增加更多的实例和互动环节。

2.课堂实操环节，学生的参与度较高，但由于学生的基础水平存在差异，部分学生在代码编写和调试过程中花费时间较多，老师的指导工作量较大。下次可以考虑将学生进行分组，让基础好的学生帮助基础薄弱的学生，提高整体的学习效率。

3.课程思政元素的融入还可以更加自然和深入，例如在讲解爬虫的合法使用时，可以引入具体的案例，让学生更直观地认识到违规使用爬虫的后果，增强他们的法律意识和道德观念。

4.作业的设计能够较好地巩固学生所学知识，但在创新性方面可以进一步提升，例如鼓励学生尝试使用爬取到的图片地址进行简单的图片下载或展示功能开发，激发学生的学习兴趣和创新能力。XX学校《大数据应用技术基础》学科教案授课课题爬取网页所有文本内容授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】1.理解网页爬虫的基本概念和工作流程。2.掌握使用requests库获取网页内容的方法。3.学会运用BeautifulSoup库解析HTML结构并提取文本数据。【能力目标】1.能够独立配置IIS服务器并发布网站。2.能够编写简单的Python爬虫程序爬取网页中的指定文本内容。3.能够分析爬取结果并进行基本的数据处理和输出。【素养目标】1.培养学生的计算思维和问题解决能力，通过实际操作理解数据获取的过程。2.提升学生的信息素养，学会合法、规范地获取网络数据。3.激发学生对大数据技术的兴趣，培养其自主学习和团队协作精神。教学重点及突破策略教学重点：1.requests库和BeautifulSoup库的安装与基本使用。2.运用BeautifulSoup库的find()和find_all()方法提取网页文本内容。3.爬虫程序的编写与调试，包括代码的逻辑结构和语法正确性。突破策略：1.通过演示和分步讲解，使学生清晰了解两个库的功能和使用方法，结合实例代码进行分析。2.设计简单的网页结构案例，让学生分组练习使用不同的方法提取文本，加深对知识点的理解。3.提供完整的参考代码，引导学生对照修改和调试，鼓励学生在实践中发现问题并解决问题，教师巡回指导。教学难点及突破策略教学难点：1.HTML结构的分析和理解，准确找到目标文本所在的标签位置。2.列表推导式在提取多个标签文本内容中的应用。3.爬虫程序运行过程中可能出现的错误（如网页访问失败、标签查找不到等）的处理。突破策略：1.课前让学生预习HTML基础知识，课堂上结合浏览器开发者工具，直观展示网页的HTML结构，帮助学生定位目标标签。2.详细讲解列表推导式的语法和作用，通过对比普通循环和列表推导式的实现方式，让学生理解其优势和使用场景。3.预设常见错误案例，引导学生分析错误原因，教授基本的错误处理方法（如添加异常捕获语句），培养学生的调试能力。教学方法和手段（含信息化技术）教学方法：讲授法、演示法、任务驱动法、小组讨论法。

教学手段：多媒体课件、PyCharm开发环境、IIS服务器、浏览器开发者工具。

信息化技术：利用在线教学平台发布预习资料和课后作业，通过屏幕录制软件记录操作过程供学生回顾，使用虚拟仿真环境让学生进行安全的爬虫练习。课程思政元素1.培养学生的法律意识和道德观念，强调在进行网络数据爬取时，必须遵守相关法律法规，尊重网站的robots协议，不得侵犯他人的知识产权和隐私。

2.引导学生树立正确的数据伦理观，认识到数据的价值和责任，合理、合法地使用数据。

3.通过介绍大数据技术在各个领域的应用案例，激发学生的爱国热情和社会责任感，鼓励学生运用所学技术为社会发展贡献力量。教师教学实施学生学习活动课程引入通过提问“我们日常浏览的网页中的信息是如何被收集和整理的？”引发学生思考，然后展示一些大数据应用案例（如电商平台的商品信息采集、舆情分析等），引出本节课的主题——爬取网页所有文本内容。授课过程1.讲解网页爬虫的基本概念和工作原理，介绍requests库和BeautifulSoup库的作用。2.演示在IIS服务器上发布网站的步骤，确保学生能够访问到本地网站。3.详细讲解参考代码的结构和各部分功能：-导入requests和BeautifulSoup库。-使用requests.get()方法获取网页内容，并设置编码。-创建BeautifulSoup对象解析网页文本。-运用find_all()方法查找指定class的div标签，再通过find()和列表推导式提取h1和p标签的文本内容。-使用print()函数打印输出结果。4.解释知识链接中的内容，重点强调find()与find_all()的区别，以及text属性和列表推导式的使用。课堂实操内容1.指导学生在PyCharm中创建Python项目，安装所需的库。2.让学生按照任务实施步骤，将网站文件复制到指定目录，并编写爬虫程序。3.学生运行程序，观察终端输出结果，教师巡视指导，帮助学生解决遇到的问题。4.鼓励学生尝试修改代码，如提取网页中其他标签的文本内容，或改变输出格式。课堂小结知识总结本节课主要学习了使用Python的requests库和BeautifulSoup库爬取网页文本内容的方法，包括获取网页内容、解析HTML结构、提取指定标签文本以及打印输出结果。重点掌握了find()、find_all()方法和text属性的使用。优秀经验表扬在实操过程中表现积极、能够快速解决问题的学生，分享他们的学习方法和调试技巧，如仔细分析网页结构、善用print语句辅助调试等。课程引入积极思考教师提出的问题，观看大数据应用案例，对网页爬虫产生兴趣，明确本节课的学习目标。授课过程1.认真听讲，记录网页爬虫的基本概念、requests库和BeautifulSoup库的作用。2.观察教师演示IIS发布网站的过程，了解网站发布的基本步骤。3.跟随教师的讲解，理解参考代码的逻辑和各部分功能，对不理解的地方及时提问。4.结合知识链接，对比学习find()与find_all()的用法，掌握列表推导式提取文本的技巧。课堂实操内容1.在PyCharm中按照教师指导创建项目，安装requests和BeautifulSoup库。2.动手操作，将网站文件复制到C:\inetpub\wwwroot目录，编写爬虫程序。3.运行程序，观察输出结果，遇到问题时先自行思考，尝试解决，无法解决时向教师或同学求助。4.尝试修改代码，探索不同的文本提取方式和输出格式，拓展思维。课堂小结知识总结回顾本节课学习的知识点，整理笔记，明确自己掌握和未掌握的内容。优秀经验认真听取优秀学生的经验分享，学习他们的学习方法和调试技巧，反思自己在学习过程中的不足。作业：

应用本节课的例子，在本节课任务的基础上，设计一个有应用内容的页面作品，可以自选主题或升级老师给的主题，内容自行设置。

1.选择一个合法的公开网站（如新闻网站、博客等）作为爬取目标。

2.分析该网站的HTML结构，确定要爬取的文本内容（如文章标题、正文、作者等）。

3.编写爬虫程序爬取所选内容，并将结果以合适的格式（如文本文件、CSV文件等）保存。

4.对爬取的数据进行简单的整理和分析，如统计文章字数、提取关键词等。

5.撰写一份简短的实验报告，包括爬取目标、爬取过程、遇到的问题及解决方法、数据结果分析等内容。教学反思：

1.本节课通过任务驱动的方式，让学生在实践中学习爬虫技术，整体教学效果较好，但部分学生对HTML结构的理解仍不够深入，在提取目标标签时存在困难，后续教学中需要加强HTML基础知识的复习和巩固。

2.参考代码的讲解过程中，虽然对每一步都进行了说明，但部分学生还是难以跟上节奏，下次可以将代码分解为更小的模块，逐步讲解和演示，让学生有更多的时间消化和理解。

3.课堂实操环节，学生的参与度较高，但由于学生的基础水平存在差异，部分学生完成任务的速度较慢，需要教师投入更多的精力进行个别指导，未来可以考虑采用分组合作的方式，让基础好的学生帮助基础薄弱的学生，共同进步。

4.课程思政元素的融入还可以更加自然和深入，例如在讲解爬虫的合法性时，可以引入具体的法律案例，让学生更直观地认识到遵守法律法规的重要性。

5.课后作业的设计能够较好地巩固学生所学知识，但在难度上可以设置不同层次，满足不同水平学生的需求，如基础层完成指定网站的爬取，提高层尝试爬取动态网页内容或进行数据可视化展示。XX学校《大数据应用技术基础》学科教案授课课题编写爬虫程序爬取网站数据表授课老师授课时间周一第1、2节授课课时2课时授课班级XX班班级地址??电脑室教学目标【知识目标】1.理解爬虫程序的基本概念和工作流程。2.掌握使用requests库发送HTTPGET请求获取网页内容的方法。3.熟悉parsel库中Selector对象的使用，能够运用CSS选择器和XPath表达式提取网页中的表格数据。【能力目标】1.能够在IIS服务器上正确发布网站，并通过浏览器访问网站首页。2.能够独立使用PyCharm创建Python项目，并编写简单的爬虫程序爬取网站数据表。3.能够运行爬虫程序并分析输出结果，判断数据爬取是否成功。【素养目标】1.培养学生的自主学习能力和问题解决能力，在实践过程中主动探索解决遇到的技术问题。2.增强学生的团队协作意识，在课堂实操环节中学会与同学交流合作，共同完成任务。3.树立学生的信息安全意识和规范使用网络数据的观念，了解爬虫技术的合法应用边界。教学重点及突破策略教学重点：1.爬虫程序的核心代码编写，包括使用requests库获取网页内容和parsel库提取表格数据。2.CSS选择器和XPath表达式在提取表格数据中的具体应用。3.爬虫程序的运行及结果分析。突破策略：1.通过详细讲解爬虫程序的代码结构和各部分功能，结合实例演示，帮助学生理解核心代码的编写逻辑。2.提供多个简单的HTML表格示例，让学生练习使用不同的CSS选择器和XPath表达式提取数据，加深对两种提取方式的掌握。3.组织学生进行分组实操，教师巡回指导，及时解决学生在运行程序和分析结果过程中遇到的问题，确保学生能够顺利完成任务。教学难点及突破策略教学难点：1.CSS选择器和XPath表达式的灵活运用，尤其是针对不同结构的表格如何准确选取所需数据。2.对爬虫程序运行过程中出现的异常情况（如网页访问失败、数据提取错误等）的处理能力。3.将爬取到的数据进行合理的处理和打印输出，使其格式清晰易读。突破策略：1.系统介绍CSS选择器和XPath表达式的常用