数据采集与预处理电子教案 P2-T2-使用Selenium爬取淘宝网站信息

数据采集与预处理课程教案课程思政版·理实一体化课程名称数据采集与预处理课程类型专业核心课（理实一体化）教案编号P2-T2授课周次第周章节项目2网络爬虫实践本次学时4学时（180分钟）课题任务2使用Selenium爬取淘宝网站信息授课类型理论+实践授课地点计算机实训室授课班级授课日期年月日授课教师教室/实训室计算机实训室一、教学目标目标维度具体内容🎯课程思政目标（价值塑造）通过本任务的学习，培养学生：①精益求精的工匠精神和严谨细致的工作态度；②遵守职业规范、保护数据安全的职业道德意识；③团队协作、共同解决技术问题的合作精神。📚认知目标（知识传授）①识记网络爬虫的结构。②熟悉网络爬虫的基础知识。💪能力目标（技能培养）①熟悉爬虫基本库urllib和Selenium的使用。②熟悉BeautifulSoup和PyQuery解析库的使用。③学会编写网络爬虫来采集北京公交线路相关信息的方法。二、教学重点与难点（核心知识点）类别内容教学重点1.借助学习论坛、网络视频等网络资源和各种图书资源，学习网络爬虫相关技术，熟悉爬虫基本库Selenium的使用。2.使用Selenium基本库获取淘宝网站信息的HTML源代码。3.使用PyQuery解析库完成淘宝网站信息的获取。4.知道Selenium基本库和PyQuery解析库的使用方法。5.学会使用Selenium基本库和PyQuery解析库进行淘宝网站信息的爬取。教学难点1.借助学习论坛、网络视频等网络资源和各种图书资源，学习网络爬虫相关技术，熟悉爬虫基本库Selenium的使用。2.使用Selenium基本库获取淘宝网站信息的HTML源代码。3.使用PyQuery解析库完成淘宝网站信息的获取。三、教学过程设计（180分钟理实一体化）教学环节时间教学内容与活动课程思政融入课程导入10分钟1.情景导入：展示使用Selenium爬取淘宝网站信息在实际项目中的应用案例2.回顾上节课的知识点，建立知识联系3.提出本节课的学习问题：如何实现使用Selenium爬取淘宝网站信息？4.明确本次任务目标和学习路径创设真实应用情境，激发学习兴趣，潜移默化融入思政元素，引导学生思考技术与社会的关系。理实一体化78分钟（1）webdriver可理解为浏览器的驱动程序，其支持多种浏览器，这里以Chrome为例chrome=webdriver.Chrome()（2）访问页面并获取网页HTMLfromseleniumimportwebdriverchrome=webdriver.Chrome()#chrome.page_source用于获取网页的全部HTMLchrome.get('')print(chrome.page_source)（3）获取（定位）元素find_element(by=By.ID,value=None)可以用来定位单一元素，find_elements(by=By.ID,value=None)可以用来定位若干元素。此外，Selenium的By模块提供了更多的定位方式，可以通过“frommon.byimportBy”命令导入By模块。通过webdriver调用find_element()和find_elements()两种方法搭配By模块进行定位，可以解决大部分的定位需求。By的定位方式如表2-3所示。表2-3By的定位方式（4）查找元素淘宝网页中的搜索栏的源代码如下所示。<formdata-sg-type="form"target="_top"action="///search"name="search"id="J_TSearchForm"class="search-panel-focused"><iclass="search-split"></i>通过网络数据采集的合法性讨论，培养学生遵守网络法规、尊重数据版权的职业道德与法律意识。理实一体化77分钟By.ID|按照元素的id属性定位By.CLASS_NAME|按照class属性定位By.TAG_NAME|按照标签名称定位By.Name|按照name属性定位By.XPATH|按照XPath路径定位By.LINK_TEXT|按照链接（a标签）的文本属性（text）定位By.PARTIAL_LINK_TEXT|按照链接（a标签）的部分文本属性（text）定位By.CSS_SELECTOR|按照CSS选择器定位方法|说明click(on_element=None)|单击鼠标左键click_and_hold(on_element=None)|单击鼠标左键，并按住不放context_click(on_element=None)|单击鼠标右键double_click(on_element=None)|双击鼠标左键drag_and_drop(source,target)|拖动某个元素到目标元素位置drag_and_drop_by_offset(source,xoffset,yoffset)|拖动某个元素到某个坐标通过独立实践操作，培养学生自主探究能力和解决实际问题的技术应用能力，强调规范操作和数据安全意识。课堂总结15分钟1.梳理本次课程的核心知识点2.对比总结使用Selenium爬取淘宝网站信息的关键操作步骤3.布置课后作业：完成课后练习题，预习下一任务4.预告下一次课程内容归纳总结知识要点，强化职业规范意识，鼓励学生持续学习、精益求精，以工匠精神要求自己。四、课后作业①复习并整理本次课程的核心知识点，撰写不少于200字的学习心得。②完成教材项目2网络爬虫实践中与使用Selenium爬取淘宝网站信息相关的课后练习题。③拓展练习：自行查阅资料，尝试将使用Selenium爬取淘宝网站信息应用到一个新的