CN119445591A 教育管理督查方法及系统 （温州理工学院）

基于教学视频和教学文本数据确定课堂秩序得量的评估维度单一、评估不够准确和客观的问2基于所述教学视频确定教学文本数据；其中，所述教学文本数据包基于所述教学视频和所述教学文本数据确定课堂秩序得分和课堂互动行为信息；其基于所述课堂互动行为信息和所述课堂类型确定学生的基于所述课堂秩序得分和所述课堂参与度确将所述教师音频数据和所述学生音频数据转换为对应的所述教师文本数据和所述学根据所述教学视频得到学生的第一关键帧；其中，所述第一关键帧根据所述教学文本数据提取教师和/或学生的第一提问信息以及教师的第一指示信一指示信息包括表征教师指示学生抬/低头动作的动作指示信息和表征教师指示学生互相从所述第一关键帧中提取得到在所述第一指示信息的时间之后并且与对应的所述第根据所述第一关键帧、所述第二关键帧和所述第一指示信息确定根据各个学生存在所述第一行为的总时长得到所述课堂在所述教学文本数据中查找在所述第一提问信息和所述讨论指示信息的时间之后的每次互相讨论以及教师和学生之间每次互问互根据所述动作指示信息和所述第二关键帧得到第二互动行为信息；其根据所述第一互动行为信息和所述第二互动行为信息得到所述课3根据每个所述视频帧确定每个所述视频帧中各个学生的根据所述头部区域得到头部的倾斜角度；其中，所述倾斜角度包括若存在学生的所述倾斜角度的差值超过角度阈值，则将对应判断所述第一指示信息与对应的所述第二关键帧中每个学生的所述倾斜角度是否匹若存在学生在所述第二关键帧中的所述倾斜角度与对应的所述第一指示信息均不匹若所述第一关键帧中存在学生的所述倾斜角度不在角度范围内并且与相邻的后一所根据所述第一时长和所述第二时长确定对应的学生存在所述第一行在所述教学文本数据中查找在所述第一提问信息和所述讨论指示信息的时间之后的计算所述第一提问信息和所述讨论指示信息分别与对应的所述第一文本数据之间的根据所述关联度判断所述第一文本数据是否与所述第一提问信息或所述讨论指示信若所述第一文本数据与所述第一提问信息或所述讨论指示信息相基于所述课堂互动行为信息确定在所述教学视频中学生参与所述课堂互动行为对应基于所述课堂互动行为信息确定在所述教学视频中学生参与所述课堂互动行为对应根据在所述教学视频中各种所述课堂互动行为的占比确定所基于所述课堂类型确定各种所述课堂互动行为对应基于所述课堂互动行为信息和各种所述课堂互动行为对应的参与度权重确定所述课4基于所述课堂秩序得分和所述课堂参与度确定教育管理课堂模块，用于基于所述教学视频和所述教学文本数据确定课堂秩序参与度模块，用于基于所述课堂互动行为信息和所述课堂类型确定学生的课堂参与5基于所述教学视频和所述教学文本数据确定课堂秩序得分和课堂互动行为信息；基于所述课堂互动行为信息和所述课堂类型确定学生的基于所述课堂秩序得分和所述课堂参与度确6[0007]在第一方面的一种可能的实现方式中，所述基于所述教学视频确定教学文本数将所述教师音频数据和所述学生音频数据转换为对应的所述教师文本数据和所根据所述教学文本数据提取教师和/或学生的第一提问信息以及教师的第一指示第一指示信息包括表征教师指示学生抬/低头动作的动作指示信息和表征教师指示学生互从所述第一关键帧中提取得到在所述第一指示信息的时间之后并且与对应的所述第一指示信息的时间间隔小于时间间隔阈值的第根据各个学生存在所述第一行为的总时长得到所述课堂在所述教学文本数据中查找在所述第一提问信息和所述讨论指示信息的时间之之间每次互相讨论以及教师和学生之间每次互问互根据所述第一互动行为信息和所述第二互动行为信息得到所述课堂互动行为信根据每个所述视频帧确定每个所述视频帧中各个学生的判断所述第一指示信息与对应的所述第二关键帧中每个学生的所述倾斜角度是7若存在学生在所述第二关键帧中的所述倾斜角度与对应的所述第一指示信息均若所述第一关键帧中存在学生的所述倾斜角度不在角度范围内并且与相邻的后在所述教学文本数据中查找在所述第一提问信息和所述讨论指示信息的时间之计算所述第一提问信息和所述讨论指示信息分别与对应的所述第一文本数据之根据所述关联度判断所述第一文本数据是否与所述第一提问信息或所述讨论指基于所述课堂互动行为信息确定在所述教学视频中学生参与所述课堂互动行为基于所述课堂互动行为信息确定在所述教学视频中学生参与所述课堂互动行为根据在所述教学视频中各种所述课堂互动行为的占比确定所基于所述课堂类型确定各种所述课堂互动行为对应基于所述课堂互动行为信息和各种所述课堂互动行为对应的参与度权重确定所基于所述课堂秩序得分和所述课堂参与度确定教育管理8教育管理模块，用于基于所述课堂秩序得分和所述课堂参与度确定教育管理质行所述计算机程序时实现如上述第一方面中任一项图2是本申请一实施例提供的教育管理督查方图3是本申请一实施例提供的教育管理督查方法中步骤S300、S340和S360的实现图4是本申请一实施例提供的教育管理督查图5是本申请一实施例提供的教育管理督查方法中步骤S400、S500和S600的实现9供的教育管理督查方法的具体实现过程进行示[0033]图1示出了本申请实施例提供的教育管理督查方法的示意性流程图，教育管理督[0043]示例性地，可以使用语音识别技术（如Speech_to_TextAPI、AzureSpeechService等）来将教师音频数据和学生音频数据转换为对应的教师文本数据和学生文本数[0055]示例性地，可以使用面部关键点检测算法（如Dlib库中的68点面部关键点检测、[0057]示例性地，可以计算每相邻两个视频帧中每个学生头部的俯仰角和偏航角的差阈值包括俯仰角和偏航角的差值阈值均为10°,若存在学生的倾斜角度的差值均超过角度[0061]通过上述步骤S311至S315，可以捕捉到学生在教学视频为后续分析课堂秩序和互动行为提供关键数据，有助于更精确地评估学生的课堂参与度[0062]S320，根据教学文本数据提取教师和/或学生的第一提问信息以及教师的第一指息包括表征教师指示学生抬/低头动作的动作指示信息和表征教师指示学生互相讨论的讨下表2所示，将第一指示信息对应的倾斜角度与第一指示信息对应的第二关键帧中每个学S342，若存在学生在第二关键帧中的倾斜角度与对应的第一指示信息均不匹配，过一个预设的规定值，该预设的规定值本领域普通技术人员可以根据实际需要进行设定，第二时长相加并去除重合部分的时长得到对应的学生存在[0088]示例性地，可以定位到教学文本数据中的第一提问信息和讨论指示信息的时间讨论指示信息的关联度不大于0.7，则第一文本数据与第一提问信息或讨论指示信息不相对应的倾斜角度并与第二关键帧中学生头部的倾斜角度相匹配确定每次响应教师的指示[0118]示例性地，可以根据课堂秩序得分和课堂参与度共同确定教育管理质量是否合的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限教育管理模块，用于基于所述课堂秩序得分和所述课堂参与度确定教育管理质[0132]本申请实施例还提供了一种教育管理督查设备，图7为本申请一实施例提供的教所述计算机程序62时，使所述教育管理督查设备6实现上述任意各个教育管理督查方法实个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序62在所述教育管理督查设备成电路(ApplicationSpecificIntegratedCircuit，ASIC)、现成可编程门阵列[0136]所述存储器61在一些实施例中可以是所述教育管理督查设备6的内部存储单元，例如教育管理督查设备6的硬盘或内存。所述存储器61在另一些实施例中也可以是所述教也包括外部存储设备。所述存储器61用于存储操作系统、应用程序、引导装载程序[0139]所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个以包括：能够将计算机程序代码携带到教育管理督查系统/教育管理督查设备的任何实体电载波信号和电信信号。