人工智能数据标注实战教程 课件 第三章 视频标注项目

第三章

视频标注项目任务一

视频分类标注任务“犹胜相逢不相识，形容变尽语音存。”----苏轼内容概括知识背景典型应用场景实践标注操作1.

知识背景视频分类是人工智能计算机视觉领域中的一个重要研究方向。根据视频数据中的对象、对象的动作信息及场景信息、场景的演化信息等特征将视频数据归为不同的类，分类后就有利于对视频数据进行监管和处理。1.

知识背景抖音作为将中国传统文化“出口”到海外，现已成为中国产品在海外获得成功的又一杰作。但从如此海量的视频数据中获得感兴趣的内容，必须有新的检索方式来满足互联网用户对视频等多媒体数据日益增长的检索需求。2.典型应用场景基于内容的视频检索智能视频监控系统智能视频审核系统自动驾驶系统3.实践标注操作（1）准备数据来自互联网的三段短视频，分别是“张骞出塞”，“丹青文脉”和“奥运赛事”，格式为mp4（2）创建工程开启label-studio。在启动页选择单击“createproject”

按钮创建项目3.实践标注操作（3）导入数据选择“DataImport”标签页，选择“UploadFiles”，在弹出框中选择准备好的三段视频数据文件，进行导入。3.实践标注操作（4）选择模板切换到“LabelingSetup”选项卡，指定项目模板类型为“VideoClassification”3.实践标注操作（5）维护标签通过“Addlabelnames”文本框填入新增标签并单击“Add”按钮保存；通过Labels列表项的删除按钮删除无用标签。3.实践标注操作（6）开始标注在数据标注界面点击播放按钮，待视频播放完成后，依据视频内容为其选定视频所属分类，在视频下发勾选对应类型。3.实践标注操作（7）导出结果单击“Export”按钮，在弹出菜单中选择导出格式并保存。小结知识目标：（1）明确视频分类标注相关概念（2）明确视频分类标注方法思政目标：（1）创新精神（2）智能产品对人工智能发展的积极作用第三章

视频标注项目任务二

视频跨帧追踪标注任务内容概括知识背景典型应用场景实践标注操作1.知识背景视频跨帧追踪任务则是研究如何在连续视频帧中的感兴趣目标的位置和运动信息，通常跟踪结果用矩形框表示。视频跟踪任务中跟踪的目标可以是视频中的任何物体，或者选定的任何区域，并不需要事先获取目标的类别信息，追踪过程也可以从任意帧开始。视频跨帧追踪作为一个中低层的视觉分析任务，对众多其它视觉任务具有良好的辅助作用，如协助视频目标检测、视频目标分割、视频行人重识别等。2.典型应用场景安全监控城市交通人机交互体育交互军事领域自动驾驶医疗诊断3.实践标注操作（1）准备数据来自于2022年北京冬奥会中国选手武大靖参赛的视频节选，格式为mp4（2）创建工程开启label-studio。在启动页选择单击“createproject”按钮创建项目3.实践标注操作（3）导入数据选择“DataImport”标签页，选择“UploadFiles”，在弹出框中选择准备好的视频数据文件，进行导入3.实践标注操作（4）选择模板切换到“LabelingSetup”选项卡，指定项目模板类型为“Customtemplate”3.实践标注操作（5）编写模板代码进入模板配置页面后，在代码编辑区域输入模板源码。3.实践标注操作（6）开始标注首先在数据标注区下方点选“wudajing”数据标签，选中后标签颜色发生变化。3.实践标注操作（6）开始标注之后在视频区域通过拖放鼠标左键在武大靖图像周围绘制边界框，如下图所示。如需调整边界框大小或位置，可点击边界框通过鼠标进行放大、缩小或位置移动。3.实践标注操作（6）开始标注第一帧数据标注完成后，点击下一帧按钮查看下一帧图像，发现标注框依然存在，此时只需依据标注对象真实位置与标注框位置的相对关系，重新修正标注框位置与大小即可。如果基本吻合也可不做调整。重复此步操作，直至所有帧标注完成。3.实践标注操作（6）开始标注当视频帧中出现其他标注对象时，选中下方的对应标签，在帧中绘制该对象的标注框，如下图所示，此时画面中出现了工作人员，选中“staff”标签，对两位工作人员进行标注，并在之后的视频帧中及时调整标注框位置和大小。3.实践标注操作（6）开始标注如果目标对象消失则应该在对应帧中删除标注框，删除方法是在视频画面下方区域的帧状态栏中选中对象消失的帧，再点击标注框删除按钮。3.实践标注操作（7）查验标注效果从头开始浏览视频，注意观察播放过程中标注框的位置是否与标注对象位置相吻合，如果发现部分时间点误差较大，可跳转到对应帧重新调整标注框位置或大小。3.实践标注操