CN110929560A 融合目标检测与跟踪的视频半自动目标标注方法 （杭州电子科技大学）

融合目标检测与跟踪的视频半自动目标标本发明公开融合目标检测与跟踪的视频半标检测算法和基于图像序列的视频目标跟踪算21.融合目标检测与跟踪的视频半自动目标标注方法，其特征在于该方法包括以下步步骤(1)、在视频的某个镜头中选定某一帧为初始帧，手动标记目标的初始位置和大2.1采用YOLOV3对每一帧图像上述YOLOV3是将带有标签目标图像调整到固定尺度大小作为先验框对52×52的特征图进行预测，检测较小的对象；使用新增加的(5x6)，(8x15)，为了能适应目标外观变化，滤波器需要进行在线更新；在第t帧图像上进行目标跟踪在第t+1帧图像上的第t帧目标位置处，提取候选样本HO3从上述5个响应图f最大值max(f)中筛选出最大值fmax,fmax对应的位置即为目标中心的其中SI表示同一帧下跟踪框与每个检测框的重叠部分面积，SU表示同一帧下跟踪框与根据KCF相关滤波跟踪器的响应图f，判断max(f)是否4.1LBP(局部二值模式)提取图像的纹理特征，基本思想是定义在像素3*3的邻域内，44.3针对每一帧图像目标框中目标边缘区域的像素edge-⃞+影(11)4.5颜色直方图变化值Dist通过计算初始帧选定目标区域和第t帧目标区域颜色直方4.6尺度变化值通过计算初始帧目标框和第t帧目标框的宽高变化得到的，计算公式l(15)其中bboxy",bbox⃞为初始帧目标框的宽和高，bbox"和bboxf为第t帧目标框的宽和56[0005]本发明针对目前单独的目标检测算法或者目标跟踪算法不能满足视频目标自动[0006]本发明针对所要解决的技术问题是现有自动标记手段精准度与连贯性不高或手78[0028]从上述5个响应图f最大值max(f)中筛选出最大值fma[0033]其中SI表示同一帧下跟踪框与每个检测框的重叠部分面积，SU[0042]4.1LBP(局部二值模式)提取图像的9[0056]4.5颜色直方图变化值Dist通过计算初始帧选定目标区域和第t帧目标区域颜色[0063]其中bbox",bbox⃞为初始帧目标框的宽和高，bbox"和bboxf为第t帧目标框的[0067]4.8将视频中每一帧目标的显著值St构建显著值折线图，求得所有峰值以及所对跟踪算法估计目标在图像中的位置。本发明采用YOLOV3检测算法和KCF相关滤波跟踪算了视频标注技术中实时性和准确性的需求，包括特征提取网络Darknet-53和预测网络，RPN网络中基于anchor进行感兴趣区域提取的方法，以及FPN(FeaturePyramidNetwork)[0100]从上述5个响应图f最大值max(f)中筛选出最大值fma[0105]其中SI表示同一帧下跟踪框与每个检测框的重叠部分面积，SU[0112]4.1LBP(局部二值模式)[0125]4.5目标区域图像的颜色直方图[0132]其中bbox",bbox⃞为初始帧目标框的宽和高，bbox"和为第t帧目标框的[0138]为验证本发明提出方法的有效性，采用一段多镜头多舰船的视频进行实验[0141]在进行目标检测阶段，单阶段目标检测算法YOLOV3首先在大量带有舰船标签信中有多个目标，跟踪器的跟踪结果只有一个目标。通过计算跟踪框和每一个检测框的IOU123456789