CN113963399B 基于多算法融合应用的人员轨迹检索方法及装置 （武汉众智数字技术有限公司）

HumanIdentificationataDistance2021.基于多算法融合应用的人员轨迹检索方法本发明提供了一种基于多算法融合应用的人员轨迹检索方法及装置，该方法包括以下步个行人的特征信息与对应的摄像头点位以及抓员的特征信息采用对应的识别算法与路人库中检索目标人员相一致的特征信息的各条行人记据检索目标人员的轨迹信息，在GIS地图上将各条行人记录对应的摄像头点位按抓拍时间进行2S1、对多个不同点位摄像头采集的视频流或者图片流中各行人的特征信息进行提取，S2、根据检索目标人员的视频片段或图片;使用MTCNN网络对每一帧视频数据或者每个图片进行使用训练好的人脸特征提取模型对检测到的人脸目标进行构建改进的faceNet模型，其中faceNet主干网络采用Inception-v4网络和残差连接进行人脸目标检测之后，使用DeepSort对检测到的人脸目标进使用训练好的人脸正脸判定模型对跟踪输出的人脸目标进行人脸正脸判定并输出判3使用训练好的人脸特征提取模型对输出的人脸正脸数据进行人脸使用训练好的yolov5目标检测模型对每一帧视频数据或者每个图片进行行人目标检使用训练好的人体特征提取模型对检测到的行人目标进行采集并构建视频监控场景下多个行人序列数据集，采集不同的行构建改进的行人FastReID模型，主干采用基于自适应使用训练集对改进的行人FastReID模型进行训练，使用验证集验证模型的收敛情况，进行行人目标检测之后，使用DeepSort对检测到的行人目标进使用训练好的行人质量评估模型对跟踪输出的行人目标进行行使用训练好的人体特征提取模型对输出的质量使用训练好的yolov5目标检测模型对每一帧视频数据进行使用训练好的deeplabv3+分割模型对跟踪输出的行人序列使用训练好的步态特征提取模型对步态分割输出的黑白轮廓序列图进行步态特征提采集并构建视频监控场景下多个行人序列数据集，采集不同的行构建改进的GaitSet模型；主干网络在开始增加一个CN4行人特征信息提取及存储模块，用于对多个不同点位摄像头采集的轨迹检索模块，用于根据检索目标人员的视频片段或图片提取检具有与检索目标人员相一致的特征信息的各条行人记录，将检索到的各条行人记录取并;56[0015]构建改进的faceNet模型，其中faceNet主干网络采用Inception-v4网络和[0019]使用训练好的人脸正脸判定模型对跟踪输出的人脸目标进行人脸正脸判定并输[0022]使用训练好的yolov5目标检测模型对每一帧视频数据或者每个图片进行行人目[0032]使用训练好的人体特征提取模型对输出的质量最佳的行人目标进行人体特征提7[0037]使用训练好的步态特征提取模型对步态分割输出的黑白轮廓序列图进行步态特[0041]在数据预处理阶段，训练数据通过随机水平翻转和随机拼图的方法进行数据增8[0055]图1为本发明实施例提供的一种基于多算法融合应用的人员轨迹检索方法的流程[0057]图3为本发明实施例提供的一种基于多算法融合应用的人员轨迹检索装置的方框[0063]使用训练好的人脸特征提取模型对检测到的人脸目标进行人脸特征提取，获取9[0067]使用训练好的人脸正脸判定模型对跟踪输出的人脸目标进行人脸正脸判定并输[0072]构建改进的faceNet模型，其中faceNet主干网络采用Inception-v4网络和[0077]使用训练好的人体特征提取模型对检测到的行人目标进行人体特征提取，获取[0082]使用训练好的人体特征提取模型对输出的质量最佳的行人目标进行人体特征提[0094]使用训练好的步态特征提取模型对步态分割输出的黑白轮廓序列图进行步态特[0098]在数据预处理阶段，训练数据通过随机水平翻转和随机拼图的方法进行数据增轨迹中存在的合法性，针对人员轨迹在网络G中任意两个相邻节点xi,xi+1之间的距离长度t的算法识别概率P(xt)按照全概率公式为：[0120]下面通过一个具体的实施例对本发明实施例的基于多算法融合应用的人员轨迹[0123]假设有人员在2021-6-2811:11:01经过摄像头X2，该摄像头下可获取人体及步态[0124]假设有人员在2021-6-2811:21:01经过摄像头X3，该摄像头下可获取人脸及人体[0125]假设有人员在2021-6-299:21:01经过摄像头X4，该摄像头下可获取清晰的人脸、进行相似度比对，得到满足设定阈值的人员编号，假设ID3满足阈值要求，即L1＝{ID1、[0130]通过行人重识别算法，将人员ID1的人体特征与人员列表中的其它人员的人体特进行相似度比对，得到满足设定阈值的人员编号，假设ID4满足阈值要求，即L3＝{ID1、[0136]如图3所示，为本发明实施例提供的一种基于多算法融合应用的人员轨迹检索装[0140]综上所述，本发明