CN115862136B 基于骨骼关节的轻量级加油员行为识别方法及装置 （上海承飞航空特种设备有限公司）

EP3709224A1,2020.09.16基于骨骼关节的轻量级加油员行为识别方基于骨骼关节的轻量级加油员行为识别方征块上的每个像素点为中心构造预设尺度的锚检测框送入人体目标检测网络获得人体目标姿态信息，人体目标姿态信息包括人体骨骼关键本发明适合用在性价比更高且部署安装更为简2采集待识别的行为图像，将所述行为图像进行解码，对解码后的所构建人体目标检测网络，利用所述人体目标检测网遍历所述行为图像的像素点得到预测锚框，获取预测锚框和真实人体锚框的重合部将所述人体目标检测网络获取的前后两帧对应的锚框进行检将所述人体运动轨迹检测框送入所述人体目标检测网络获得人述人体目标检测网络包括Block单元和SandGl所述Block单元通过逐点卷积进行维度扩展，所述Block单元通过所述SandGlass单元采用两次深度卷积和两层逐点卷积进行用一个卷积层对四个不同尺度的特征信息进行3更新过程中，对每帧中的人体检测框分配一个追踪ID，计算相邻10.基于骨骼关节的轻量级加油员行为识别装置，采用权利要求1至9任一项所述的基模型构建处理模块，用于构建人体目标检测网络，利用所述人体目模型训练模块，用于遍历所述行为图像的像素点得到预测锚框，获人体目标跟踪模块，用于将所述人体目标检测网络获取的前后两行加油员行为识别。4[0010]将所述人体运动轨迹检测框送入所述人体目标检测网络5[0015]作为基于骨骼关节的轻量级加油员行为识别方法优选方案，将重叠率大于等于[0021]作为基于骨骼关节的轻量级加油员行为识别方法优选方案，如果不满足最大的[0024]作为基于骨骼关节的轻量级加油员行为识别方法优选方案，利用相似度OKS度量6[0036]图1为本发明实施例1提供的基于骨骼关节的轻量级加油员行为识别方法流程示[0037]图2为本发明实施例1提供的基于骨骼关节的轻量级加油员行为识别方法中人体[0038]图3为本发明实施例1提供的基于骨骼关节的轻量级加油员行为识别方法中人体[0039]图4为本发明实施例1提供的基于骨骼关节的轻量级加油员行为识别方法中应用[0040]图5为本发明实施例1提供的基于骨骼关节的轻量级加油员行为识别方法中应用7[0044]参见图1和图2，本发明实施例1提供一种基于骨骼关节的轻量级加油员行为识别所述Block单元通过逐点卷积进行维度扩展，所述Block单元通过深度卷积提取通道特征；所述SandGlass单元采用两次深度卷积和两层逐点卷积进行[0055]具体的，SandGlass单元充分利用深度卷积轻量化的特点，首尾采用两次深度卷8short-cut路径将输入特征图与三个池化输出进行维度拼接，最后利用一个卷积层对四个卷积特征块上的每个像素点为中心构造6种尺度不同的锚框，遍历整张图像的所有像素点的位置，故利用人体目标检测网络获取的前后两帧锚框a和锚框b计算重叠度IOU，重叠度d1.dN-1分别代表每帧9踪结束的轨迹集合Tf作为提取的人体运动轨迹检[0072]具体的，利用NMS方法统一人体跟踪输出的人体检测框和基于流光估计的人体检行为图像进行基础特征提取，并以卷积特征块上的每个像素点为中心构造预设尺度的锚获取的前后两帧对应的锚框进行检测目标关联，以跟踪人体目标得到人体运动轨迹检测历史位置的最高分是否大于阈值σh以及该轨迹的出现时间是否大于tmin(跟踪完成的条[0084]参见图6，本发明实施例2还提供一种基于骨骼关节的轻量级加油员行为识别装[0088]人体目标跟踪模块4，用于将所述人体目标检测网络获取的前后两帧对应的锚框[0089]目标行为识别模块5，用于将所述人体运动轨迹检测框送入所述人体目标检测网键点进行加油员行为识别。[0090]本实施例中，模型构建处理模块2中，所述人体目标检测网络包括Block单元和[0098]本实施例中，人体目标跟踪模块4中，跟踪人体目标得到人体运动轨迹检测框包[0109]本发明实施例3提供一种非暂态计算机可读存储介质，所述计算机可读存储介质执行实施例1或其任意可能实现方式的基于骨骼关节的轻量级加油员行为识别方法的指[0110]计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，述处理器执行的程序指令，所述处理器调用所述程序指令能够执行实施例1或其任意可能