CN119526413A 一种基于机器视觉的无人机机械臂控制系统及方法 (国网黑龙江省电力有限公司超高压公司)_第1页
CN119526413A 一种基于机器视觉的无人机机械臂控制系统及方法 (国网黑龙江省电力有限公司超高压公司)_第2页
CN119526413A 一种基于机器视觉的无人机机械臂控制系统及方法 (国网黑龙江省电力有限公司超高压公司)_第3页
CN119526413A 一种基于机器视觉的无人机机械臂控制系统及方法 (国网黑龙江省电力有限公司超高压公司)_第4页
CN119526413A 一种基于机器视觉的无人机机械臂控制系统及方法 (国网黑龙江省电力有限公司超高压公司)_第5页
已阅读5页,还剩23页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

一种基于机器视觉的无人机机械臂控制系本发明公开了一种基于机器视觉的无人机征集,并对实时图像数据进行特征点提取与匹2步骤S100.获取无人机电力巡检作业的参照图像数据,从参照图像数据中提取电力巡步骤S200.获取无人机电力巡检作业的实时图像数据,从实时图像数据中提取实时图步骤S300.根据匹配分析得到的匹配特征点,分析无人机电力巡检作业中机械臂的实步骤S400.计算无人机机械臂的实际位姿与期望位姿之间的偏差,基于两者之间的偏S101.使用无人机的相机设备,按照预设飞行路径进行电力巡检,采集目标区域多角p其中I(x,y)表示当前网格区域在坐标(x,y)的像素值,W1和H1分别表示当前网格区域3其中M为图像的结构张量,det(M)表示结构张量的行列式,trace(M)表示结构张量的S202.获取目标物体特征集Kd,将目标物体特征集Kd中的每个目标物体对应的描述子从第一个实时图像I_1中选择一个标记的目标物体的一个匹配特征点作为I_2中的位置坐标与在实时图像I_1中的位置坐标的映射关系,对实时图像I_2中的其他匹配特征点进行相应的转换计算,从而得到实时图像I_2中的所有匹配特征点在初始二维坐4得到图像序列It中的所有实时图像的匹配特征点在初始二维坐标系系的位置坐标为G_g=(X_g,Y_g,Z_g)T,利用无人机相机设备的内参数矩阵K和外参矩阵S303.将期望抓取位置坐标系的原点记为O',与目标物体的三维世界坐标系的关系由的旋转矩阵Rr和平移向量tr,将目标物体的三维坐标G_g通过相机模型转换为图像平面上S401.将无人机机械臂的期望位姿T_desired从期望抓取位置坐标系转换到实际位姿7.一种基于机器视觉的无人机机械臂控制系统,应用于权利要求1_6中任一项所述的所述图像采集模块利用无人机的相机设备按照预设路径进行电力巡检,所述特征点提取与匹配模块从参照图像数据中提取目标物体的特征点并构建目标物5所述位姿分析模块根据匹配特征点,分析无人机机械臂的实际位姿,将所述控制参数计算与调整模块计算期望位姿与实际位姿之间的偏差,分所述运动控制与执行模块基于调整后的运动控制参数,实时更新无人所述图像获取单元负责在电力巡检作业中捕捉图像数据;所述图像所述特征点提取与匹配模块包括图像预处理单元、特征点提取单元以所述图像预处理单元对采集到的图像进行预处理;所述特征点提取单所述坐标系映射单元将实时图像中的匹配特征点映射到初始二维坐标系标及其在期望抓取位置坐标系下的关系计算机械臂的期10.根据权利要求7所述的一种基于机器视觉的无人机机械臂控制系统,其特征在于:所述控制参数计算与调整模块包括偏差计算单元和控制参数所述偏差计算单元计算无人机机械臂的实际位姿与期望位姿之间的偏差6[0002]随着机器人技术的迅速发展,电力检修机械臂已逐步应用于输电线路检修作业[0007]步骤S100.获取无人[0008]步骤S200.获取无人机电力巡检作[0009]步骤S300.根据匹配分析得到的匹配特征点[0010]步骤S400.计算无人机机械臂的7pq,[0018]其中I(x,y)表示当前网格区域在坐标(x,y)的像素值,W1和H1分别表示当前网格8[0030]S202.获取目标物体特征集Kd,将目标物[0033]从第一个实时图像I_1中选择一个标记的目标物体的一个匹配特征点作为圆心,时图像I_2中的位置坐标与在实时图像I_1中的位置坐标的映射关系,对实时图像I_2中的其他匹配特征点进行相应的转换计算,从而得到实时图像I_2中的所有匹配特征点在初始算,从而得到图像序列It中的所有实时图像的匹配特征点在初始二维坐标系中的位置坐[0036]其中M表示匹配特征点的总数;通过最小化E(Rr,tr)得到优化后的旋转和平移参系由旋转矩阵R_target和平移向量t_target确定,具体关系为:G_g'=R_targetG_g+t_9用优化后的旋转矩阵Rr和平移向量tr,将目标物体的三维坐标G_g通过相机模型转换为图将G_g转换为G_g';通过以上转换,获得目标物体在期望抓取位置坐标系下的三维坐标[0039]S401.将无人机机械臂的期望位姿T_desired从期望抓取位置坐标系转换到实际位姿对应的三维世界坐标系中,从而得到三维世界坐标系的期望位姿T_desired_actual,且T_desired_actual=(T_actual)_1T_desired,其中(T_actual)_1表示实际位姿的逆变[0043]特征点提取与匹配模块从参照图像数据中提取目标物体的特征点并构建目标物[0062]特征点提取与匹配模块从参照图像数据中提取目标物体的特征点并构建目标物[0075]步骤S100.获取无人[0076]步骤S200.获取无人机电力巡检作[0077]步骤S300.根据匹配分析得到的匹配特征点[0078]步骤S400.计算无人机机械臂的pq,[0086]其中I(x,y)表示当前网格区域在坐标(x,y)的像素值,W1和H1分别表示当前网格[0098]S202.获取目标物体特征集Kd,将目标物[0103]从第一个实时图像I_1中选择一个标记的目标物体的一个匹配特征点作为圆心,时图像I_2中的位置坐标与在实时图像I_1中的位置坐标的映射关系,对实时图像I_2中的其他匹配特征点进行相应的转换计算,从而得到实时图像I_2中的所有匹配特征点在初始算,从而得到图像序列It中的所有实时图像的匹配特征点在初始二维坐标系中的位置坐[0106]其中M表示匹配特征点的总数;通过最小化E(Rr,tr)得到优化后的旋转和平移参系由旋转矩阵R_target和平移向量t_target确定,具体关系为:G_g'=R_targetG_g+t_用优化后的旋转矩阵Rr和平移向量tr,将目标物体的三维坐标G_g通过相机模型转换为图将G_g转换为G_g';通过以上转换,获得目标物体在期望抓取位置坐标系下的三维坐标[0109]S401.将无人机机械臂的期望位姿T_desired从期望抓取位置坐标系转换到实际位姿对应的三维世界坐标系中,从而得到三维世界坐标系的期望位姿

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论