灵巧机器人智能可视化操作界面课件_第1页
灵巧机器人智能可视化操作界面课件_第2页
灵巧机器人智能可视化操作界面课件_第3页
灵巧机器人智能可视化操作界面课件_第4页
灵巧机器人智能可视化操作界面课件_第5页
已阅读5页,还剩26页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

Proceedingsofthe2000IEEEInternationalConferenceonRobotics&AutomationSanFrancisco,CAApril2000灵巧机器人智能可视化操作界面

AnIntelligentVision-onlyOperatorInterfaceforDexterousRobotsThegoal(本方案的目标)

Developmethodsandalgorithmsenablingthenaturalandunencumberedgenerationofcommandsforanthropomorphicrobotswhileminimizingspecificoperatortraininganddedicatedequipment.1、开发仿人机器人算法:在操作者接受尽量少的特别训练和专门仪器的情况下,使仿人机器人命令的生成正常而顺畅。Theprojectaimsatallowingtheuseofsophisticated,human-likerobotsincriticalenvironments,suchas

theInternationalSpaceStationandtheproposedHumanSettlementonMars,wheretime,spaceandmassconstraintspreventtheuseofmoretraditionaltelepresencesystems,suchas

joysticksandforcefeedbackdevices.

2、致力于使复杂精密的仿人机器人在如:国际空间站或已提出的人类登陆火星恶劣环境下可以工作,时间、地点等大量约束都迫使我们不能再使用如操纵杆和力反馈装置等传统的遥控系统。Thisworkismotivatedbytheparalleldevelopment,atNASAJohnsonSpaceCenter,oftheanthropomorphicroboticsystemRobonaut,pursuingthedesignofarobotthesizeofasuitedastronaut.Thisrobotwillbeteleoperatedbyanon-intrusivetelepresenceinterface,takingadvantageofthenaturalphysicalcorrespondencebetweentherobotandthehumanoperator.这项工作由NASAJOHNSON空间中心设计的跟宇航员大小相同的仿人机器人系统ROBONAUT的发展来推动。这个机器人将由无干扰远程监控界面进行遥操作,利用机器人和操作人员之间的物理通信。teleoperatorinterfaces

遥操作界面1、Theinputsystemusedhereisavisualtrackeroftheoperatorarmmotions.

输入系统:对操作者手臂运动的视觉跟踪器(visualtracker)2、Graphicaldisplayshavebeenaconstantfeatureofteleoperationoutputsystems.

输出系统:图像显示(Graphicaldisplays)是遥操作输出系统中常见的形式。3、Interfaceintelligenceisusuallyembeddedinthemanipulatorcontrolalgorithmwithspecificrobustnessandstabilityfeatures.

智能系统:界面的智能性(Interfaceintelligence)通常包含在控制器中关于稳定性的控制算法内

visualtrack

视觉跟踪

Inthepast,visualtrackinghasbeenaddressedwithtwomain

approaches

过去视觉跟踪主要采用两种方式:marker-basedsystems

采用MARKER的系统

marker-lesssystems

不采用MARKER的系统Marker-basedsystemsusereflectivemarkersonthebodyofthesubject,infraredlightingandmulti-plecameras.

采用MARKER的系统利用红外光和多台相机,将具有反射作用的MARKER放在物体表面。此方法可以以非常高的精度计算MARKER的三维空间位置。Themarker-lessapproachisbasedonmodelingtheappearanceofbodypartsintheimagesgeneratedbyoneormorecameras.

不采用MARKER的方法是基于由一架或多架相机生成的图像中身体各部分表面的模型。Graphicaldisplays

图像显示Computergeneratedgraphicalsimulationsareusedtogivetheoperatorstatusinformationandtocompensatefortransmissiontimedelay.

采用计算机生成的图像仿真将位置信息传递给操作者,并补偿传输时间延迟。Intelligentinteractionwiththeoperatorisaddressedinthispaper,whereaninteractivepathplannerfortheteleoperationofdexterousmanipulatorsisproposed.

文中提出了遥操作交互的途径,使智能系统可以与操作者进行交互。Aprogrammonitorstaskexecutionandgivestheoperatorfeedbackabouttaskstatus.

程序监测任务的执行,将任务执行的情况反馈给操作者。Interfaceintelligence

界面的智能性Interfaceintelligenceisusuallyembeddedinthemanipulatorcontrolalgorithmwithspecificrobustnessandstabilityfeatures.

界面的智能性通常包含在控制器中具有精确和稳定特点的控制算法中。Forexample,identificationofkinematicsingularitiesiscriticalforthecorrectteleoperationofadexterousarm,sincesingularitylocationisnotself-evident.Inthepast,singularitydetectionhasbeenaddressedprimarilyfromthepointofviewofavoidinganyunexpectedanddangerousmotionoftherobot.Inparticular,approachessuchas[15]solvetheproblembyforcingtherobottopassatadistancefromthenominaltrajectory,whereassolutionssuchas[17]keeptherobotvelocitywithinacceptablelimits.Inateleoperationsystemthesechangescanconfusetheoperatorwhentheyhappenwithoutwarnings.

例如,鉴别运动学奇异点对于正确操作灵巧臂是十分重要,但奇异点的位置并不直观。过去,奇异点的探测和定位,主要通过观察,以避免机器人产生任何的意外危险的动作。在一个遥操作系统内这些变化在没有预警的情况下会干扰操作者。theproposedvision-basedtelepresenceinterface

可视化远程监控界面Thefeaturesoftheproposedvision-basedtelepresenceinterfacearedemonstratedinanoff-lineimplementationbasedonthegraphicalsimulationofaRoboticsResearchCorp.(RRC)

该特点被基于机器人研究中心(RRC)的图像仿真离线运行所论证

数据和步骤流程:如图1所示操作者移动手臂视觉追踪提取关键点的笛卡儿坐标(肩、肘、腕)将这些坐标转换为关节角分析关节角是否存在自身碰撞,计算与运动学奇异点的距离以图像方式叠加在真实场景视频图像上,显示给操作者本界面的整体结构及其主要构成视觉跟踪系统TheVisualTracker

图像显示TheGraphicalDisplay自身碰撞检测Self-CollisionDetection奇异空间的可视化

VisualizationofSingularitySpaceTheVisualTracker

视觉跟踪系统

对操作者运动起视觉跟踪作用的硬件、软件系统:前端设备front-end

动作获取设备acquisitionhardware

离线标定软件off-linecalibrationsoftware3维重构软件3Dreconstructingsoftware

标注软件

labelingsoftware

front-end

前端设备Thefront-endformeasuringtheoperator’sarmmo-

tionisanon-invasivesystembasedonasetof4video-camerasandsmallmarkersplacedonthemainjointsoftheoper,ator’sbody.

由四个摄像头和一些位于操作者身体主要关节的小MARKER组成的无干扰系统(non-invasivesystem)。Thecurrentimplementationsimplifiestheproblemofdetectingthemarkersineachcamera,usingsmalllightbulbsasmarkersandrequiringalowlevelofilluminationintheacquisitionarea.

现行系统通过用小灯泡作为MARKER并在捕捉区域内采用极低的照明将每个相机探测MARKER的问题简化。Acquisition

动作获取Weuse4monochromeNTSCinterlacedcameraswith6mmlenseslocatedonasemicirclearoundthecenterofthecalibratedvolumeatadistanceofabout5mfromthecenterandabout3mabovethefloorlevel.Theautomaticgainineachcamerawasdisabledandtheshuttertimewassetto1/500secasatradeoffbetweenimagecontrastandmotionblur.用4架镜头焦距为6毫米的单色NTSC相机,围绕标定区域中心5米远、3米高围成半圆。每架相机不能自动获取图像,快门时间为1/500秒以达到画面对比和运动模糊之间的平衡。Cameracalibration

相机的标定内部参数internalparameters相机的相互位置mutualcameraposition世界参考坐标系之间的严格转换

rigidtransformationbetweencamerasandworldreferenceframe.The3Dreconstructionsoftware

3维重构软件

The3Dreconstrucionsoftwaretriangulatesbetweendifferentviewstodeterminethe3dimensionalpositionofeachmarkers.在不同视角之间做三角测量以测定每个MARKER的3维位置。

Thevisualtrackingalgorithmtakesthesetofreconstructed3Dmarkercoordinatesateachframeandassignstoeachmarkerthecorrectbodypart.Theprogramrequirestomanuallylabelthe3Dpointsinoneoftheframesinthesequence.视觉追踪算法采用重构每祯MARKER的3维坐标,然后将每个MARKER赋予正确的身体部位。程序需要在序列中的一祯对这些3维的点进行人工标识。labelingsoftware

标注软件ThevisualizationtoolshowninFigure3wasimplementedinMatlabtoprovideagraphicalrepresentationofthecomputeddata(forexamplerepresentingthereconstructedbodywithastickfigure),forinspectionandediting.图3所示为:可视化工具在MATLAB下执行,为计算数据提供图像显示,用于检验和编辑。TheGraphicalDisplay

图像显示Theoperatorinterfacedescribedhereinteractswiththeoperatorexclusivelythroughagraphicalinterfaceincorporatinglivevideooftherobotworkspace.

本操作界面可以让操作者仅通过图形界面与机器人工作空间真实视频画面的结合进行人机交互。Agraphicmodeloftherobot,withaviewpointmatchingthevideocamera,isoverlaidtothevideo.

机器人的图像模型以与相机匹配的视角叠加到真实画面上。Figure4showsthegraphicalsimulationoftheRRCarmasatransparentimagesuperimposedtothelivevideooftheremotesite.图4所视是RRC手臂以透明图像叠加到遥控地点的真实画面的图形仿真Self-CollisionDetection

自身碰撞检测Self-collisionisdefinedasthesituationwhenamanipulatorlinkistooclosetooneofitsotherlinks.

自身碰撞被定义为一条操作杆与其他操作杆过于接近的情况。Approach:totestforline-segmenttoline-segmentdistances,takingintoaccounttheradiiofthelinks.

方法:检测线段间的距离并考虑连杆的半径VisualizationofSingularitySpace

奇异空间的可视化

Theapproachusedheretogeneratethejointanglesandresolvethekinematicredundancy,giventhesetofendeffectorpositionsgeneratedbythevisualtracker,istheConfigurationControlmethod

这里采用生成关节角和解决运动学冗余的方法,由视觉追踪生成末端执行器位置。这就是配置控制方法。Althoughconfigurationcontrolpreventsdangerousmotions,italsoalterstherobottrajectory,possiblyconfusingtheoperatorandcreatingproblemsintightenvironments.

尽管配置控制避免了危险动作,但他改变了机器人运动轨迹,可能会干扰操作者并在狭窄环境下产生问题。Tosolvethisproblemwegenerategraphicalwarningstolocalizenearbysingularitiesbyusingthedistancefromasingularityexpressedasdet(JJT)

为了解决这个问题,我们生成了图像警报,通过det()得到的到奇异区域的距离确定是否靠近奇异区。wevisualizethesingularityvolumeinthevicinityofthemanipulatorwristbasedonthevalueofthedeterminant.

我们根据行列式值使执行器附近的奇异区域可视化。结论和展望Theinnovativefeaturesofthissystemincludeavisualtrackertoteleoperatearemotemanipulatorbysimplymovingthearms,andanintelligentadvisor,toanalyzethecommandedmotionsforkinematiccorrectness,enablingtheoperatortoavoidselfcollisionandsingularities.该系统的创新点包括:对远端控制者通过移动手臂进行遥操作进行视觉跟踪,可以避免自身碰撞,对奇异点的智能运动学分析Thisworkisonlythebeginningofthedevelopmentofacompletevision-basedoperatorinterface.这一工作只是开发一套完整的可视操作界面的开始Visualtrackingtechnologyneedstobeenhancedin:real-timecomputationofthe3Dupper-bodyposeofthe

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论