版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
Proceedingsofthe2000IEEEInternationalConferenceonRobotics&AutomationSanFrancisco,CAApril2000灵巧机器人智能可视化操作界面
AnIntelligentVision-onlyOperatorInterfaceforDexterousRobotsThegoal(本方案的目标)
Developmethodsandalgorithmsenablingthenaturalandunencumberedgenerationofcommandsforanthropomorphicrobotswhileminimizingspecificoperatortraininganddedicatedequipment.1、开发仿人机器人算法:在操作者接受尽量少的特别训练和专门仪器的情况下,使仿人机器人命令的生成正常而顺畅。Theprojectaimsatallowingtheuseofsophisticated,human-likerobotsincriticalenvironments,suchas
theInternationalSpaceStationandtheproposedHumanSettlementonMars,wheretime,spaceandmassconstraintspreventtheuseofmoretraditionaltelepresencesystems,suchas
joysticksandforcefeedbackdevices.
2、致力于使复杂精密的仿人机器人在如:国际空间站或已提出的人类登陆火星恶劣环境下可以工作,时间、地点等大量约束都迫使我们不能再使用如操纵杆和力反馈装置等传统的遥控系统。Thisworkismotivatedbytheparalleldevelopment,atNASAJohnsonSpaceCenter,oftheanthropomorphicroboticsystemRobonaut,pursuingthedesignofarobotthesizeofasuitedastronaut.Thisrobotwillbeteleoperatedbyanon-intrusivetelepresenceinterface,takingadvantageofthenaturalphysicalcorrespondencebetweentherobotandthehumanoperator.这项工作由NASAJOHNSON空间中心设计的跟宇航员大小相同的仿人机器人系统ROBONAUT的发展来推动。这个机器人将由无干扰远程监控界面进行遥操作,利用机器人和操作人员之间的物理通信。teleoperatorinterfaces
遥操作界面1、Theinputsystemusedhereisavisualtrackeroftheoperatorarmmotions.
输入系统:对操作者手臂运动的视觉跟踪器(visualtracker)2、Graphicaldisplayshavebeenaconstantfeatureofteleoperationoutputsystems.
输出系统:图像显示(Graphicaldisplays)是遥操作输出系统中常见的形式。3、Interfaceintelligenceisusuallyembeddedinthemanipulatorcontrolalgorithmwithspecificrobustnessandstabilityfeatures.
智能系统:界面的智能性(Interfaceintelligence)通常包含在控制器中关于稳定性的控制算法内
visualtrack
视觉跟踪
Inthepast,visualtrackinghasbeenaddressedwithtwomain
approaches
过去视觉跟踪主要采用两种方式:marker-basedsystems
采用MARKER的系统
marker-lesssystems
不采用MARKER的系统Marker-basedsystemsusereflectivemarkersonthebodyofthesubject,infraredlightingandmulti-plecameras.
采用MARKER的系统利用红外光和多台相机,将具有反射作用的MARKER放在物体表面。此方法可以以非常高的精度计算MARKER的三维空间位置。Themarker-lessapproachisbasedonmodelingtheappearanceofbodypartsintheimagesgeneratedbyoneormorecameras.
不采用MARKER的方法是基于由一架或多架相机生成的图像中身体各部分表面的模型。Graphicaldisplays
图像显示Computergeneratedgraphicalsimulationsareusedtogivetheoperatorstatusinformationandtocompensatefortransmissiontimedelay.
采用计算机生成的图像仿真将位置信息传递给操作者,并补偿传输时间延迟。Intelligentinteractionwiththeoperatorisaddressedinthispaper,whereaninteractivepathplannerfortheteleoperationofdexterousmanipulatorsisproposed.
文中提出了遥操作交互的途径,使智能系统可以与操作者进行交互。Aprogrammonitorstaskexecutionandgivestheoperatorfeedbackabouttaskstatus.
程序监测任务的执行,将任务执行的情况反馈给操作者。Interfaceintelligence
界面的智能性Interfaceintelligenceisusuallyembeddedinthemanipulatorcontrolalgorithmwithspecificrobustnessandstabilityfeatures.
界面的智能性通常包含在控制器中具有精确和稳定特点的控制算法中。Forexample,identificationofkinematicsingularitiesiscriticalforthecorrectteleoperationofadexterousarm,sincesingularitylocationisnotself-evident.Inthepast,singularitydetectionhasbeenaddressedprimarilyfromthepointofviewofavoidinganyunexpectedanddangerousmotionoftherobot.Inparticular,approachessuchas[15]solvetheproblembyforcingtherobottopassatadistancefromthenominaltrajectory,whereassolutionssuchas[17]keeptherobotvelocitywithinacceptablelimits.Inateleoperationsystemthesechangescanconfusetheoperatorwhentheyhappenwithoutwarnings.
例如,鉴别运动学奇异点对于正确操作灵巧臂是十分重要,但奇异点的位置并不直观。过去,奇异点的探测和定位,主要通过观察,以避免机器人产生任何的意外危险的动作。在一个遥操作系统内这些变化在没有预警的情况下会干扰操作者。theproposedvision-basedtelepresenceinterface
可视化远程监控界面Thefeaturesoftheproposedvision-basedtelepresenceinterfacearedemonstratedinanoff-lineimplementationbasedonthegraphicalsimulationofaRoboticsResearchCorp.(RRC)
该特点被基于机器人研究中心(RRC)的图像仿真离线运行所论证
数据和步骤流程:如图1所示操作者移动手臂视觉追踪提取关键点的笛卡儿坐标(肩、肘、腕)将这些坐标转换为关节角分析关节角是否存在自身碰撞,计算与运动学奇异点的距离以图像方式叠加在真实场景视频图像上,显示给操作者本界面的整体结构及其主要构成视觉跟踪系统TheVisualTracker
图像显示TheGraphicalDisplay自身碰撞检测Self-CollisionDetection奇异空间的可视化
VisualizationofSingularitySpaceTheVisualTracker
视觉跟踪系统
对操作者运动起视觉跟踪作用的硬件、软件系统:前端设备front-end
动作获取设备acquisitionhardware
离线标定软件off-linecalibrationsoftware3维重构软件3Dreconstructingsoftware
标注软件
labelingsoftware
front-end
前端设备Thefront-endformeasuringtheoperator’sarmmo-
tionisanon-invasivesystembasedonasetof4video-camerasandsmallmarkersplacedonthemainjointsoftheoper,ator’sbody.
由四个摄像头和一些位于操作者身体主要关节的小MARKER组成的无干扰系统(non-invasivesystem)。Thecurrentimplementationsimplifiestheproblemofdetectingthemarkersineachcamera,usingsmalllightbulbsasmarkersandrequiringalowlevelofilluminationintheacquisitionarea.
现行系统通过用小灯泡作为MARKER并在捕捉区域内采用极低的照明将每个相机探测MARKER的问题简化。Acquisition
动作获取Weuse4monochromeNTSCinterlacedcameraswith6mmlenseslocatedonasemicirclearoundthecenterofthecalibratedvolumeatadistanceofabout5mfromthecenterandabout3mabovethefloorlevel.Theautomaticgainineachcamerawasdisabledandtheshuttertimewassetto1/500secasatradeoffbetweenimagecontrastandmotionblur.用4架镜头焦距为6毫米的单色NTSC相机,围绕标定区域中心5米远、3米高围成半圆。每架相机不能自动获取图像,快门时间为1/500秒以达到画面对比和运动模糊之间的平衡。Cameracalibration
相机的标定内部参数internalparameters相机的相互位置mutualcameraposition世界参考坐标系之间的严格转换
rigidtransformationbetweencamerasandworldreferenceframe.The3Dreconstructionsoftware
3维重构软件
The3Dreconstrucionsoftwaretriangulatesbetweendifferentviewstodeterminethe3dimensionalpositionofeachmarkers.在不同视角之间做三角测量以测定每个MARKER的3维位置。
Thevisualtrackingalgorithmtakesthesetofreconstructed3Dmarkercoordinatesateachframeandassignstoeachmarkerthecorrectbodypart.Theprogramrequirestomanuallylabelthe3Dpointsinoneoftheframesinthesequence.视觉追踪算法采用重构每祯MARKER的3维坐标,然后将每个MARKER赋予正确的身体部位。程序需要在序列中的一祯对这些3维的点进行人工标识。labelingsoftware
标注软件ThevisualizationtoolshowninFigure3wasimplementedinMatlabtoprovideagraphicalrepresentationofthecomputeddata(forexamplerepresentingthereconstructedbodywithastickfigure),forinspectionandediting.图3所示为:可视化工具在MATLAB下执行,为计算数据提供图像显示,用于检验和编辑。TheGraphicalDisplay
图像显示Theoperatorinterfacedescribedhereinteractswiththeoperatorexclusivelythroughagraphicalinterfaceincorporatinglivevideooftherobotworkspace.
本操作界面可以让操作者仅通过图形界面与机器人工作空间真实视频画面的结合进行人机交互。Agraphicmodeloftherobot,withaviewpointmatchingthevideocamera,isoverlaidtothevideo.
机器人的图像模型以与相机匹配的视角叠加到真实画面上。Figure4showsthegraphicalsimulationoftheRRCarmasatransparentimagesuperimposedtothelivevideooftheremotesite.图4所视是RRC手臂以透明图像叠加到遥控地点的真实画面的图形仿真Self-CollisionDetection
自身碰撞检测Self-collisionisdefinedasthesituationwhenamanipulatorlinkistooclosetooneofitsotherlinks.
自身碰撞被定义为一条操作杆与其他操作杆过于接近的情况。Approach:totestforline-segmenttoline-segmentdistances,takingintoaccounttheradiiofthelinks.
方法:检测线段间的距离并考虑连杆的半径VisualizationofSingularitySpace
奇异空间的可视化
Theapproachusedheretogeneratethejointanglesandresolvethekinematicredundancy,giventhesetofendeffectorpositionsgeneratedbythevisualtracker,istheConfigurationControlmethod
这里采用生成关节角和解决运动学冗余的方法,由视觉追踪生成末端执行器位置。这就是配置控制方法。Althoughconfigurationcontrolpreventsdangerousmotions,italsoalterstherobottrajectory,possiblyconfusingtheoperatorandcreatingproblemsintightenvironments.
尽管配置控制避免了危险动作,但他改变了机器人运动轨迹,可能会干扰操作者并在狭窄环境下产生问题。Tosolvethisproblemwegenerategraphicalwarningstolocalizenearbysingularitiesbyusingthedistancefromasingularityexpressedasdet(JJT)
为了解决这个问题,我们生成了图像警报,通过det()得到的到奇异区域的距离确定是否靠近奇异区。wevisualizethesingularityvolumeinthevicinityofthemanipulatorwristbasedonthevalueofthedeterminant.
我们根据行列式值使执行器附近的奇异区域可视化。结论和展望Theinnovativefeaturesofthissystemincludeavisualtrackertoteleoperatearemotemanipulatorbysimplymovingthearms,andanintelligentadvisor,toanalyzethecommandedmotionsforkinematiccorrectness,enablingtheoperatortoavoidselfcollisionandsingularities.该系统的创新点包括:对远端控制者通过移动手臂进行遥操作进行视觉跟踪,可以避免自身碰撞,对奇异点的智能运动学分析Thisworkisonlythebeginningofthedevelopmentofacompletevision-basedoperatorinterface.这一工作只是开发一套完整的可视操作界面的开始Visualtrackingtechnologyneedstobeenhancedin:real-timecomputationofthe3Dupper-bodyposeofthe
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- GB/T 48405.1-2026核设施放射性废物管理第1部分:目标和实践方法
- 肝胆外科手术技巧探讨
- 妇产科疾病康复训练
- 2027年春季开学考试高二历史检测卷打印版
- 精神心理疾病干预总结
- 2027年四川省高考三模政治全真模拟卷打印版
- 期中自测卷(试卷)2026-2027学年度上学期高二语文统编版(含答案)
- 关于订单延误的催办通知(5篇)范文
- 2026年市场分析报告的通知函(7篇)
- 建筑项目协调协同效率绩效评估表
- 污水管道维修合同协议书范本7篇
- 备料组物料员岗位考核试题及详细答案
- 特发性肺纤维化抗纤维化治疗专家共识(2025版)
- 2026年宝鸡市凤翔区社区专职人员招聘(24人)考试备考题库及答案解析
- 腹膜透析规范化诊疗指南(2025版)
- JJF 2492-2026碳计量名词术语及定义
- 高中语文高三小说叙述视角专题复习教学设计
- 《钢轨静态调整》课件
- 2026年公共营养师(四级、中级专业能力)考试练习题及答案
- 太阳能路灯项目施工预算书
- 2026年四川政工师考试题库及答案
评论
0/150
提交评论