具身智能机器人概论 课件 第6章-应用场景_第1页
具身智能机器人概论 课件 第6章-应用场景_第2页
具身智能机器人概论 课件 第6章-应用场景_第3页
具身智能机器人概论 课件 第6章-应用场景_第4页
具身智能机器人概论 课件 第6章-应用场景_第5页
已阅读5页,还剩79页未读 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

第6章应用场景家庭服务、医疗、协作与巡检实践《具身智能》本章导读•6.1服务机器人•6.2康复与医疗机器人•6.3协作机器人•6.4巡检机器人《具身智能》学习目标•了解家庭服务与医疗康复应用•掌握协作机器人与工业场景•理解巡检、导览等特种应用•分析场景需求与技术匹配6.1服务机器人01/04016.1服务机器人026.2康复与医疗机器人036.3协作机器人046.4巡检机器人《具身智能》《具身智能》6.1.1具身智能融入服务机器人•具身智能融入服务机器人后,机器人就会拥有物理身体,能在家庭、公共服务场所等真实环境中自主感知、思考、行动并与人自然交互。•与传统服务机器人不同,具身智能服务机器人不依赖预设程序,能动态理解环境、自主决策并完成复杂任务。•根据应用场景,主要分为家政服务机器人与公共服务机器人两大类。•1.具身智能家政服务机器人•具身智能家政服务机器人的定位是深度融入家庭环境,替代或辅助人类完成日常家务、健康护理与情感陪伴,是家庭的“智能管家”与“生活伙伴”。•具身智能家政服务机器人融合了视觉(RGB-D)、激光雷达、触觉、听觉传感器,能构建3D家庭地图,可以识别家具、物品、人类,以及识别宠物等动态障碍,具有全场景感知;•搭载视觉-语言-动作(VLA)大模型,能理解“把客厅收拾一下”等模糊自然语言指令,从而自主规划复杂任务链;《具身智能》表6-1具身智能家政服务机器人的主流形态与代表产品。类型产品核心特点应用场景轮臂复合式科沃斯八界双臂轮式底盘,可自主整理杂物、将衣物放入洗衣机、开关家电从“清洁工具”升级为“家庭管家”轮臂复合式智平方AlphaBot2双臂轮式,具空间感知与具身大模型高端家庭、养老社区人形海尔HIVA海娃165cm拟人身高,44关节,可蹲跪弯腰,能操作洗地机、咖啡机…餐厨、洗护全场景人形卧安豌豆(Vero)专攻家务,可自主做饭、洗碗、洗衣、收纳家庭家务,CES2026亮相四足、仿生中国移动小力四足机器狗,可自主导航递物、健康监测、远程看护、儿童伴学家庭陪护、健康监测、儿童伴学•具身智能家政服务机器人的核心应用场景包括:一是日常家务,如深度清洁、整理收纳、烹饪备餐、洗衣熨烫、物品递送;《具身智能》6.1.1具身智能融入服务机器人•具身智能家政服务机器人的核心应用场景包括:一是日常家务,如深度清洁、整理收纳、烹饪备餐、洗衣熨烫、物品递送;•二是养老照护,辅助起身行走、助浴、血压与血氧健康监测、用药提醒、紧急呼救;•三是家庭安防,实现24小时自主巡逻,监测燃气、漏水、闯入并实时告警;•四是情感陪伴,通过多模态交互,识别情绪,陪聊、讲故事、娱乐互动。•将具身智能公共服务机器人部署于商场、机场、车站、政务中心、酒店、景区等公共场所,提供信息服务、引导接待、物流配送、安防巡检、商业展示等标准化服务,提升公共效率与体验。•具身智能公共服务机器人具有强环境适应性,适应人流密集、地形复杂的开放空间,具备动态避障与长距离自主导航能力;•具有高并发交互,支持多人同时语音对话、人脸识别,快速响应高频重复咨询;《具身智能》表6-2具身智能公共服务机器人的主流形态与代表产品。机器人类型产品名称应用场景核心功能与特点人形政务/导览机器人深圳政务小宝政务服务全球首家具身政务机器人,可读取身份证、上传材料、打印回执,提供…人形政务/导览机器人墨茵车站春运期间提供路线指引、信息咨询,自然对话、对答如流轮式多功能服务机器人美团小黄蜂机场/园区解决“最后1公里”餐食、行李配送,节省旅客时间轮式多功能服务机器人零次方轮臂机器人商超、机场、酒店提供深度清洁、消毒、货品分拣,已进入20多个城市地标商业展示/特种服务机器人智平方智魔方深圳人才公园咖啡机器人,日均制作数百杯咖啡,可对话、表演商业展示/特种服务机器人星动纪元Q5酒店、商业演示1.65米超拟人机器人,11自由度灵巧手,可用于酒店接待、商业…•具身智能公共服务机器人核心应用场景包括:一是政务服务,实现窗口引导、材料收递、信息查询、证件办理、24小时自助服务;《具身智能》6.1.1具身智能融入服务机器人•具身智能公共服务机器人核心应用场景包括:一是政务服务,实现窗口引导、材料收递、信息查询、证件办理、24小时自助服务;•二是交通枢纽服务,在机场、高铁站实现值机引导、行李协助、失物招领、旅客安抚;•三是商业零售,进行店铺导购、商品推荐、自助结账、库存盘点,甚至实现无人值守便利店功能;•四是文旅酒店导览,进行景区导览、酒店前台签单结账、客房送餐、VIP接待;•五是安防巡检,实现园区、楼宇的24小时巡逻、异常监测、消防检查、应急疏导。《具身智能》图6-1服务机器人的形态与岗位匹配逻辑•3.服务机器人的形态与岗位匹配逻辑•图6-1所示为服务机器人在不同拟人程度需求下的形态与岗位匹配逻辑。《具身智能》图6-2轮式机器人与人形机器人•图6-2a为轮式机器人,这类机器人以轮式移动平台为核心,形态简洁、成本低、稳定性强,适合纯执行类、重复性高的服务场景,具体如下:保洁员,负责地面清洁、垃圾处理等基础环境维护;。•图6-2b为人形机器人,这类机器人采用类人外形与肢体结构,更适合需要面对面交互、情感共鸣的服务场景,具体如下:餐厅服务员,完成送餐、点单、引导,类人形态更有服务感和温度;。《具身智能》6.1.2家政服务机器人与公共服务机器人的差异•家政服务机器人是家庭生活的深度参与者,追求人性化、安全性与情感连接;•公共服务机器人是社会服务的高效执行者,追求标准化、稳定性与大规模部署。•两者共同构成了具身智能服务的家庭-城市双生态,正从概念快速走向实用,深刻改变未来生活与服务模式。•表6-3所示是家政服务机器人与公共服务机器人的核心差异。维度具身智能家政机器人具身智能公共服务机器人应用环境封闭、私密的家庭空间开放、复杂、人流密集的公共空间核心需求生活自理、舒适、隐私、情感陪伴效率、标准化、高可靠、强交互操作复杂度极高:处理非结构化家务(叠衣、烹饪)中高:处理结构化业务(引导、配送、办证)安全优先级最高:物理接触(老人/儿童),绝对防碰撞高:防拥挤、防推搡、防误操作交互对象家庭成员(老人、小孩、病人)海量陌生公众(多语言、多年龄)续航要求日常8-12小时,自动回充高峰12-16小时,支持快速换电《具身智能》表6-3家政服务机器人与公共服务机器人的核心差异维度具身智能家政机器人具身智能公共服务机器人应用环境封闭、私密的家庭空间开放、复杂、人流密集的公共空间核心需求生活自理、舒适、隐私、情感陪伴效率、标准化、高可靠、强交互操作复杂度极高:处理非结构化家务(叠衣、烹饪)中高:处理结构化业务(引导、配送、办证)安全优先级最高:物理接触(老人/儿童),绝对防碰撞高:防拥挤、防推搡、防误操作交互对象家庭成员(老人、小孩、病人)海量陌生公众(多语言、多年龄)续航要求日常8-12小时,自动回充高峰12-16小时,支持快速换电代表形态人形、轮臂复合、四足轮式、人形、双轮平衡《具身智能》表6-4家政服务机器人需求-产品技术特性需求类别用户需求产品技术特性汇总家庭管控功能实时监控对话智能摄像头、语音交互模块、底盘滑轮F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…家庭管控功能智能家居设备中控可触控显示屏F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…家庭管控功能家庭安全防护底盘轮滑、环境传感器F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…家庭管控功能用户健康情况监测语音交互模块、环境传感器、智能识别模块F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…家务功能清洁模块化、底盘轮滑、环境传感器F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…交互功能情感对话互动语音交互模块、智能识别模块F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…交互功能生活助手语音交互模块、可触控显示屏F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…交互功能宠物陪伴模块化、环境传感器、智能识别模块F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…外观需求形态美观符合人机工学F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…《具身智能》表6-4家政服务机器人需求-产品技术特性(续)需求类别用户需求产品技术特性汇总外观需求色彩和谐配色合理F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…外观需求与家居环境适配线条圆润、材质安全F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…外观需求体积适中轻量化F1智能摄像头F2语音交互模块F3底盘滑轮F4可触控显示屏F5…•它包括以下四个需求。《具身智能》6.1.3家政服务机器人需求-产品技术特性•家庭管控功能是家政服务机器人的核心能力,旨在构建一个安全、便捷、智能的家庭中枢。•实时监控对话是为实现家庭场景下的实时监控与远程互动,机器人配备了智能摄像头(F1),可提供高清视频监控;•通过语音交互模块(F2),支持双向语音通话,让用户能随时与家人沟通;•同时,底盘滑轮(F3)使机器人具备移动能力,可自主调整监控视角,覆盖更多家庭区域。•智能家居设备中控作为智能家居的控制中心,机器人搭载了可触控显示屏(F4),用户可通过直观的图形界面,集中管理和控制家中的各类智能设备,如灯光、空调、窗帘等,实现一键场景化操作。•家庭安全防护依赖于底盘滑轮(F3)的移动巡逻能力,以及环境传感器(F5)对异常环境(如烟雾、燃气泄漏)的实时监测。•当检测到风险时,机器人可及时向用户推送警报。《具身智能》6.1.3家政服务机器人需求-产品技术特性•家务功能聚焦于提升家庭生活的便利性,减轻用户的日常劳作负担。•清洁能力的实现依赖于三大技术特性:模块化(F7)设计允许机器人搭载不同的清洁工具(如扫拖一体模块、吸尘模块),适应多样化清洁需求;•底盘滑轮(F3)提供了灵活的移动和越障能力;•环境传感器(F5)则用于导航避障和识别地面污渍,确保高效、智能的清洁作业。•交互功能致力于让机器人成为用户贴心的生活伙伴,实现自然、流畅的人机互动。•作为生活助手,机器人通过语音交互模块(F2)接收用户的语音指令,如查询天气、设置提醒、播放音乐等;•同时,可触控显示屏(F4)提供了可视化的信息反馈和操作界面,增强了交互的直观性。《具身智能》6.1.3家政服务机器人需求-产品技术特性•外观需求确保机器人能够完美融入家庭环境,同时提供安全、舒适的使用体验。•形态美观体现在机器人的整体造型遵循符合人机工学(F8)的设计原则,线条流畅,握持和操作手感舒适,同时在视觉上给人以科技感和亲和力。•色彩和谐体现在通过配色合理(F9)的设计,机器人的外观色彩可以与不同风格的家居装饰相协调,避免产生突兀感,成为家居环境的一部分。•与家居环境适配体现在为了更好地融入家庭机器人采用了线条圆润(F10)的设计,减少了棱角,降低了碰撞风险;•同时,材质安全(F11)的选择确保了产品在与用户和宠物接触时的安全性。•体积适中体现在轻量化(F12)的设计不仅使机器人移动更加灵活、噪音更低,也使其在家庭空间中占用更少的位置,便于收纳和在狭小区域作业。•该家政服务机器人的设计,通过整合智能摄像头(F1)、语音交互模块(F2)、底盘滑轮(F3)、可触控显示屏(F4)、环境传感器(F5)、智能识别模块(F6)、模块化(F7)等核心技术模块,《具身智能》6.1.3家政服务机器人需求-产品技术特性•3.交互功能•4.外观需求《具身智能》6.1.4公共服务机器人的主动交互分析模型•1.主动交互分析模型•人与人之间的沟通和社交方式,在很大程度上影响了人对主动交互形式的期望,这种经验对设计智能设备的主动模式有启发作用。•从人机协同中的设备主动交互模式出发,主动交互是公共服务机器人对用户隐性需求的主动反应,流程从“前台流转”变为“前后台配合”:交互行为的起点转变为后台感知出发到后台解释,再到前台执行,《具身智能》图6-3公共服务机器人的主动交互分析模型•图6-3所示为公共服务机器人的主动交互分析模型。《具身智能》6.1.4公共服务机器人的主动交互分析模型•2.核心技术特点•公共服务机器人的交互核心技术,是围绕“感知-认知-决策-执行-反馈”闭环构建而来,是让机器人拥有类人的物理身体与自然交互能力,能在真实、非结构化环境中理解、响应并主动服务人类。•核心技术可分为如下模块。•多模态感知融合技术可以让机器人全面、精准、实时地获取环境、物体、人体的多维度信息,是交互的基础。《具身智能》6.1.4公共服务机器人的主动交互分析模型(续)•一是视觉感知,采用RGB-D深度相机、激光雷达,实现三维重建、目标定位、SLAM建图,通过目标检测、图像分割、视觉语言模型等视觉算法,实现场景语义理解。•二是听觉与语音感知,采用麦克风阵列、波束成形等远场拾音进行降噪、声源定位,然后通过ASR(语音转文字)、TTS(文字转语音)、情感语音识别(语调、语速)实现语音处理。•三是触觉与力觉感知,采用分布于机身、手部的柔性触觉阵列感知压力分布、材质、滑动,以及安装于关节、腕部的六维力传感器精确感知三维力与力矩,实现柔顺操作。•四是本体感知,采用IMU、编码器实时获取自身姿态、关节角度、运动速度,保障动作稳定。•五是多模态数据融合,采用注意力机制动态分配感知权重,如操作时触觉优先、导航时视觉优先,将视觉、语音、触觉数据映射到同一语义向量空间,统一表征空间,实现跨模态理解。•具身认知与意图理解技术解析人类模糊指令、情感与意图,将自然语言转化为机器人可执行的任务。《具身智能》6.1.4公共服务机器人的主动交互分析模型•一是大语言模型(LLM)驱动的指令理解,VLA模型打通视觉-语言-动作的端到端映射,是具身交互核心枢纽,同时采用基于物理规则与人类偏好等常识推理,预判风险,如易碎品轻拿、热水防烫。•二是情感计算与共情交互,具有微表情、姿态识别,分析面部、肢体,判断用户情绪处于愉悦、疲惫、焦虑状态,从而情感反馈生成,及时调整语音语调、面部表情、肢体动作,实现拟人化共情。•三是世界模型,构建内部虚拟环境,预测动作后果、规划最优路径,支持零样本泛化到新场景。•具身决策与运动规划技术是将高层决策转化为安全、平滑、精准的物理动作,包括分层任务规划、全身动力学控制、柔顺控制与力位混合控制、灵巧操作规划等。《具身智能》6.1.4公共服务机器人的主动交互分析模型(续)•如局部动态规划中采用MPC(模型预测控制),实时避障、适应动态环境;•以及基于机器人动力学模型采用全身动力学控制(WBC),协调多关节,如人形28-40自由度,实现稳定、协调、类人运动。•自然拟人化交互表达技术让机器人的反馈更自然、友好、易理解,提升用户接受度,采用仿生肢体语言、仿生面部表情、多模态协同表达,如注视、点头、摇头、视线跟随等头部、眼神控制,以及挥手、指引、拥抱等社交动作等。•安全交互与闭环反馈技术保障人机物理交互的绝对安全,并持续优化交互体验,采用多层次安全机制,如接触力超过阈值立即停止或回弹、AI预判靠近热源、高举重物等危险动作并禁止,以及通过用户表情、语音、动作,在线学习偏好,6.2康复与医疗机器人02/04016.1服务机器人026.2康复与医疗机器人036.3协作机器人046.4巡检机器人《具身智能》《具身智能》6.2.1具身智能融入康复与医疗机器人•具身智能融入医疗与康复机器人后,机器人通过身体感知、实时交互、自主决策和持续学习来适应真实世界,使机器人成为深度应用于医疗诊断、手术辅助、术后康复与长期护理领域的新一代AI实体。•它超越了传统医疗机器人“预设程序、机械执行”的局限,具备环境自适应、任务泛化、人机共情、自我进化的能力,正成为医疗智能化的核心方向。•1.核心技术特征•2.主要应用场景与代表产品•神经康复机器人是针对脑卒中、脊髓损伤、脑外伤导致的偏瘫、截瘫患者,重塑运动功能,其应用具体如表6-5所示。康复类型核心技术主要功能代表产品/平台上肢康复(手/臂)外骨骼机械臂+肌电/脑电接口+虚拟游戏化训练辅助/主导完成抓握、抬举、伸展;实时纠正异常姿势;量化评估肌力、关节活…傅利叶ArmMotus系列、华为CloudRobo平台康复系统下肢康复(行走)负重外骨骼机器人+动态平衡控制+步态分析帮助患者站立、平地行走、上下楼梯;重建自然步态;预防肌肉萎缩傅利叶ExoMotusM4外骨骼脑机接口(BCI)康复直接解读患者脑电信号,意念驱动机器人完成动作实现“意识-机械-肢体”闭环;大幅缩短康复周期;适用于高位截瘫患者-《具身智能》表6-5神经康复机器人应用康复类型核心技术主要功能代表产品/平台上肢康复(手/臂)外骨骼机械臂+肌电/脑电接口+虚拟游戏化训练辅助/主导完成抓握、抬举、伸展;实时纠正异常姿势;量化评估肌力…傅利叶ArmMotus系列、华为CloudRobo平台…下肢康复(行走)负重外骨骼机器人+动态平衡控制+步态分析帮助患者站立、平地行走、上下楼梯;重建自然步态;预防肌肉萎缩傅利叶ExoMotusM4外骨骼脑机接口(BCI)康复直接解读患者脑电信号,意念驱动机器人完成动作实现“意识-机械-肢体”闭环;大幅缩短康复周期;适用于高位截瘫…-•具身智能手术机器人是从精准操作升级为“自主感知+智能决策”的手术伙伴,如在传统达芬奇等手术机器人基础上,加入实时组织识别、自动避障、力反馈优化、术中自适应能力。《具身智能》6.2.1具身智能融入康复与医疗机器人•具身智能手术机器人是从精准操作升级为“自主感知+智能决策”的手术伙伴,如在传统达芬奇等手术机器人基础上,加入实时组织识别、自动避障、力反馈优化、术中自适应能力。•该机器人具有大幅度降低出血量、手术时间缩短、并发症率降低等临床价值•常用于医院物流和导诊,如自主导航运送药品、标本,智能导诊、病房巡查;•可以用于老年、慢病照护,辅助进食、穿衣、翻身,实现实时监测生命体征;•也可以用于认知、语言康复,如傅利叶人形机器人通过对话、游戏进行记忆力、语言、情绪训练,具备情感共情能力。•常用于远程超声和智能筛查,如专家远程操控机械臂持探头,结合5G和力反馈,为基层、偏远地区提供精准超声检查;•或是机器人搭载多参数检测仪,在社区完成血压、血糖、心电等一站式筛查。《具身智能》图6-4镜像康复模式示意的上肢康复机器人工作示意•1.上肢康复机器人•图6-4所示为一种采用镜像康复模式的上肢康复机器人工作示意。《具身智能》图6-5上肢康复机器人的约束组件•图6-5所示是上肢康复机器人的一种约束组件,是在保证患者安全舒适的前提下,•精准采集大臂运动数据、限制异常活动范围,并辅助完成康复训练。《具身智能》6.2.2肢体康复机器人•2.下肢康复机器人•a)总体结构b)骨盆机构压力传感器布局《具身智能》图6-6下肢康复机器人结构图《具身智能》6.2.3儿科护理具身智能机器人•区别于传统医疗AI的单一算法输出,具身智能在儿科护理中展现出三大技术特征:一是多模态感知能力,机器人能同步解析儿童的语音、表情和触压信号;•二是情境化决策机制,可根据患儿疼痛等级动态调整虚拟场景复杂度;•三是拟人化执行方式,通过柔顺运动控制实现安全的物理互动。•这些特性使具身智能成为弥合技术刚性与儿童需求柔性之间鸿沟的关键桥梁。•作为结合物理躯体与人工智能的前沿技术,儿科护理具身智能机器人正在从多方面重塑护理服务体系,如表6-6所示,但大部分相关技术仍处于研究、研发阶段,尚未形成成熟的技术产品。儿科护理类型场景描述具身智能应用基础护理智能喂药与剂量监控1.利用具身智能机器人精确递送口服药,辅助护士或家长喂药,减少儿童的抗…基础护理体位调整与辅助移动1.柔性具身机器人辅助行动不便的患儿进行体位变换,预防压疮。2.在康…心理护理情绪识别与情感交互1.机器人通过多模态感知(面部表情、肢体语言、语调)识别患儿情绪,及时…心理护理游戏化干预使用具身智能机器人设计情绪调节游戏,帮助儿童表达和缓解情绪。康复护理运动康复辅助训练1.具身智能康复机器人引导儿童完成步态训练、上下肢活动、精细动作练习,…康复护理姿势监测与矫正穿戴式具身设备监测儿童的坐姿、走姿,帮助早期矫正脊柱侧弯、足外翻等问题。《具身智能》表6-6具身智能机器人在儿科护理中的应用儿科护理类型场景描述具身智能应用基础护理智能喂药与剂量监控1.利用具身智能机器人精确递送口服药,辅助护士或家长喂药,减少儿童的抗…基础护理体位调整与辅助移动1.柔性具身机器人辅助行动不便的患儿进行体位变换,预防压疮。2.在康…心理护理情绪识别与情感交互1.机器人通过多模态感知(面部表情、肢体语言、语调)识别患儿情绪,及时…心理护理游戏化干预使用具身智能机器人设计情绪调节游戏,帮助儿童表达和缓解情绪。康复护理运动康复辅助训练1.具身智能康复机器人引导儿童完成步态训练、上下肢活动、精细动作练习,…康复护理姿势监测与矫正穿戴式具身设备监测儿童的坐姿、走姿,帮助早期矫正脊柱侧弯、足外翻等问题。健康教育与行为干预健康行为演示1.机器人通过肢体演示刷牙、洗手、打喷嚏时遮挡等动作,进行正确卫生行为…健康教育与行为干预疾病管理教育针对哮喘、糖尿病等慢性病,机器人模拟用药、吸入器使用过程,指导儿童自我…家庭护理医院联动的具身陪护1.护理人员或医生通过具身智能机器人远程“进入”家庭环境,进行指导、评…《具身智能》表6-6具身智能机器人在儿科护理中的应用(续)儿科护理类型场景描述具身智能应用家庭护理辅助家庭训练计划执行机器人协助执行康复训练表、用药时间表,通过语音提醒与身体动作引导家庭共…发育支持性护理早产儿环境调节1.可调光、柔性触觉反馈的具身系统模拟“子宫”环境,支持早产儿神经发育…发育支持性护理疼痛与应激干预通过具身机器人实现非药物疼痛干预,如非营养性吮吸、袋鼠护理(肌肤接触)…发育支持性护理喂养支持评估喂养准备状态(吮吸—吞咽—呼吸协调),制订个性化母乳喂养/奶瓶喂养…《具身智能》6.2.4微创操作机器人与诊断支持系统•微创操作机器人与诊断支持系统是医疗智能化、精准化的两大核心技术,分别代表外科手术的精准执行端与临床诊断的智能决策端。《具身智能》图6-7微创操作机器人•1.微创操作机器人•图6-7所示的微创操作机器人的核心构成如下:一是医生控制台,主刀医生远程操控,确保高清视野,并采用手柄、脚踏控制;。《具身智能》表6-7微创操作机器人的主流产品与应用机器人类型典型代表产品核心特点与应用领域腔镜机器人达芬奇(IntuitiveSurgical)全球主流产品,应用于泌尿外科、普外科、妇科、胸外科腔镜机器人图迈(微创)国产代表,支持多孔操作,5G远程手术技术领先骨科机器人鸿鹄(微创)用于关节置换、脊柱手术,具备术前规划+术中导航功能血管介入机器人R-One(微创)应用于心脑血管介入,可防辐射,实现精准导丝控制单孔、自然腔道手术机器人—经脐、口等实现无疤微创•诊断支持系统整合了医学知识库、患者数据与AI算法,可为医生提供诊断、鉴别、风险预警、治疗方案推荐。《具身智能》6.2.4微创操作机器人与诊断支持系统•诊断支持系统整合了医学知识库、患者数据与AI算法,可为医生提供诊断、鉴别、风险预警、治疗方案推荐。•表6-8所示是常见诊断支持系统的分类与内容。•2.诊断支持系统分类具体内容系统架构数据层:EMR、检验、影像、基因、病理、物联网数据系统架构知识库层:指南、文献、专家经验、疾病-症状-检查关联图谱系统架构推理引擎:规则引擎、机器学习、深度学习、知识图谱系统架构交互层:诊前/诊中/诊后嵌入HIS/EMR/LIS/PACS,主动提示核心功能辅助诊断:症状→疾病概率、鉴别诊断、罕见病提示核心功能影像AI诊断:肺结节、乳腺、眼底、CT/MRI自动检出与分级《具身智能》表6-8常见诊断支持系统的分类与内容分类具体内容系统架构数据层:EMR、检验、影像、基因、病理、物联网数据系统架构知识库层:指南、文献、专家经验、疾病-症状-检查关联图谱系统架构推理引擎:规则引擎、机器学习、深度学习、知识图谱系统架构交互层:诊前/诊中/诊后嵌入HIS/EMR/LIS/PACS,主动提示核心功能辅助诊断:症状→疾病概率、鉴别诊断、罕见病提示核心功能影像AI诊断:肺结节、乳腺、眼底、CT/MRI自动检出与分级核心功能风险预警:药物过敏、配伍禁忌、脓毒症/心梗/卒中快速识别核心功能个性化方案:肿瘤靶向/免疫用药匹配、慢病管理路径核心功能质量控制:减少漏诊误诊(降低15–30%)、规范诊疗《具身智能》表6-8常见诊断支持系统的分类与内容(续)分类具体内容典型应用影像CDSS:肺结节AI、乳腺钼靶AI、脑卒中AI典型应用急诊/ICU:快速分诊、脓毒症预警、多器官衰竭评估典型应用基层医疗:提升全科医生诊断能力、缩小城乡差距典型应用罕见病诊断:DeepRare等系统,表型+基因综合判读•在实际医疗应用中,微创操作机器人是精准外科的智能手,把手术做到极致微创、极致精准。《具身智能》6.2.4微创操作机器人与诊断支持系统•在实际医疗应用中,微创操作机器人是精准外科的智能手,把手术做到极致微创、极致精准。•诊断支持系统是临床决策的超级大脑,把诊断做到高效、规范、少错。•两者融合,可以构建从预防、诊断、治疗到康复的全流程智能医疗体系,大幅提升医疗质量。6.3协作机器人03/04016.1服务机器人026.2康复与医疗机器人036.3协作机器人046.4巡检机器人《具身智能》《具身智能》6.3.1具身智能融入协作机器人•工业协作是指遵循ISO/TS15066标准,无需安全围栏,可在人机混行的动态环境中,与工人直接、安全地协同作业。•具身智能与协作机器人深度融合后,机器人不仅能与人安全共融、柔性协作,更具备自主感知、自主决策、自主学习、自主协同的能力,是从自动化工具向智能生产伙伴的跨越。•从这个意义上来说,传统协作机器人等于安全的机械臂,而具身智能协作机器人等于有大脑、有感知、会思考、能协作的智能体。《具身智能》6.3.1具身智能融入协作机器人•1.核心技术架构•一是视觉,采用3D视觉、AI相机来识别物体、姿态、手势与环境;•二是力控、触觉:采用关节力传感器、电子皮肤感知接触、力度与柔顺度;•三是融合,即通过“视觉+力觉+听觉+接近觉”,构建对物理世界的精准认知。•视觉-语言-动作(VLA)大模型能理解自然语言指令,如“把A零件装到B上”,自主规划动作序列。•世界模型则实时构建虚拟环境,预判动作后果,自主避障与纠错。•采用端侧推理实现协作机器人的低延迟、高实时性,满足工业毫秒级响应要求。《具身智能》6.3.1具身智能融入协作机器人•工厂智能中枢能统一调度多台多形态机器人,包括机械臂、人形、AGV等;•同时具有群体智能,实现任务动态分配、数据共享、故障自愈。•2.具身智能协作机器人与其他机器人的关键区别《具身智能》表6-9具身智能协作机器人与其他机器人的关键区别维度传统工业机器人传统协作机器人具身智能协作机器人智能模式预设程序,被动执行有限感知,指令驱动自主认知,主动决策环境适应需结构化、固定环境轻度适应,有限调整高度自适应,非结构化场景任务能力单一、重复、大批量柔性切换,需示教一机多能,自主生成新任务人机关系隔离(围栏)安全共存意图理解,深度协同编程方式专业代码,复杂拖拽示教自然语言/零编程•包括智能模式、环境适应、任务能力、人机关系、编程方式均有显著区别。《具身智能》6.3.1具身智能融入协作机器人•包括智能模式、环境适应、任务能力、人机关系、编程方式均有显著区别。•具身智能协作机器人具有如下核心优势:一是自主应变,当物料偏移、姿态变化时,无需人工干预,实时自主纠偏;•二是快速部署,开箱即用,段时间内完成新任务学习,适配小批量、多品种柔性生产;•三是人机深度协同,可以预测工人动作意图,主动配合、避让,真正人机同台;•四是全域作业,可集成移动底盘,跨工位、跨区域自主移动作业;•五是持续进化,通过“云端-边端”数据学习,技能不断迭代优化。•3.核心优势《具身智能》图6-8履带式协作机器人移动工作站•图6-8所示,履带式便携协作机器人由机械臂、控制系统、送丝机和移动平台组成。《具身智能》图6-9焊接协作机器人的“机器找工件”模式•图6-9所示,履带式协作机器人移动工作站上设计有电驱升降装置,拖动示教协作机器人根据索塔钢壳块体棱角焊缝的相应部位匹配焊接高度,找到需要焊接的“工件”,《具身智能》图6-10焊点毛刺力控打磨协作机器人《具身智能》图6-11焊点毛刺力控打磨系统的主要技术组成•图6-11所示,主要分为相机识别缺陷焊点、机器人运动路径规划、机器人末端力控、•机器人末端打磨机构、视觉检测模块和人机交互这6个模块。《具身智能》图6-12机器人力控打磨模块的模型简图•打磨协作机器人典型应用行业具体有如下:一是汽车零部件领域,如轮毂、发动机壳体、变速箱、内饰件的去毛刺、焊缝打磨、抛光;•二是3C电子领域,如手机中框、笔记本外壳、摄像头的倒角、合模线、镜面抛光;6.4巡检机器人04/04016.1服务机器人026.2康复与医疗机器人036.3协作机器人046.4巡检机器人《具身智能》《具身智能》6.4.1具身智能融入巡检机器人•图6-13所示为车载具身感知的巡检机器人外观,是将具身智能技术与移动车载平台深度融合。•它集成多模态传感器、自主导航、AI感知与边缘计算,在道路、园区、工矿、轨道交通等移动或静态场景中,实现环境感知、缺陷识别、动态避障与数据上报的一体化智能装备,替代人工完成高频、高危、高精度的巡检任务,《具身智能》图6-12巡检机器人外观《具身智能》6.4.1具身智能融入巡检机器人•1.核心技术架构•以本体感知、环境感知为双核心,构建鲁棒性感知体系,覆盖视觉、空间、温度、声学等全维度信息。•表6-10所示是巡检机器人的传感器指标。传感器类型核心功能技术指标/应用价值激光雷达(LiDAR)三维建图、厘米级定位、动态避障16/64/128线,点云频率≥10Hz,定位误差±2cm内视觉系统缺陷识别、表计读数、外观检测高清RGB相机+红外热成像,温差识别≤0.1℃,支持200+种特征识别IMU+轮速计姿态感知、运动补偿高频采样,补偿激光/视觉在低光照、强振动下的定位偏差声学传感器异常声音检测、环境预警捕捉设备运行异响、施工噪声,触发实时预警北斗RTK全局高精度定位厘米级定位,支持车道级/轨道级巡检,速度可达80km/h《具身智能》表6-10巡检机器人的传感器指标传感器类型核心功能技术指标/应用价值激光雷达(LiDAR)三维建图、厘米级定位、动态避障16/64/128线,点云频率≥10Hz,定位误差±2cm内视觉系统缺陷识别、表计读数、外观检测高清RGB相机+红外热成像,温差识别≤0.1℃,支持200+种特征识别IMU+轮速计姿态感知、运动补偿高频采样,补偿激光/视觉在低光照、强振动下的定位偏差声学传感器异常声音检测、环境预警捕捉设备运行异响、施工噪声,触发实时预警北斗RTK全局高精度定位厘米级定位,支持车道级/轨道级巡检,速度可达80km/h•依托多传感器融合算法与边缘计算平台,实现从数据到认知的转化,是机器人的大脑。《具身智能》6.4.1具身智能融入巡检机器人•依托多传感器融合算法与边缘计算平台,实现从数据到认知的转化,是机器人的大脑。•一是多模态融合,融合激光点云、视觉图像、IMU数据,采用卡尔曼滤波/BEV表征融合,提升复杂环境下感知稳定性,缺陷检出率提升28%以上。•二是SLAM导航,采用激光、视觉融合SLAM,支持未知环境建图、动态路径规划,适配隧道、园区、矿区等非结构化场景。•三是AI缺陷识别,部署轻量化YOLO/MobileNet模型,边缘端实现毫秒级推理,本地初筛+云端精判,识别准确率≥98%。《具身智能》6.4.1具身智能融入巡检机器人(续)•四是世界模型,构建环境动态模型,预测障碍物移动、设备状态变化,支撑长周期任务决策。•通常以车载底盘为载体,联动机械臂、无人机等模块,完成精准巡检与应急处置,具体包括以下:一是底盘控制,采用轮式、履带式、多足融合底盘,适应平坦道路、崎岖矿区、狭窄通道等多地形,扭矩可调,爬坡角度≥30°;•二是机械臂协同,多轴机械臂延伸至车底、高空等视觉盲区,对车辆部件、管道阀门进行精细检测;•三是车载起降无人机,可以补充高空、狭窄区域巡检,与车辆数据融合,构建全场景感知图谱;•四是通信模块,采用5G/5G+边缘网关,支持本地低延迟处理与云端数据同步,巡检数据结构化上报。•突破传统“被动感知”,实现主动感知——机器人通过移动、调整视角,主动获取最优视角数据,解决反光、遮挡、低光照等难题。《具身智能》6.4.1具身智能融入巡检机器人•例如,在隧道内通过调整相机角度避开灯光反光,提升裂缝识别精度。•边缘端:轻量化模型实时处理核心数据,初筛异常,响应时间≤500ms,断网可独立工作。•云端:大模型进行复杂缺陷分析、历史数据对比、模型迭代,生成检修建议,闭环响应时间≤6s。•数据闭环:巡检数据沉淀至云端,支撑预测性维护,实现“巡检—分析—优化—再巡检”的持续进化。•通过分布式感知与任务分配,实现多车协同:主车负责全局导航,辅车负责局部细节,数据共享、任务互补,提升巡检效率30%以上。•核心需求:路面病害(裂缝、坑槽)、交通设施(护栏、信号灯)检测,车道级定位,高速适配。•方案:搭载北斗RTK+高清视觉+激光雷达,定位精度厘米级,巡检速度80km/h,实时输出病害面积、位置,支撑道路养护决策。《具身智能》6.4.1具身智能融入巡检机器人•方案:红外热成像+声学传感器+多足底盘,适应复杂地形,实时预警设备过热、气体泄漏,支持机械臂应急处置。•核心需求:飞机蒙皮、停机坪设施检测,全天候、高精度。•方案:多模态传感器融合(RGB+红外+超声),边缘轻量化模型初筛,云端大模型精判,效率和精度大幅度提升。•2.关键技术突破点•3.典型解决方案《具身智能》6.4.2巡检机器人环境模型的建立•巡检机器人的路径规划是为处在有障碍物工作环境中的机器人,寻找一条从已知起点到给定终点的合适运动路线,使机器人在完成巡检任务的过程中,规避所有障碍物,安全、顺利地到达目的地。•路径规划往往具有情况的复杂性、变化的随机性和运动的约束性等特点。•巡检机器人路径规划一般要求机器人依据某个或某些优化原则(如最小能量消耗、最短行走路线、最短行走时间等),在其工作空间中找到一条从起始状态到目标状态的能避开障碍物的最优路径。•在该路径中,机器人不间断地利用所携带的传感器去认知周围的环境,读取障碍物的大小、位置和距离,不断地感知环境信息和周围障碍物的变化,从而搜索出一条从起始状态到目标状态的最优或近似最优的安全、无碰撞路径。《具身智能》6.4.2巡检机器人环境模型的建立(续)•目前,常用的路径规划方法主要有粒子群算法、人工势场法、栅格法、神经网络法和蚁群算法等。•在二维平面上对巡检机器人的工作环境一般用栅格法进行建模,其优点是建模方便迅速,能运用多个栅格的拼合来代表多种形状的障碍物,以减少可行区域由障碍物建模造成的损失。•为保证机器人能够在栅格环境模型中无碰撞地运动,通常将机器人模型简化为一个很小的质点,把机器人的实际尺寸折算进障碍物的面积内,根据机器人的实际尺寸将障碍物的边界向外扩展。•如果某一栅格中存在障碍物,则定义此黑色栅格为障碍栅格,表示为1;•反之白色为自由栅格,表示为0。•用多个栅格的拼合来代表不同形状的障碍物,自由栅格则被合并成为机器人的可达区域,且栅格的大小以对障碍物表示的精确度为准。《具身智能》6.4.2巡检机器人环境模型的建立•1)不满一个栅格时算一个栅格;•2)障碍物的空凹部分和这个障碍物算成一个整体障碍物,避免局部死区的出现,这叫作障碍物的合并;•3)把地图的边界当成障碍物来处理。•(a)处理前障碍物形状(b)处理后障碍物的形状《具身智能》图6-13障碍物形状处理图《具身智能》6.4.3巡检机器人路径规划的粒子群算法•相比其他算法而言,粒子群算法具有收敛速度快、设置参数少、实现简单等特点,近年来受到很多学者的重视,并成功应用于许多领域。•粒子群算法(PSO)的背景是“人工生命”,起源对简单社会系统的模拟,即搜寻目前离食物最近的鸟的周围区域,从而获得解决优化问题。•在建立的空间模型中,利用粒子群算法直接找出一条最优路径。•粒子群算法中的每一个粒子都有一个解,也就是一条路径,粒子群算法从众多的解中寻找一个最优解形成最优路径。•每个粒子的优化函数是粒子所代表的路径长度,在这里具体指的是每一个粒子所跨过的格数。•1.粒子的有效性•a)相邻元素斜线连通b)相邻元素直线连通《具身智能》图6-14粒子有效路径图•图6-14中三幅图表示的是粒子从第次迭代到第次有效路径的实例。《具身智能》图6-15粒子无效路径图•图6-15中三幅图表示的是粒子从第次迭代到第次无效路径的实例。《具身智能》6.4.3巡检机器人路径规划的粒子群算法•2.粒子适应度函数•规划的路径尽可能短,路径的长度可由下式表示:•2)引入惩罚函数,提高路径的安全度。•当机器人与障碍物相撞时,在机器人的路径长度上引入一个惩罚函数,粒子碰撞的障碍物越多,施加的惩罚越大,使得此路径生成的概率越小。•机器人在运动过程中走对角路线可缩短路径长度以节约时间,但改变机器人的运动方向也会耗费时间,为了使机器人完成任务所耗费的时间最短,引入路径平滑度公式如下:•3.非线性动态调整惯性权重的PSO算法•标准粒子群算法中,前期该算法容易陷入局部极值,产生早熟收敛。《具

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论