《增强现实算法基础》课件11-人机交互与应用HCI-AR

增强现实算法基础

--人机交互与应用单位信息任课教师AR交互概述人机交互概念人机交互（Human-ComputerInteraction，HCI），是指人与计算机之间为完成确定任务而进行的信息交换与互动过程。键盘鼠标与触摸屏体感AR交互概述人机交互概念人机交互三要素：人、计算机及人与计算机之间的界面AR交互概述：概念与基本模式人机交互特点信息反馈快速、直观为佳调动人的参与性和主动性AR交互概述人机交互的发展历史命令行界面交互阶段打孔带、键盘人机交互的模式比较，其中R代表现实世界、C代表计算机图形用户界面交互阶段鼠标、触摸屏、图形界面自然人机交互阶段语音、姿态、表情、视线基于现实的交互：VR&ARAR交互概述人机交互的发展历史命令行界面交互阶段打孔带、键盘人机交互的模式比较，其中R代表现实世界、C代表计算机图形用户界面交互阶段鼠标、触摸屏、图形界面自然人机交互阶段语音、姿态、表情、视线基于现实的交互：VR&ARAR交互概述人机交互的发展历史命令行界面交互阶段打孔带、键盘图形用户界面交互阶段鼠标、触摸屏、图形界面自然人机交互阶段语音、姿态、表情、视线基于现实的交互：VR&AR增强现实是人机交互的新型界面AR交互概述人机交互的相关模式图形界面普适计算虚拟现实增强现实人机交互的模式比较，其中R代表现实世界、C代表计算机AR交互概述增强现实环境中交互的特点信息浏览界面3D用户界面实体交互界面自然交互界面信息浏览界面3D用户界面实体交互界面AR交互概述增强现实环境中交互的特点用户与虚拟物体的交互虚拟现实的交互技术虚拟物体与现实世界的交互动态标志跟踪虚拟物体在现实场景中运动虚拟物体与现实行人的避让交互一致性用户与虚拟物体的交互3D交互模式选择操作移动、旋转、放大、缩小导航用户与虚拟物体的交互虚拟现实的交互设备3D鼠标杖式指向设备6Dof操纵杆空间球数据手套手持式交互设备体感交互设备眼球跟踪手势跟踪肢体跟踪VR的交互设备增强现实中的交互虚拟现实的交互设备数据手套手持式交互设备体感交互设备增强现实中的交互虚拟现实的交互设备数据手套手持式交互设备体感交互设备增强现实中的交互虚拟现实的交互设备数据手套手持式交互设备体感交互设备HTCVive交互设备增强现实中的交互虚拟现实的交互设备数据手套手持式交互设备体感交互设备手势体感交互设备用户与虚拟物体的交互自然交互是指采用人类的肢体和语音等自然方式实现与计算机的信息互动。用户与虚拟物体的交互自然交互多模态交互系统语音姿势虚拟物体与现实环境的交互实体交互界面(TUI)利用物理对象作为与计算机交互的媒介H.Ishii小组研制的实体用户界面虚拟物体与现实环境的交互实体交互界面增强现实实体交互(TangibleAR，TAR）实体AR接口虚拟对象注册到物体对象上（隐喻）用户通过操作物理对象来与虚拟对象交互虚拟物体与现实环境的交互标志物驱动的交互平面标志(2D)物体标志(3D)已知其三维模型方法注册虚拟物体与标志（隐喻）感知标志的变化或动态位姿根据标志的变化实现反馈标志物驱动的交互平面标志虚拟物体与现实环境的交互虚拟物体与现实环境的交互标志物驱动的交互平面标志虚拟物体与现实环境的交互标志物驱动的交互物体标志虚拟物体与现实环境的交互虚拟物体在现实中的几何约束运动轨迹场景重建虚拟物体与现实环境的交互虚拟物体在现实中的几何约束运动轨迹场景重建虚拟物体与现实环境的交互虚拟物体在现实中的语义约束虚拟物体也受现实空间的语义环境的约束虚拟物体与现实环境的交互虚拟物体在现实中的语义约束虚拟人在现实中行走和避让虚拟物体在现实中的语义约束虚拟人在现实中行走和避让虚拟物体与现实环境的交互增强现实的开发平台国外ARToolKit：已经成为历史Vuforia：PC版/手机版MicrosoftMRTK：Windows版