虚拟现实课件_第4章33.ppt

虚拟现实技术 讲课老师 王洪群 whq lanzhou 第四章VR的计算体系结构 绘制流水线 基于PC的图形体系结构 基于工作站的体系结构 分布式VR体系结构 一 VR引擎 在VR中所处位置 对象的建模 几何结构 表面纹理 智能行为 以及硬度 惯性 表现塑性等物理建模 开发平台 编程软件包 例如 WorldToolKit和Java3D VR引擎 VR引擎 是任何VR系统的关键部分 它从输入设备中读取数据 访问与任务相关的数据库 执行任务要求的实时计算 从而实时更新虚拟世界的状态 并把结果反馈给输出显示设备 这个术语是一种抽象 从单个计算机到支持给定仿真的通过网络互联在一起的多个计算机 绘制流水线 绘制 一般是指把组成的虚拟世界展示出来 例如 把三维几何模型转变成二维场景 也包括其它模态 如触觉反馈 绘制流水线 指的是把绘制过程划分成几个阶段 并把它们指派给不同的硬件资源 图形绘制流水线 触觉绘制流水线 OpenGL图形绘制流水线的三个阶段 GE GeometryEngines RU RasterizerUnits 1 应用程序阶段 由CPU通过软件方法完成 目的 读取虚拟世界几何数据库和来自鼠标 跟踪球 跟踪器或传感手套的用户输入 响应用户的输入和任务 2 几何处理阶段 通过软件和硬件两种渠道来实现 模型变换 光照变换 场景投影 剪裁 映射 3 光栅化阶段 通常由硬件方法完成 目的 把几何处理阶段输出的顶点信息 例如颜色和纹理 转换成视频显示器需要的象素信息 通过应用软件所产生的图像被分成为两大类 即矢量图形和位图图像 光栅化是将一个图元转变为一个二维图像的过程 二维图像上每个点都包含了颜色 深度和纹理数据 将该点和相关信息叫做一个片元 fragment 确定最佳逼近图形的象素集合 并用指定的颜色和灰度设置象素的过程称为图形的扫描转换或光栅化 反走样 antialiasing 在光栅显示器上显示图形时 直线段或图形边界或多或少会呈锯齿状 原因是图形信号是连续的 而在光栅显示系统中 用来表示图形的却是一个个离散的象素 这种用离散量表示连续量引起的失真现象称之为走样 aliasing 用于减少或消除这种效果的技术称为反走样 antialiasing 光栅图形的走样现象除了阶梯状的边界外 还有图形细节失真 图形中的那些比象素更窄的细节变宽 狭小图形遗失等现象 常用的反走样方法主要有 提高分辨率 区域采样和加权区域采样 反走样处理后的图象质量效果对比 绘制流水线举例 HPVisualizefx卡流水线体系结构 浮点数据 整数数据 象素格式 理想流水线的输出与真实流水线输出关于场景复杂度的函数对比 理想流水线输出 HP9000流水线的输出 流水线瓶颈 CPU 限制 变换 限制 填充 限制 由于应用程序阶段出现的瓶颈 瓶颈出现在几何处理阶段 瓶颈出现在光栅化阶段 图形流水线的优化 当出现瓶颈后 需要采取某种措施减少重复处理过程中的瓶颈 这些措施就称为流水线优化 CPU 限制 1 高速CPU取代低速CPU 2 降低场景复杂度 例如减少多边形数目 采用低分辨率模型 3 优化仿真软件 如通过编程技巧 用低精度的变量 减少除法数目 13万个多边形 1000个多边形 图形流水线的优化 变换 限制 1 减少仿真中虚拟光源的数目 2 采用简单的明暗处理模式 Phone光照模型 反射光 表面向量 单点光源 环境光的光强度 物体表面对环境光的慢反射系数 观察者看到的波长为 的光强度 对象的慢反射颜色 大气衰减因子 波长为 的点光源强度 多点光源 对点光源的漫反射系数 镜面反射系数 镜面反射颜色 3 采用简单的表面多边形类型 图形流水线的优化 变换 限制 1 减少仿真中虚拟光源的数目 2 采用简单的明暗处理模式 Gouraud明暗处理模型 双线性光强插值是由Gouraud于1971年提出的 又被称为Gouraud明暗处理 它先计算物体表面多边形各顶点的光强 然后用双线性插值 求出多边形内部区域中各点的光强 它的基本算法描述如下 a 计算多边形顶点的平均法向 b 用Phong光照明模型计算顶点的平均光强 c 插值计算离散边上的各点光强 d 插值计算多边形内域中各点的光强 双线性光强插值的公式 3 采用简单的表面多边形类型 图形流水线的优化 面片明暗处理 人的腿骨模型 变换 限制 1 减少仿真中虚拟光源的数目 2 采用简单的明暗处理模式 面片明暗处理 Gouraud明暗处理 3 采用简单的表面多边形类型 图形流水线的优化 填充 限制 1 减少显示窗口的尺寸 2 减少显示窗口的分辨率 碰撞阶段 触觉绘制流水线 CPU1 CPUn 计算力 力平滑 力映射 触觉纹理 用户输入 触觉接口 力计算阶段 触觉计算阶段 主要是从数据库中加载三维对象的物理特性 包括表面柔性 光滑度 重量和表面温度等 执行碰撞检测 基于各种物理仿真模型计算触点压力 还有力平滑和力映射 绘制触觉纹理 主要是绘制仿真过程的接触反馈分量 二 基于PC的图形体系结构 PC机的VR引擎 VRTeachingLaboratory使用的基于PC的VR引擎 PC图形加速卡 IBMGT1000几何处理芯片 IBMRC1000光栅处理芯片 活动眼睛同步器 数字显示 模拟RGB视频 ATIFireGL2 最大16个光源 27M无纹理Gouraud明暗处理多边形 每秒410M个象素200M个纹理象素 1280 1024下100Hz的刷新率 ATIFireGL2 ElsaGloriaIII xBox PC图形加速卡 ATIFireGL2 ElsaGloriaIII xBox ElsaGloriaIII GPU geometryprocessorunit 31M无纹理Gouraud明暗处理多边形 每秒1000M个象素2000M个纹理象素 1280 1024下120Hz的刷新率 NVIDIA250MHz的GEForce2 PC图形加速卡 ATIFireGL2 ElsaGloriaIII xBox xBox游戏平台 可编程的流水线 125M纹理Gouraud明暗处理多边形 每秒1000M个象素 NVIDIA300MHz的GEForce3 UMA unifiedmemoryarchitechture 图形基准测试 非营利性组织标准性能评定公司 StandardPerformanceEvaluation Co 简称SPEC 开发了基准测试程序 viewperf Viewperf有标准的虚拟世界或应用程序组成 Viewperf6 1 2版提供了六个虚拟世界或应用程序viewset 测试 1 AdvancedVisualizer 动画应用程序 包含11个测试 2 DesignReview 三维计算机模型检查软件包 5个测试 3 DataExplore 可视化应用程序 10个测试 4 Lightscape 辐射度可视化应用程序 包含4个测试 5 MechanicalCAD MCAD设计应用程序 12测试 6 Pro Designer ProCDRS工业设计应用程序 包含10个测试 研究令人信服的基准测试程序也是一种研究方向 四 基于工作站的体系结构 世界主流工作站制造商 SunMicrosystems公司 Hewlett Packard公司 SiliconGraphics公司 SGI 工作站 多处理器体系结构 SunBlade1000工作站 UltraPortArchitecture 简称UPA Viewperf基准测试得分比PC图形卡低 SGIInfiniteReality体系结构 每秒可绘制860 000个Gouraud明暗处理纹理多边形 HIP HostInterfaceProcessor DMA 直接存储器存取方式 图象被分片并行绘制 显示列表高速缓存对InfiniteReality绘制能力的影响 速度提高6倍 四 分布式VR体系结构 分布式VR引擎 是指使用两个或多个绘制流水线的VR引擎 这些流水线可以执行图形或触觉计算 可以位于一台计算机中 也可以位于多台协作的计算机中 或者位于集成在一个仿真系统中的多台远程计算机中 多流水线的同步 需要同步的原因 若缺少垂直扫描方式上的同步 由于磁场干扰 导致图象闪烁 对于减少系统延时 建立一致的刷新率 从而减少仿真病 同步的方法 1 软件同步法 在并行流水线的应用程序阶段 让其都开始新的一帧 2 帧缓冲器交换同步 3 帧视频同步 多流水线的同步 软件 软件和帧缓冲器交换 软件 帧缓冲器和视频 多流水线的同步 Genlock和multiview同步 交换同步 Genlock可以重置PC机的内部视频电路 图形和触觉流水线的同步 联合定位绘制流水线 联合定位绘制流水线系统 是由一台带有多流水线图形加速卡的计算机 或者并排放置的计算机 每台指定一个不同的绘制流水线 或者是它们的任意组合 多流水线图形卡WildcatII5110 联合定位绘制流水线 双流水线体系结构 不需要genlock 同步锁相 和外部multiview电缆 图形卡中最快的 PC集群 使用一台PC机的问题 PC机的AGP插槽有限 wildcat占两个插槽 共享AGP总线时 总线阻塞 吞吐量变小 32台绘制服务器4台控制服务器 用于平铺视觉显示的ChromiumPC集群 控制服务器 对OpenGL命令进行8位编码分块划分 查表解码 PC集群 WireGL通信模式与广播通讯模式下帧刷新率与集群PC数目的关系比较 只有绘制服务器状态与网络缓冲区中的数据不同时 控制服务器才给其发送 四 分布式虚拟环境 分布式虚拟环境 是指它驻留在两台或两台以上的网络计算机上 这些计算机共享整个仿真的计算负荷 分布式虚拟环境使得远程计算机能够访问和参与仿真 两个或多个用户共享一个分布式VR 用户之间可以合作和协作的 合作的 collaborate 是指他们依次执行给定的仿真任务 在某一时刻只有一个用户与给定的虚拟对象交互 协作的 cooperate 是指他们同时与给定的虚拟对象交互 确定分布式虚拟环境的网络类型应该考虑的主要因素 1 用户的行为 2 交互的多模态 图形 语音和触觉 3 用户数目 4 出现通讯故障时仿真的抗毁性 5 能忍受的延