多点触控多点触摸光学式红外光设计方案

1、关于多点触控1前言多点触控（又称多重触控、多点感应、多重感应）是采用人机交互 技术与硬件设备共同实现的技术，能在没有传统输入设备（如：鼠标、 键盘等。）下进行计算机的人机交互操作。在人机交互的发展过程中，鼠标和键盘一直是最基本的输入设备， 而屏幕一直是计算机信息的最主要输出设备。现在，一种全新的交互 方式正在向我们走来白然用户界面，也就是俗称的触摸界面，在这种操作模式下，屏幕不仅作为输出设备，同时被作为输入设备，在屏幕上直接操作，从而操控计算机。多点触控是一样全新的人机互动方式，通过我们的十根手指代替 鼠标键盘等输入设备，采用全新的用户体验方式，手势识别，新奇的 体验感觉，高清直观的显示方式，

2、为用户提供简便直观的人机互动方 式和高效震撼的操作体验。随着iPhone等触控手机和平板电脑的日益火爆，人机互动领域 成为新时尚热点，多点触控必将引领一次新的人机交互变革。实体键盘鼠标等输入外设早晚有一天会被取代，现代的人们追求的是高效便 捷的信息服务，不可能走到哪里都要带着鼠标键盘， 便捷高效的多点 触控技术正是我们所需要的下一代人机交互方式。简单的来说就是解放我们的十个指头，能让我们离开办公室的椅 子，在任何地方，通过任何媒介进行人和机器装置高质量高效的沟通。i2国内外现状目前，手机等数码产品大多数采用电容屏或电阻屏， 不管是电容 屏还是电阻屏都共同存在一个缺点， 就是尺寸的限制，一般不能

3、超过 20寸，这也是制约多点触控技术发展的一个重要原因。在大尺寸多点触控技术方面，国外有一个组织，名字叫白然用户界面小组(Natural User Interttace Group),创建于2007年，他们以 互动媒体探索以及开源机器遥感技术为中心，开发受益于艺术、商业、教育等相关应用。希望能够为在搭建低成本、高分辨率、开源式的多 点触摸设备感兴趣的人提供一个多点触摸技术的信息资源中心。随着全国多点触控爱好者加入到这个项目的研究中，这个平台不断发展壮大，多点触摸技术带来了许多惊人的开创，国内外几乎所有多点触控公司的技术都是来源于这个开源平台。目前在国内，大屏多点触控技术刚刚起步，无论是硬件上还

4、是软 件上都处于初级阶段。由于技术方面的开源化和硬件实现方式相对简 单，很多公司都尝试着开始了多点设备的制作。但是大多数公司只提 供硬件设备，或者只提供一些简单的软件应用，如图片放大、缩小浏 览、在线地图等，由于技术和需求方面的原因，还没有形成多点触控 系统化的开发。触控软件的开发设计比硬件技术更为重要、更为复杂，不仅在软件功能上要创新，还要在软件的开发与多种硬件技术的融合处理上多 动脑筋。例如我们给触控屏接上相应的电路以及软件， 那么它就可以控制 整栋大楼的电路、灯光等设备。嵌入摄像头红外扫描等设备，就可以 实现人员识别，打卡，门禁，呼叫通话等功能，嵌入一个电视信号的 接受模块配合相应的点播

5、软件，就可以实现电视的点播功能。所以硬件实现多点触控仅仅只是一个开始，它有着无限的扩展空 间，软件和其他相关技术的开发决定着它的作用。 在未来它必将广泛 应用于生活、工作、商业、军事、科技、等各个领域。2研制必要性多点触控以它简单高效的人机交互方式，普遍应用于整个手机等 数码电子设备的领域，影响着人们的生活方式。智能化交互、多模态 （多通道）-多媒体交互、虚拟交互以及人机协同交互等以人为在中 心的人机交互技术是未来人机交互发展的方向。交互是人与机器和环境作用关系状况的一种描述。 界面是人与机 器和环境发生交互关系的具体表达形式。交互是实现信息传达的情境 刻画，而界面是实现交互的手段。在交互设计

6、子系统中，交互是内容和灵魂，界面是形式和肉体。然而在大的产品设计系统中，交互和界 面都只是解决人机关系的一种手段， 而不是最终目的，其最终目的是 解决和满足人的需求。在大规模的使用电脑以前，基本上所有的产品，都是有形的，看 一下，就知道该怎么使用。比如，看到方向盘，你知道这个东西应该 是可以转的，然后，你就尝试着转了一下方向盘， 结果正好和你想象 的一样，车开始往你希望的方向转向了，这是一个很白然，很直观的 过程。而白从有了电脑和软件以后， 软件工程师开发了很多软件，然 后拿给用户使用，结果，用户拿到软件之后， 完全不知所措，因为这个东西没有具体的形态，而且也无法想象它具体的运行方式和原理所以

7、我们要提出交互设计的概念提出来了， 目的就是为了让软件 的使用更加简单人性化。交互设计的目的就是要让软件或者产品正好 是用户所想的那样，用户操作了一个按钮，就真的得到了他想要的东 西，而且，软件的思维方式正好和他的思维方式一样，这样，就不会 出现这样那样莫名其妙的错误。目前，我们操作电脑，或者说与电脑进行沟通，还需要借助各种工具和设备，比如鼠标和键盘，而这些，并不是一定要存在的， 或者 说鼠标键盘的操作模式只是一个过渡期的暂时性替代产品。 随着时代 科技的发展，肯定要有一个更为人性化的人机交互方式来替代。3用途3.1展览展示依托最新多点触控科技，将大型多媒体、综合集成与特效演示等 技术，通过互

8、动、参与、感受、体验等手段，应用到展示中去，用于 展示公布各个单位的工作、生活、娱乐等信息。适用于各类图片文字、 产品、成果等信息的展览展示，如各个单位的媒体信息橱窗、公告栏、 动态板报等，也可用于公共场所的大型会展，广告牌或者应用于各单 位史馆建设等等。3.2新闻媒体为各个单位提供一个及时、全面、丰富的新闻资讯等信息。以电 视点播、网页、电子报纸等形式发布国际新闻、国内新闻、军事新闻、 科技新闻、体育新闻、社会新闻等等。通过丰富的新闻资讯及时了解 国内外重大新闻动向科技人文等信息。3.3综合型媒体信息发布系统可作为一个多媒体互动信息发布系统，下设于各单位大厅，为他 们提供一个及时、全面、丰富

9、的新闻资讯和政治、工作、文化、生活 娱乐等信息的互动展示平台以及全新的文化氛围，提供灵活高效的数字媒体信息服务。3.3.1在政治方面：用于宣传、展示党和国家的最新动态、领导讲话、 重大会议活动精神及图片视频信息。3.3.2在工作方面：展示工作状态和改进工作效率，如现阶段各个单 位的工作情况及活动信息、优秀单位及优秀个人、文章发表等等。3.3.3在文化生活方面：建立各个单位的图片档案库，单位最新活动 照片及时更新，整合出访类多媒体，形成全球多媒体资料库，地图数 据查询、各类杂志浏览、在线电视等等。3.5触控软件开发和现有软件升级我所很多科研成果都与计算机有着很大的关系，这些成果在电脑的显示器上无

10、论是操作还是演示都有着诸多不便，如果能进行改进和 升级，使其能够在显示更直观、操作更简便的多点触控环境下运行， 对于我所得科研成果和思路又是一大进步和拓展。另外还可以开发出新的多点触控软件。 如做一套可以多人同时作 业的军事标图及地理信息系统，解决我们现在所用的军事标图软件操 作复杂，无法做到战术意图的互动、不能多人同时标图等问题。4特点4.1简单易用性多点触控操作打破以往鼠标键盘输入方式，在屏幕用户界面上，使用便捷高效的UI设计，界面简洁、操作简单，使用者仅需用手指 所需要的内容即完成交互过程，论是首长参观还是不懂电脑的人员使用，都不会产生面对键盘时的困惑、 恐惧心理，也不会象鼠标或轨迹 球

11、一样难以控制。应用触摸屏的计算机系统一般都具有良好且友善的 交互界面，用户在使用之前不需要经过培训即可操作白如。4.2灵活性触摸屏不像利用数字接口的按钮或键盘一样，它完全由软件进行各项设置，通过强大的手势识别功能，然后即可实现交互输入。凭借系统提供的菜单，用户可以输入并获得大量的信息。4.3经济隹由于基于光学的多点触控屏，在制作材料上相对简单，不需要另开模生产配件，大部分配件都可以在市场上购买到， 所以如果白己制 作的话成本要会比较低。5技术特点多点触控的硬件实现方式有很多种 ，不同的组成实现方式有着不同的特点，举例比如说，现在的iphone手机用的是电容屏，它的触控方 式是用手指肚来操作，对

12、压力（坚硬的物体）无法识别，诺基亚先前的手 机采用的是电阻屏，它的触控方式是用指甲或者坚硬的物体来触控 ， 对手指肚肉部分无法识别，和iphone正好相反。另外还有一些触控技16术如声波器、动作捕捉器、定位器、压力感应条等。不同的技术实现方式，有着不同的应用途径和优缺点，如iphone用的电容屏和诺基亚先前用的电阻屏仅限于小尺寸使用，如手机， mp3,导航仪等，如果尺寸做大的话会产生点的漂移、无法识别触控 点等。目前支持大尺寸和多点触控的硬件搭建方案主要分以下五种受抑全内反射多点触摸技术（FTIR）背面散射光多点触摸技术（Rear-DI ）激光平面多点触摸技术（LLP）发光二极管平面多点触摸技

13、术（LED-LP散射平面多点触摸技术（DSI）基于光学原理的多点触摸技术这五项技术都是基于光学原理的多点触摸技术， 基于光学原理的 多点触摸技术搭建的设备体积相对较大， 但它的可拓展性较强、成本 较低以及容易搭建。目前受抑全内反射多点触摸技术（ FTIR和激光 平面多点触摸技术（LLP应用最为广泛，而且技术相对成熟稳定。每个基于光学原理的多点触摸技术都包含光学感应器（通常为摄 像头或摄像机）、红外光源以及通过投影仪或者显示面板显示的屏幕。 这个五种搭建方案都包含这三种设备，因为搭建方法的不同所以各有 各的优缺点图（5-1）。受抑全内反射多 点触摸技术（FTIR）背面散射光多点触换技术（Rear

14、-DI ）激光半向多点触 换技术（LLP）发光二极管平面多点触摸技术（LED-LP散射半向多点触摸 技术（DSI）优点不需要封闭空间 触点具有很高对比 度允许各种点的压 感具有兼容层，可 以读取到笔尖那么 小的饿点不需要兼谷层，仅需要投影幕或漫反射幕能够用玻璃或者其他透明材料不需要焊接发光二极管（LED）能够之别物体或 者其他标示不需要兼容层，仅需要投影幕或漫反射幕能够用玻璃或者其他透明材料不需要焊接发光二极管（LED）不需要封闭空间容易搭建不需要兼容 层，仅需要投影 幕或漫反射幕 能够用玻璃或 者其他透明材料 相对便宜 不需要封闭空 间不需要LED框不需要兼谷层，仅需 要投影幕或漫反射幕 能

15、够轻易地从机器 技术转换过来能够识别物体或标 示具有压感没有局部区域过亮缺点需要焊接发光二 极管（LE。需要兼谷层（硅 胶层），不能用玻璃 作为显示屏无法识别物体的 标刀、难以取得一个号 的照明方式触点的对比度低（软件难以识别）具有较多无法识别的触点需要封闭空间没有真正的压感 不能够识别物体 或标小如果使用一到两 个激光头，会容易 引起触点阻挡的情 况需要焊接发光二极管（LED）不能够识别物 体或标小-不能够用 LED 带导光板价格高于FTIR和LLP相比，触点对比度低（软件 难以识别）具有较多无法识别的触点尺寸因为其柔软度 受到限制图（5-1）6基于激光平面多点触摸技术LLP）的系统组成及原

16、理6.1多点触控互动信息系统组成有三个部分，硬件部分、底层软件部 分、和用户端软件部分 组成。6.1.1硬件部分是整套系统的物理组成部分，是通过人的肢体（手, 手指等）直接操作的数字化界面。主要的作用是感知到有物体接触到 该多点触摸设备。6.1.2底层软件部分的作用是触点追踪。他的作用是获取摄影机拍摄到的包含特定对象的一系列视频帧，并进彳分析运算，区别出每个触点，然后转换为电相关的信息（位置，ID,区域等），当一个触点被发现，消失或者移动的时候，这些触点相关的信息（位置，ID,区域等）都会以事件的形式发送出去，开发者就可以利用这些信息区监 听这些触点开发出应用程序。6.1.3用户端应用软件部分

17、主要完成接收软件底层部分发来的相关触点信息，然后开发者就可以利用这些信息开发出相应的应用程序。的红外光线铺满整个屏幕从而形成一个均匀的红外面,6.2系统物理组成大功率一字激光发射器背投式透明触摸屏幕红外线摄影机相应波段的红外带通滤镜短焦距高清投影仪短焦镜头电源电脑反光镜6.3工作流程首先在触摸屏的四个角分别放置4-6个1块4个4个1台1个1个1台1块4个激光发射器，使其发射出来当手指触摸屏幕的时候，光线便被反射，从而被红外线摄影机可以扑捉到（图1-1）,手指的尖部会作为一个红外点显示出来，然后通过底层软件对红外点的定位（图1-2）,便可实现多点触控产吉瞄仪扒像机图1-1图1-2th in人时底

18、层软件红外摄像机系统工作流程图6.4工作原理激光平面多点触摸技术（LLR是利用光学的原理实现的多点触摸， 首先需要一块背投式漫反射屏幕，这个屏幕有几个特点，一是，透光率高且背投可清晰成像，二是，最大程度的过滤背景，意思就是，当 我们把五个手指放到屏幕上后，下面摄像机要得到的图像是五个手指 指头肚部分的图像，而其他的包扩手臂、人、背景等等信息都要最大 程度的过滤掉，因为我们要得到的仅仅是手指和屏幕接触点的图像， 所以其他的图像都是没有用途的。我们需要4个一字型扇面激光发射器，因为一个激光发射器所发射的光束不能铺满整个屏幕，这样的话就会产生盲区（图2-1），还有一点就是如果使用一个摄像头的话，距离

19、发射器进的那个触摸点会挡 住光线的发射，造成另一个触摸点无法识别（图 2-2）。激笠17R图2-1第.第二酷性盘图2-2激光发射的光束人肉眼是看不到的，但是红外线摄影机可以扑捉到。因为激光光束平铺在玻璃上方，当有物体接触到屏幕时，光线会被发射，从而被下面的红外摄像机扑捉到（图2-3）。殿宛由射瞿图2-3红外摄像机所拍摄到的图像序列帧，交给底层软件来处理底层软件部分的作用是触点追踪，获取摄影机拍摄到的包含特定对象的一系列视频帧，并进行分析运算 ，区别出每个触点，然后转换 为电相关的信息（位置，ID,区域等），当一个触点被发现、消失或 者移动的时候，这些触点相关的信息（位置，ID,区域等）都会以事 件的形式发送出去，然后开发者就可以利用这些信息开发出相应的应用程序供客户实7激光平面多点触摸技术（LLP）技术指标7 .1整体指标屏幕尺寸：32", 42", 46", 52", 65", 100", 150", 200"（可按需求进行