(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf_第1页
(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf_第2页
(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf_第3页
(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf_第4页
(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf_第5页
已阅读5页,还剩55页未读, 继续免费阅读

(物理电子学专业论文)角膜地形测量中眼球定位跟踪若干技术的研究.pdf.pdf 免费下载

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

硕 卜 论文角膜地形测童中眼球定位跟踪若十技术的研究 ab s t y a c t t h e h um ane y e is th e im p o rt ant s e n s e o r g an. i n m any k in d s o f t h e in s p e c t i n g 一 s y s t e m fo r e y e s , s u c h a s c o m p u t e r o p to m e try, tr e at m e n t o f m y o p ia t hr o u g h la s e r app ar at u s , s t atus id e nt ify in g s y s t e mb yin fo rmat io no f t h e ir is , c o m e a l to p o g r aph e r and s o o n , p e o p le c an n o t e n s u r e th e ir h e ads and e y e s abs o lut e r e s t , whic h re s u lt in b adac c ur a c y . t h e re fo re , t h e o c ul ar p o s it io nm e as ur eme nt andtr ac k in gs y s t e m isim p o rt ant t oguar a n t e eth e p e 而rmanc e o f s u c h app a r at u s m e ni io n e d a b o v e . the c la s s ifi c at io n o f e y e m o v e m e n t s i s in tr o d u c e d , and th e n b y c o m p ar in g th e e x is t in g m e a s ur in g m e t h o d s o f t h e m o v e m e n t a n dt h e tr ac k in gs y s t e m s , t h e w a yin e y e tr a c k in g whic h is b as e d o n v id e o im age p r o c e s s in g is p r e s e n t e d . f ir s t , tw o c r o s s 一 c u t lin e arc c dar e 1o c at e d to g e t th e im a g e o f th e p upil ar e a , t h e n th e t lv9 9 0 a c t a s a n a lo g f r o n t e n d t o c o n v e rtana lo gs i g n a l t od ig it a l s ig n a l . a t t h es ame t im e , t h eh ig h 一 s p e e dm c u ( mic r o c o ntro lle r u n it ) andc p l d( c o m p le xp r o g r a m m a b le l o g ic d e v ic e ) a c c o m p lis h th e d at a p r o c e s s in gandc o nt r o lm e n t . t hr o u g hs e tt in gth ec o u ni e r stom ar kt h eb o und a r yand c o m p ar in g th e c e nt r e o f t h e p upi l with th e o p t ic axi s , t h e mc ur e c t ifyt h e d e v iat io nb y d r iv in gth es te p 一 m o to r s t oe n s u r et h ep u p i l b eina l ig n m e n t w it hth eo p t icaxis , th u s ac c o m p li s h e y e 一 tr ac k in g . k e y w o r d : e y e tr a c k in g , l in e a r c c d , c p l d , s te p m o to r 1 1 1 声明 本学位论文是我在导师的指导下 取得的研究成果,尽我所知,在本 学位论文中, 除了加以 标注和致谢的部分外, 不包含其他人己经发表或 公布过的研究成果,也不包含我为获得任何教育机构的学位或学历而使 用过的材料。与我一同工作的同事对本学 位论文做出的贡献均已在论文 中作了明确的说明。 研 究 生 签 名 : 诫飞 翻 7 年7 月夕 日 学位论文使用授权声明 南京理工大学有权保存本学位论文的电 子和纸质文档, 可以 借阅或 上网公布本学位论文的部分或全部内容,可以向 有关部门或机构送交并 授权其保存、 借阅或上网公布本学位论文的 部分或全部内 容。对于保密 论文, 按保密的有关规定和程序处理。 研究生签名: 年月日 硕_ 卜 论文角胶地形侧里中服球定位跟踪若十技术的研究 1绪论 1.1 课题研究背景 国 外 眼动测量技术主要可分为以 下几种川 : ( ”利用视网 膜与前 部的角 膜之间电 势差测t, (2) 利用电磁感应原理测量, ( 3) 利用光学技术实现测量. 其中利用光学 技术的眼动测量主要是利用一个或多个眼球表面不同区域对光的反射特征, 这些区域 包括:虹膜和巩膜边缘、 瞳孔、 下眼皮、角膜等等。利用虹膜和巩膜边缘的反射特征 检测眼动, 早在1 9 50年就由美国应用科学实验室 a s l ) 提出并制作了模型izj ,该系 统测量眼 球转动准确度为1 度, 检测范围 25度, 带宽1 50hz: 德国的d idierb oi s 教授采 用瞳 孔 跟 踪的方法 研制出 5 弧 度渺处理 速度、 4 k l l z 采 样速率的眼动侧量装置 川 ; 角膜 反 射跟踪 法由日 本的 n a c 机构实 现 3) , 该系统的数 据刷新频率为 3 0 e 比 : 多 伦多 大学的 f 介 姆 h er , ei zenman和h allet 利用角膜反射原理研制的眼动测量装置可检测30度的视角, 数据刷新率为i k h zf 4 】 。 眼动测量的 应用场合主要有:以眼球为 对象的监测、 医 疗或 矫正仪器: 视觉感知和心理学辅助测试; 虹膜信息身份识别系统中的瞳孔定位和虹膜 定位: 人眼视觉鼠 标系统的眼动信息测量等。 虹膜定位是近几年比较热门的技术, 主 要是要先分离出虹膜内边缘和外边缘, 因此其数字图像处理的算法比较复杂, 算法复 杂带来的结果必然是系统的实时性下降。 国内专门研究眼动测量的研究机构还不是很多, 从事角膜地形测量的研究机构就 更少了。其中南京航空航天大学与苏州六六视觉科技股份有限公司合作研制开发的 we a 一 1 000 型主观式人眼像差仪中,采用视频采集卡通过p c机中v c编程对图像进 行处 理从而通过串口 控 制电 机补偿偏差1,1 , 另 外台 湾逢甲 大学自 动控制工 程研究所也 有相关方面的报道,但他们主要以视觉鼠标为方向。 应用于角膜地形干涉测量系统中的眼位跟踪技术要具有处理简单、响应快等特 点. 干涉测量方法对人体脉动、 颤动、 振动和眼球转动等因素比较敏感, 此时, 反映 角膜地形的干涉图采集比较困难。 能否在有头部支排机构的前提下。 通过研究瞳孔的 快速跟踪技术, 为准确地采集角膜地形干涉图建立技术基础?为了达到这一目的, 本 课题以国家自 然科学基金项目( 60678 048 邝 0510 01) 中为建立人眼模型获取角膜测试 数据为研究背景,开展了主要关键技术的研究工作。 硕士论文 角膜地形侧世中眼球定位跟综若干技术的研究 l z本文所做的主要工作 南京理工大学光干涉测试技术实验室已建立了角膜地形干涉图的 测试装置161 , 图 1 . 1 所示。 图了 1 径向剪切干涉系统示意图 在图1 . 1 中, 由于被测者眼球的不自 觉动作或头部的不自 觉抖动常常会使光路中 心偏离角膜中心从而很难捕捉到较理想的干涉图,本文从介绍眼球动作的分类出发, 通过比 较当前的眼动测量方法及眼球自 动定位跟踪系统为基础, 以 人眼角膜地形图的 测量装置中对人眼中心进行准确的定位并自 动跟踪为目的, 研究了一种实时对眼球进 行自 动定位跟踪的技术,该技术用正交的两个线阵c c d实时捕捉眼球的黑白图像, 在输出信号中用硬件实现图像信号二值化并提取出 瞳孔图像,通过单片机和 c p l d ( c o m p l exp ro 如 a b l e logi c d evice, 复杂可编程逻辑器件) 对瞳孔图像进行处理, 包括计算瞳孔中心与光路中 心的偏差, 控制步进电 机调整光路中心位置使其与瞳孔中 心重合等。 本技术的特点是主要单元以 硬件为主, 各模块之间以高速总线进行通信以保证图 像处理和跟踪的实时性:由于不需p c机参与处理,所以本设计的体积大大减小,可 做成手提或便携式设备, 成本也大大降低; 另外, 通过设置通用的接口 和在系统可编 程 (l s p) 手段,可方便作为其他与图像处理和自 动定位相关的信号处理系统,比如 人眼虹膜信息的身份识别系统中的眼动跟踪以 及人眼视觉鼠 标系统等, 对软件做修改 后还可以作为智能机器人的视 觉传感部分。 同时, 本技术是以 微控制器为核心自 行开 发的 硬件电路板,可方便地嵌入其它系统中,因此.具有较广的应用范围. 硕士论文角膜地形侧里中服球定位跟踪若干技术的研究 2眼动测量方法介绍 2. 1眼动机制和眼动类型 眼动的 类型有以 下几种【伙 (l ) 共扼眼动: 在眼动期间保持右眼和左眼的角度关系.例如,两眼同时向左 看、 然后同时向右看, 或向上、向下看, 或左右、 上下运动的结合, 都属于共扼眼动。 (2 ) 转向 眼动:是使两眼之间的角 度变化的 眼动。 例如, 将食指伸在鼻子前 面. 将食指慢慢移近或移远脸, 而眼睛一直注视着指尖。 当移动手指接近脸时两眼将会聚, 当手指远离脸时,双眼将逐渐分离。 (3 ) 扫视眼动:是指视线非常快地从一个注视点跳跃到另一个注视点。 扫视的 速 度可以 达到10 00度砂。 要产生扫视, 取两个有一定距离的物体, 先看第一个然后再 看另一个。 因为扫视非常快, 所以 可能很难区分个别的扫视眼动。 (4 ) 平滑追踪眼动:眼睛平滑地移动而不是跳跃式的. 这类眼动是当视线跟随一 个缓慢移动的对象时产生的。 例如, 把食指伸出, 手臂伸直, 然后慢慢左右移动手嘴, 眼睛始终注视你的指尖,便形成平滑跟踪. 除了以 上几种眼动外还有几种比 较小的移动:眼球震颤 ( nys t a g m us ) ,漂移 ( drifts) , 非随意 扫视 ( m i c ro sacc ad e s ) . 眼动的机理和视觉信号的处理、 感知理论是一门非常复杂、 深奥的学科。以上所 述只是常识性的介绍. 在实验室已建立好的角膜地形测量系统中, 将配装眼睛静止目 标注视系统和头部支撑装置。 在此基础上, 本文针对眼球的微小移动或震颇, 研究眼 球定位跟踪的若干技术。 2 .2眼动信号的测t 常 用的 眼 动监 控器 有4 种类型:角 膜缘 跟踪 器、 视频跟踪器、 普肯(p u r k i nj e)反 射跟踪器和巩膜线圈跟踪器。一般说来,角膜缘跟踪器较便宜, 且易于使用,但是, 它仅仅能一次测量一个轴向的眼动, 不能做凝视监控器。 为了精确地测定凝视点, 最 常用的方法是视频跟踪, 即用一个微型视频摄像机将瞳孔或虹膜成像, 并用一个简单 的图像处理程序提取出实时凝视点、 瞳孔直径, 在某些先进的系统中, 还包括测量眼 的 转矩, 这种 测量 技 术的缺点 是取样速率局限 于 视频帧速率( 典型的为50h z 或60hz) , 当需要观察扫视的 潜伏期时, 这种设备则不适用了。 巩膜线圈跟踪系统是将一个小的 铜线圈安放在一个隐形眼镜片上, 它允许测量凝视点和眼的转矩, 能给出较高的空间 和时间分辨率。 然而,巩膜线圈是 “ 侵入”型的,需要被试者佩戴约 30分钟,往往 造成被试者的不舒适感。 硕一 t: 论文角腆地形洲盈中瞪球定位跟踪若+技术的研究 幼 当 前眼动测t方法及设备介绍 2 3 )脑电图法 脑电图法利用眼动和脑电波变化之间的联系,从脑电波的变化间接地分析眼动, , 缺点是无法精确建立眼动和脑电 波之间的联系川 . 2 3 .2眼电图 法扭o g - e l 。 比 门。 tulog r a p h y ) 眼球在正常情况下由于视网 膜代谢水平高, 因此眼球后部的视网膜与前部的角膜 之间存在着一个数十毫伏的静止电压, 角膜区为正, 视网膜为负。当眼球转动时, 眼 球周围的电势也随之发生变化: 将两对抓化银皮肤表面电极分别置于眼睛左右、 上下 两侧时,就能引出眼球变化方向的弱电信号,经放大后可得到眼球运动的位置信号。 该方法优点是价格低廉,带宽高,测量速度快, 而且闭眼时也可测里, 另外,眼电图 法也可用来测量眼球运动速度和加速度川 : 缺点是误差大, 有伪迹信号, 且对人干扰 大。 虽然采用现代计算机技术使采样速率提高以改善线性度, 但电极本身的电平漂移 还是难以 解决,敏感度和输入输出曲线范围在不同的时taj段重复性不好。 2 . 3 3接 触镜法( c o . t a c t l e n s ) 基本原理是将一块反射镜固定在角膜或巩膜上, 眼球运动时将固定光束反射到不 同方向, 从而获得眼动信号。 该方法优点是简单易行,精度高: 缺点是不符合人的视 觉习惯,使眼球感到不舒服,对人干扰大。 2. 3.4 电 磁线圈 法侧e c t r o m a ,峨。 c o 11) 受试者头部用电 子方法产生水 平及垂直方向 两种不同频率的交变磁场, 把一个很 细的线圈 用接触镜固定在角膜边缘, 则线圈在跟随眼睛运动时, 根据其输出信号和相 位便精确地测出眼睛的水平和垂直运动。 该方法的优点是精度高, 速度快, 带宽可达 到2 0()h z , 引入另一个线圈还可以 侧量眼球运动的扭矩; 缺点是接触眼球引起受试者 不适,而且外部磁场会对测量产生干扰。应用此种方法的仪器己经商用化,荷兰的 s k al ar仪 器公司和华盛顿的c . n . c技术公司都有成熟产品川 。 以 上介绍的是非光学手段的眼动测量方法, 接下来介绍的测量原理都利用了眼球 表面不同 区域的一个或多个特征、 或是不同区域对光的反射不同 这些特性。 使用最多 的特征区 域包括: 虹膜和巩膜的 边界、 瞳孔、 下眼睑等等, 其中主要技术有: 角膜反 射法、 红外眼电图法和利用瞳孔特征的视频图像法等。 由于视频图像法不仅可以检测 眼动信号 还能获取眼球部分完整的图像信息, 不仅便于观察而且可以 用于虹膜识别等 其它应用。 近几年来数字图 像处理技术发展很快, 计算机的运行速度也越来越快, 因 此,视频图像法在眼动测量方面的优势越来越明显。 硕士论文角腆地形侧二中服球定位跟踪若干技术的研究 z j . 5角膜反射法(co rne a l r e fl e ct i o . ) 利用角膜表面形成的虚像随眼球旋转而移动的特性, 实时检测出图像的位置, 经 信号处理可得到眼动信号,但易受眼动中慢漂移分量的影响. 2 沃红外眼电图o r o g ) 1 也叫红外光电 反射法( in 加r edo cufog ra p h y , i r 0 0 ) , 在这种方法中, 一或两个 小的红外光源和一个反射光检测器一起被安置在接近眼睛的一个框架上。 光源的安放 位 置 要 使 其能 照 射 在 虹 膜 和 巩 膜 ( 眼白 ) 的 边 界 处 isj 。 这 种方 法 的 工 作原 理 是 基 于 虹 膜 和巩膜有不同的反射特性。 当 眼睛移向 一边时, 眼睛的一边比另一边有较少的红外光 线被反射回检测器。 对反射信号进行校准后, 利用这个差分信号就能无接触地测出眼 球运动的方向、 幅度等。该方法的优势是成本较低, 其主要缺点是误差大,当在水平 方向达到较好精确度时, 在垂直方向的精确度就会较差。另外, 光源和检侧器的安置 和 调 整也比 较困 难。 加 拿大e y e c an公 司 的vi si o 血 k e y 系统、 美国m i crogu i de公司的 mic r o guid e 系统都是荃于i rog 方法1火 2 3.7视频图像法wo g) 多数厂家的眼动测 试设备 采用v o g即d e o 一 o c ul o g r a p h y ) 方法。该方法一般用红 外光源对眼睛照明,用对红外光敏感的c c d摄像机摄制眼睛的图像,然后由计算机 ( 有时用专用的硬件) 对图 像扫描, 从而确定瞳孔的 边界。瞳孔边界的确定可采用问值 技术( 选取在虹膜与瞳孔交界处的光强差别大的若干点,然后根据这些点 拟合出一个 圆圈) ,或采用较复杂的模式识别技术.更复杂的系统还能据微小的头动导致的误差 做自 适应调整, 并能给出瞳孔的直径。 该方法的优点是有较高的空间分辨率, 但其时 间分辨率较低, 原因是处理每一幅图像所需要的时间较长. 德国a n 1 tec h 公司研制的 e t 4 系统采用c c d线扫描相机,可以测定眼的水平和垂直位置,以 及瞳孔直径。系 统软件负责数据记录,实验控制,扫视分析,平滑跟踪分析和凝视分析。德国 女n 劝mo t o ri c 仪器公司生产的3 种眼动测试设备有s mi z dv o g , s mi 3 dv o g和s mi 渐ew。 其中z dv 0 g主 要用 于前庭功能 测试151 。 包括自 主眼震, 平滑跟踪, 扫视测 试, 并配有转椅等设备。 通过安装在一个轻型面罩上的微型视频相机记录病人的眼动, 眼的视频图像由 一个基于p c的系统进行分析, 给出眼定量的水平和垂直位置, 眼的 图 像、眼动轨迹以 及分析图表一起实时显示在计算机屏幕上。 s mi 3 dv o g系统提供更强的功能,除测试各种眼动信号外还可测试眼的转矩. 可用于以下类型科学研究: 眼科学和动眼机制失常研究,生理学、 定向系统、 认知系 统研究,还可应用于特殊环境下,例如宇宙飞行等。 随着各种复杂的视觉介质和媒体的出现, 需要对人的视觉感知理论有更深入的了 硕士论文 角膜地形侧t中眼球定位跟踪若干技术的研究 解. 使用s mi i 巧e w系统可以方便地知道人们在 “ 看什么” ,比如,将一幅场景图像 显示在屏幕上,使用s ml i 劝ew 可以记 录被试者观察这一图像过程中凝视点的位置、 时间长短、眼动的轨迹等,并给出分析. 2 .4各种测量方法的比 较与选择 在各种测量方法中视频图像法操作方便, 对人无干扰, 而且由于图像处理技术在 硬件和软件上的不断完善, 各种新方法不断涌现, 硬件的处理速度和软件的算法也是 今非昔比,因此视频图像法是目 前较为理想的一种眼动测量方法。 2. 5本章小结 当 前的 各种眼球运动检测机制各有特点, 各种测量方法也是随着机械结构、 传感 器制造工艺和芯片集成度的进步而层出不穷。 本文采用的眼动测量及跟踪技术是在视 频图像法的基础上,利用线阵c c d图像信息传输速度快、分辨率高、信号处理方便 等优点,把瞳孔区域成像于线阵c c d上,通过后续信号处理电路来判断眼球位置并 进行跟踪。 硕_ 1 : 论文角腆地形侧盆中服球定位探踪若十技术的研究 3眼球自 动定位技术的原理与总体方案 3. 1视频图像处理方法比较 目 前与眼球相关的信号测量所采用的方法基本以视频图像法为主, 又山于瞳孔的 特征最为明显, 所以视频图像法又以采集瞳孔及周围区域为主。 视频图像法按处理信 号的特点, 又可分为数字信号和模拟信号的图像处理方法。 模拟信号处理图像信息速 度快, 结构简单, 但是通用性差, 调试也不方便: 数字信号处理图 像信息首先是通过 前端处理 ( 通常是 习d转换) ,把像素对应的模拟信号数字化,后续处理可以通过 d s p , 或者直接由微型计算机处理, 数字信号的各种算法要比模拟方法丰富的多,下 面分别介绍基于以上两种方法的瞳孔定位技术。 3. l i荃于数字图像处理的瞳孔定位 当前国内外与数字图像处理技术的瞳孔定位相关的研究和报道大多是虹膜定位 与身份识别技术, 这也是当前 研究的热门, 而虹膜定位与身份识别技术和本文的设计 有很多不同之处, 前者首先要定位虹膜的内外边界, 而且还要对虹膜内的图像纹理结 构进行处理和匹配, 这必然要用到各种复杂的算法, 例如当前有报道的虹膜内外边界 定位方法可大致分为以 下几类191 【 10 : 1)经典的d au gman定位法, 该方法由 英国 剑桥大学的d aug ll l a n 教授提出。 在 拍摄获取的虹膜图像中, 灰度分布存在着一定的差异, 一般而言虹膜比瞳孔亮, 巩膜 又比 虹膜 亮。同时虹膜的形状 类似圆 环形, d a u g 旧 an利用圆形检测匹 配器的方法分 割虹膜, 查找所对应的圆心坐标和半径三个参数, 以此来确定瞳孔和虹膜的边缘以及 虹膜与巩膜的边缘。国内也有一些学者对算法进行了优化。 d a u g m an 定 位法的 优点是定 位比 较准确, 但依赖于图 像亮度的 梯度, 因 此只有 在被处理的图像照度比较均匀而且没有大面积的亮度反常区域时有效。 2 ) h o u gh 变换定位法, 具体过程是先通过边缘检测的方法得到瞳孔和虹膜以 及 虹膜 和巩 膜的 边缘, 再 利用虹 膜是圆 环状的 特点, 应用h ough变换得到圆 环的内 外 半 径, 从 而 分 割出 虹 膜。 h o ugh 变 换 回 定 位的 方 程为 : (x 一2 + (y-b) 2 护, 利 用 它 求 得 瞳孔和虹膜的半径,以及瞳孔的圆心。 h 。 哪 少变换的 优点 主要在于: 它对于图 像中 的嗓声点 不敏感, 可以 有效地消除噪声的影响。 空间的量化间隔制约。 缺点在于: 计算量大,占用内存大, 利用它得到的效果 提取的参数受参数 3 ) 几何特征定位法,几何特征定位法是利用虹膜边缘图像的几何特征以及圆相 交弦的 性质, 进行虹膜定位的方法, 具体过程是: 首先根据虹膜图 像的整体灰度分布 信息, 利用边缘检测算子提取虹膜的内边缘, 然后利用圆的相交弦性质提取虹膜的中 硕十论文角膜地形侧公中眼球定位跟踪若干技术的研究 心, 最后 利用h o u gh变换提取虹膜外半 径。 该方法综合了hou gh变换的定 位方 法, 提高了虹膜的定位速度。 但是定 位速度受图 像质量的影响很大,当图像质量不高时, 算法性能急剧下降。 4) 主动轮廓线定位法,主动轮廓线(s n a k e ) 是一项复杂的轮廓提取及图像解释技 术, 它通过不断地极小化自 身的能量函数来提取物体的边界。 定位的具体过程为: 先 用灰度检测的方法检测出瞳孔内一点作瞳孔的伪圆心, 然后以该点为中心, 在其周围 取几个点作为初始的5 o ake ,按照5 班 止 e 的运行机制不断进化,找到虹膜的内边界: 接着计算进化后的5 水 e 形心和sna k e 上的控制点,定位出虹膜内边界位贵; 最后 按照d a u 邵 几 功方法定 位外 边界。 其中 虹 膜内 边界的初定 位是整个算法中 最为关 键的 一步。 主 动轮廓线定 位法相比d au gman 定 位法的 优势 是: 不 用边缘检测和二 值化, 对瞳孔初始的圆心要求不高,算法的鲁棒性更强。 当然在本文论述的瞳孔定位技术只要求定位虹膜的内边缘瞳孔边缘, 并且只 要求定位瞳孔圆心不要求计算半径, 因此如果采用以上提到的算法在运算执行时间上 要相对快一些, 但从上面论述的几种方法来看, 不管是要用复杂的算子实现还是用边 缘三点定圆再计算圆心, 在实现的速度上都不是很理想, 特别是用在还要计算二维偏 差并驱动步进电机的实时跟踪系统中。 总结以上几种方法包括在瞳孔中心粗定位中提 到的精度不高的灰度映射法, 另外还有一种先把图像二值化分离出瞳孔( 直方图自 适 应选取闽值) , 然后用梯度法求出瞳孔的边缘三点,由三点确定圆心, 都不是针对专 用于瞳孔圆心定位的, 所以 在速度和计算量上对本文提到的瞳孔定位技术来讲都不是 最好设计。以上提到的数字图像处理技术的瞳孔定位系统硬件组成主要有红外黑白 c c d 、高速a i d( s a a 7 l l 系列或t v p 5 1 5 0 ) 、d s p 、s d r a m、f p g a等或者直接用 图像采集卡配p c机. 3. l 2基于面阵c c d 模拟视频信号处理的瞳孔定位 为了 进一步提高 系统信号处理和跟踪的速度,考虑直接从c c d输出的模拟信号 中提取有用的瞳孔信息达到定位的目 的。 首先分析c c d的 输出 信号, 全电视信号可 把信号分为图像信号、 复合同步信号、复合消隐信号等, 其中场消隐中还有前均衡、 后均衡、 开槽信号。 除图 像信号为模拟信号外其他信号均为有规律的脉冲信号, 这些 脉冲信号都可以通过专用芯片 ( 通常l m1 8 8 1) 从全电视信号中提取出来,另外专用 于视频信号解码的刃d芯片, 如s a a 711 系列和t v p s 巧0 等都有视频信号分离功能。 在正极性的c c d信号中黑色图像以低电平表示,因此,在每两行的同步头之间的视 频模拟信号中, 如果 扫描到黑色瞳孔则电 平要比其它像素点低, 越靠近瞳孔中心低电 平脉冲的持续时间越长, 通过对这个电平的持续时间进行计数并定位起始和终止点就 可以定位瞳孔中心的位置; 眼睫毛等虽然也能够产生向下的脉冲, 但和瞳孔产生的脉 硕士论文 角腆地形侧t中眼球定位跟踪若干技术的研究 冲相比 持续时间要短的多, 这样就可以 用模拟或数字电路的处理手段( 例如设定一个 延时闽值) ,把扫描到的眼睫毛或其他干扰脉冲去除。另外,可以在穿过瞳孔的扫描 行中, 取多行来计算瞳孔的圆心, 或随机取对应的两行, 计算若干次取平均,以此来 提高计算圆心的准确性。 时书锋等在西安电子科技大学学报上提出的眼动测量系统及 其芯片设计中,就是根据瞳孔图像的动态特点, 在同一场内利用同一门限,对瞳孔信 号 进 行两次 相关测量( 前 沿测量和后沿测量) , 得到 对瞳孔中 心的准确定 位111 1 。 以 上提 到的系统,硬件组成主要有红外黑白 c c d 、 f p g a 、同步分离器件 ( l m1 8 81 等) 、 高速比 较器l m3 61等。 3 .2系统的总体方案设计 据前述可知,提取瞳孔圆心只需要用到面阵c c d扫描行中的若干行,在只扫描 两行计算圆心的算法中, 其它的行扫描时间都是系统的额外开销。 因此, 本文用线阵 c c d来代替面阵c c d ,获取瞳孔模拟图像信号。 这样,一方面可以节省成本,另一 方面因处理的数据量少可以提高系统的运算速度;同时, 一般的线阵c c d像素数比 面阵c c d单行的像素数多, 可以进一步提高系统的精度。 使用线阵c c d减少了图像 信号与同 步信号分离等环节, 但是增加了c c d驱动的部分, 这部分电路一般由护 p g a 或者c p l d来承担。 实现二维空间的图 像 ( 瞳孔圆)的跟踪要用两个线阵 c c d ,否则不能判断图像 二维运动方向; 另外, 两个线阵c c d的 摆放位置可以 设计成两种, 一种是平行摆放, 一种是正交摆放,本设计采用正交摆放。两个线阵c c d分别贴在分光棱镜的两个面 上,位置正交。结构如图3 . 1 所示: 成像镜头 分光棱镜 ccdi 超口尸睛 。户j心心l口民 图 1 1 双线阵c c o成像结构图 其中线阵c c d采用m n 3 6 1 1 , 驱动采用c p l d产生, 动增益控制、 a / d转换等,单片机实现数据处理。 双线阵c c d图像处理部分的系统框图 如图3 .2所示: 完成信号放大、自 硕士论文角胶地形侧盈中服球定位跟踪若+技术的研究 驱 动 时 序控 布 以 笼 。豪 匣 到 图3. 2双线阵c c o图像处理部分的系统框图 信号处理的流程如下: 瞳孔图像经过透镜组成像. 经过分光棱镜后分别由正交放 叉的两个线阵c c d( m n 3 611) 接收,线阵c c d的输出信号经过t l v 9 90 处理后成 为数字信号, 这个信号和预先由 单片机设定好的阐值( 这个值以 准确分离出瞳孔边界 为标准) 进行比较, 比较后输出的脉冲信号宽度是和瞳孔大小相关的, 通过单片机中 的计数器,对这个脉冲信号的前后沿进行定位,就能算出瞳孔中心相对于线阵 c c d 靶面的位置。 3 3本章小结 虽然数字图像处理技术是当前的热门技术, 各种针对数字图像处理的软件与算法 也不断改进,但是,一般的面阵图像传感器,如c c d和c mo s ,一帧的频率是固定 的50h z 或60h z , 即使通过高速a / d转换, 可处理信号刷新的频率也肯定低于帧频, 所以面阵图像传感器采集图像的技术虽然很成熟,且硬件可选类型多,但不能采用. 采用线阵c c d的最大优点就是帧频高, 经过t l v 9 90高速a 心转换后, 在保留了所 有有用信号特征的基础上, 后续要处理的数字图像信息少, 算法更简单, 处理速度快。 硕士论文角 放 地 形 测 1 中 服 球 定 位 跟 踪 若 + 技 术 的 研 究 4基于线阵c c d的眼球定位跟踪硬件设计 4. 1硬件设计总体介绍 基于线阵c c d的眼球定位跟踪硬件设计主要包括以下几部分:光电信号转换器 件线阵c c d( m n 3 6ll) 的外围电 路, 包括时序驱动部分和输出阻抗匹配: 线阵 c c d输出信号的处理,包括信号放大和噪声的抑制手段,自 动增益控制,a 心 转换 等;c p l d( e p m7 0 64)内部模块设计,包括 c c d和信号处理芯片的驱动波形发生 部分 ( c c d外围) ,数字比较器设计等;单片机相关电路设计, 包括:带背光液晶显 示模块驱动设计 ( 人眼注视目 标设计) , 脉冲位置计数器和全局计数器、二维微位移 系统驱动 ( 步进电机驱动设计) :电 源电路及不同电 位电源的分配等等。 4. 2 c p l d及在本设计中 应用 cpld (c。 m p l expro脚枷 a b l e 助gl c d ev i ce, 复杂 可编程逻辑器件) 是在pal 、 g a l等逻辑器件的基础上发展起来的,与分立元件相比,具有速度快、容量大、功 耗小和可靠性高等优点。 由于集成度高、设计方法先进、 现场可编程, 它可以替代几 十甚至上百片通用逻辑芯片, 具有现场可编程和修改方便的特点。 芯片内部硬件连接 关系的描述, 可以通过下载电缆反复更改: 在可编程逻辑器件芯片及外围电路保持不 动的情况下, 只要把更改后的烧录文件, 通过下载电缆重新下载到器件中就可以实现 新的功能。 一般经过下载后的c p l d只要接上电源和地加上合适的时钟源就可以正常 运行l 盆21. 4 .2.i c p ld 的 设计过程 第一步:按照 “ 自 顶向下”的设计方法进行系统划分。 第二步: 输入v h d l代码, 这是高层次设计中最为普遍的输入方式。此外, 还 可以采用图形输入方式 ( 框图、状态图等) ,这种输入方式具有直观、容易理解的优 点。 第三步:将以 上的设计输入编译成标准的 v h d l文件。对于大型设计,还要进 行代码级的功能仿真, 主要是检验系统功能设计的正 确性, 因为对于大型设计, 综合、 适配要花费数小时, 在综合前对源代码仿真, 就可以大大减少设计重复的次数和时间, 一般情况下,可略去这一仿真步骤。 第四步:利用综合器对 v h d l源代码进行综合优化处理,生成门级描述的网表 文件, 这是将高层次描述转化为硬件电 路的关键步骤。 综合优化是针对a si c芯片供 应商的某一产品系列进行的,所以综合的过程要在相应的厂家综合库支持下刁 能完 成。 综合后, 可利用产生的网表文件进行适配前的时序仿真, 仿真过程不涉及具体器 件的硬件特性,较为粗略。一般设计,这一仿真步骤也可略去。 l l 硕士论文角膜地形侧盆中眼球定位跟踪若干技术的研究 第五步: 利用适配器将综合后的网表文件, 针对某一具体的目标器件进行逻辑映 射操作, 包括底层器件配置、 逻辑分割、 逻辑优化和布局布线。 适配完成后, 产生多 项设计结果: 适配报告包括芯片内部资源利用情况, 设计的布尔方程描述情况, 适配 仿真模型等。 根据适配后的仿真模型, 可以 进行适配后的时序仿真, 因为己 经得到器 件的实际硬件特性 ( 如时延特性) ,所以 仿真结果能比较精确地预期未来芯片的实际 性能。如果仿真结果达不到设计要求,就需要修改 v h d l源代码或选择不同 速度品 质的器件,直至满足设计要求。 第六步:将适配器产生的器件编程文件通过编程器或下载电缆载入到目 标芯片 c p l d中。如果是大批t产品开发,通过更换相应的厂家综合库,可以很容易转由 a s i c形式实现1 3 1 。 4 . 2 . z e p m70 4 s l c 4 4 介绍 epm 7 064 s lc材是a l t e m公司的m a x 7 00o 系列c p l d芯片。 m a x7000系列是 a l t o .公司销售量最大的产品,属于高性能、高密度的c p l d 。在结构上包含逻辑阵 列块 ( l a b ) 、宏单元、扩展乘积项、可编程连线阵列 ( p 认)和1/ 0控制块。 . p . c 翻 川. . 祖口 图4 1 m a x 7 o 加的结构图 ( 1) 逻辑阵列块 ( l a b ) 每 个 逻 辑 块 都 包 含 乘 积 项阵 列、 乘 积 项 分 配 表 及 宏 单 元。 逻辑 块的 大 小 是 指 其 逻 辑容量,表明该逻辑块能够实现多少逻辑组合, 其典型的表示方式是宏单元的数目。 此外, 逻辑块的输入项数、 乘积项数、 乘积项分配表也是描述逻辑块的重要指标。 每 个l a b由16个宏单元组成, 多个l a b通过可编程连线阵列 ( pia ) 和全局总线连接 在一起。 ( 2 ) 宏单元 每个宏单元由 三个功能块组成: 逻辑阵列、 乘积项选择矩阵和寄存器。 逻辑阵列 l 2 硕 f 论文 、 角腹地形测甘中服球定位探缘若+技术的研究 实现组合逻辑功能. 可给每个宏单元提供五个乘积项; 乘积项选择矩阵分配这些乘积 项作为主要逻辑输入, 以实现组合逻辑函数。 每个宏单元上都有一个乘积项可以反相, 再回送到逻辑阵列, 这个乘积项能够连到同一个l a b中任何其他乘积项上;宏单元 的寄存器可以单独地编程为具有可编程时钟控制的d 、 jk 或rs 触发器工作方式。 如 果需要的话, 也可将寄存器旁路, 以实现纯组合逻辑的输出。 宏单元的寄存器支持异 步清除、 异步置位功能,由乘积项选择矩阵控制这些操作。 当然, 每个寄存器的复位 功能也可以由 低电平有效的专用全局复位信号来驱动。 (3)扩展乘积项 由 于宏单元中只有五个乘积项, 要实现多于五个乘积项的 逻辑函数时, 就需要扩 展乘积项。 扩展乘积项是利用可编程开关, 将一些宏单元中没有使用的乘积项提供给 邻近的宏单元使用,可以 提高资源的利用率,ma x7 0 00 系列最多可扩展20个乘积 项。 ( 4 ) 可编程连线阵列 ( p ia) p ia 的作用是在各 逻辑宏单元之间以 及逻辑宏单 元和 拍 单元之间 提供互连网 络. 各逻辑宏单元通过p ia接收来自 专用输入或输出 端的信号, 并将宏单元处理后的 信号反馈到其需要到达的f o单元或其他宏单元。ma x7 0 0 0 的pia有固定的延时, 所以能 够消除了信号之间的时间偏移, 使得整个器件的时间性能容易预测。 ( 5 ) 刀 0控制块 f o控制块有两个全局输出使能信号,允许把每个u o管脚单独地配置为输入、 输出和双向工作方式。 所有f o管脚都有一个三态缓冲器, 缓冲器的控制端可以出全 局输出 使能信号控制,也可以把控制端直接连到地 ( g n d ) 或电 源 ( v c c )上。当 控制端接地 ( c n d ) 时, 缓冲器输出为高阻状态, 这时1 / 0管脚可作为专用输入管 脚 使用:当 控制端接电 源 ( v c c ) 时,可作为输出 管脚使用。 本设计使用的e p m 7 o 64s l c 科含1 250 个可用门、 64个宏单元、 4 个逻辑阵列块 ( l a b ) 、 6 8 个用户刀 0脚、最大全局时钟频率17 8. 6 m h z 。 4. 幼 c p l d系统在本设计中应用 本设计中凡涉及数字电路部分的都纳入c p l d的应用范围,包括c c d的时序产 生, 数字比 较电路, 方向 判别电 路。 使用c p l d将使系统的可靠性得到提高, 方便设 计且成本低。 使用的c p l d芯片e p m7 0 64s l c 44 的封装和引脚如图4. 2 所示: 硕士论文兔盆地形测t中眼球定位跟踪若干技术的研究 p一 心一 q尽 户城巴口卜一左n一 护山0卜一已名 左衬口卜气互 奋臼艺d口丫日口七已乙 至 纪 夕 梦 “4吕 豆t 月 月司 习司 口盛 1肠 协 仙 洲, 口匀切 御. ,. 翻鸽盯肠耳a.助笼公幼翻 即 州 口 仪犯 e 尸 m7 帕2 5 e pm7 议润 丘 尸 叫 口诀抖5 份 怕 匆 到 盈 四 助 肠 份 盯 曰 只全夕旦 是 荃 只9父9旦 月 4 p i np l cc 图4. 2 e p m , 肠礴 s lc44的封装和引脚图 具体内部功能模块的设计和分配连接将在5 .4节详细介绍。 4 .2.4 byt ebla s 比下载线的制作 本设计中实际使用的c p l d下载线没有用现成的下载线 上在通用pcb上焊接完成,原理图如图4. 3 所示. , 而是在收集资料的基础 一 图4. 3 t 人 0下载线原理图 制作好后的下载线和epm7064s l c 44最小系统如图4. 4 所示: 硕士论文角 膜 地 形 侧 盆 中 眼 球 是 位 跟 踪 若 干 技 术 的 研 究 这两次采样的复位嗓声是相关的, 将两次采样值模拟相减后, 复 位嗓声从输出 信号中 抑制了,从而得到视频信号的真实成分, 这便是著名的相关双采样法11 习 。 c c d的输出波形和相关双采样的原理图如图4. 8 和图 4. 9 所示: c c d 的输出 采样1 呆样2 图4. 8相关双采样的波形时序图 采样时钟1 c c d 输出 图4 刃 相关双采样的结构图 根据相关双采样的原理,如果用分立元件来实现其功能则电路将是相当复杂的, 而且各个分立元件的延迟时间累计后可能满足不了时序要求, 噪声也不好控制, 所以 这部分设计采用tl 公司的模拟视频前端芯片t l v 9 9 0 , 4. 4. 4 节中有这个芯片的具体 介绍. 4. 4 )九 心转换器的选择 由于本设计中把c c d的输出频率设置为 i m, 所以一般的低速a 心 转换器转换 速率是无法满足系统要求的, 高速a j l ) 转换器要求采样和转换速率都大于或等于i m, 也就是说数据在每个像素的输出周期 (lus)内要完成数据的转换和传输,分立高速 川d转换器可以 选择如a d s 82o , t l c 5 510 ,m a x 5 8 63等。另外a j d转换器转换精 度即转换位数也是在通常的设计中要考虑的,由于本设计只是要识别出瞳孔边界, 因 此转换精度不需要很高,一般的 s bit 的 输出精度已经足够。 还有一个设计中要注愈 的地方就是参考电平的大小和稳定性, 因为参考电 平对应满量程时的输出, 所以参考 电平决定了a 刃 转换器可以 输入电压的最大值, 如果参考电 平不稳定则转换结果也 不稳定。 高速a / d芯片( 速率在i m以上) 往往采用并行流水线方式, 它没有r e a d y 信号,也没有读写控制信号,它是在一个时钟信号的驱动下以流水线的方式工作的, 在每个时钟周期向处理器输出一次转换结果 ( 时间上会比 采样时刻滞后几个时钟周 期) ,所以,处理器只需要连续地在每个时钟周期读就行了。而且往往是处理器的速 度跟不上, 所以在高速数据采集系统中往往需要借助于快速的fif o芯片等方式来做 口 , 硕 卜 论文角胶地形侧二中服球定位跟踪若干技术的研究 缓冲。在本设计中没有用f ifo ,而是选用了租s c指令的a v r系列单片机处理a id 转换器的输出结果。单片机选用的晶振频率为 1 6 m,该系列单片机执行一条一般的 指令只需要1 到3 个时钟周期, 所以能满足一般高速数据处理需要。 实际在本设计中 的刀d转换器采用了内置于模拟视频前端芯片t lv990中的高速 户 以 d转换器,由于 是专门针对视频信号的 户 以 d转换器,而且和其它相关信号调理电路是集成在一个芯 片里的,因此其稳定性要比分立元件好。 4. 4. 4模拟视频信号前端处理芯片介绍 t lv99

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论