(信号与信息处理专业论文)基于fpga的soc应用研究.pdf_第1页
(信号与信息处理专业论文)基于fpga的soc应用研究.pdf_第2页
(信号与信息处理专业论文)基于fpga的soc应用研究.pdf_第3页
(信号与信息处理专业论文)基于fpga的soc应用研究.pdf_第4页
(信号与信息处理专业论文)基于fpga的soc应用研究.pdf_第5页
已阅读5页,还剩61页未读, 继续免费阅读

(信号与信息处理专业论文)基于fpga的soc应用研究.pdf.pdf 免费下载

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

基于f p g a 的s o c 应用研究 摘要 随着半导体工艺技术的迅猛发展,可编程逻辑器件的集成度越来越高, f p g a 中的逻辑资源也日益丰富,已达到百万门量级,这使得使用f p g a 实现 片上系统成为可能。基于f p g a 的片上系统设计方案具有开发周期短、设计成 本低、软硬件在系统可编程、系统设计灵活、可裁减、可扩充、可升级等优点, 正在成为电子系统设计的研究热点。另一方面随着嵌入式l i n u x 系统以及数字 图像处理技术的深入发展,使得数字图像处理技术在具有嵌入式l i n u x 操作系 统的开发平台上得到了发展和实现。在f p g a 上开发s o c 系统,并实现基于嵌 入式l i n u x 的图像处理系统具有实际的应用价值。 本文利用x i l i n x 公司的f p g a 实现了基于p o w e r p c 4 0 5 硬核处理器的s o c 设计,并在此基础上开发了基于嵌入式l i n u x 的人脸检测系统。 本文的主要工作包括: ( 1 ) 介绍了在f p g a 上的s o c 的设计方法,并在此基础上构建了基于f p g a 的以p o w e r p c 处理器为核心和以i p 核为外围设备的s o c 系统。 ( 2 ) 分析了l i n u x 的移植过程,并在s o c 系统上实现了嵌入式l i n u x 系统 的移植。移植中的主要工作包括编译环境的建立、板上支持包的开发、系统内 核的裁减、根文件系统建立及b o o t l o a d e r 的实现。 ( 3 ) 在整个s o c 系统的软硬件实现的基础上,在s o c 系统上实现了人脸检 测功能。针对嵌入式系统,实现了软件的优化,提高了人脸检测的速度。 关键词:片上系统;p o w e r p c 4 0 5 ;l i n u x :s y s t e ma c e ;人脸检测; t h es o ca p p l i c a t i o nb a s e do nt h ef p g a a b s t r a c t w i t ht h er a p i dd e v e l o p m e n to fs e m i c o n d u c t o rt e c h n o l o g y ,l o g i cr e s o u r c e si n f p g ah a v er e a c h e dm i l l i o n so r d e r so fm a g n i t u d e ,w h i c hm a k es y s t e m - o n - c h i p ( s o c ) b a s e do nf p g ah a sb e c o m ep o s s i b l e t h ed e s i g no fs o cb a s e do nf p g ah a s m a n ya d v a n t a g e s ,s u c ha s as h o r td e v e l o p m e n tc y c l e ,l o w c o s t ,s o f t w a r ea n d h a r d w a r ei n s y s t e mp r o g r a m m a b l e ,s y s t e md e s i g nf l e x i b i l i t ya n dc a nb et r i m m e d , s c a l a b l e ,u p g r a d e a b l e ,e t c ,b e c a u s eo ft h e s e ,i th a sb e c a m eah o ts p o to fr e s e a r c ho f e l e c t r i c a ls y s t e md e s i g n o nt h eo t h e rh a n d ,w i t ht h ed e v e l o p m e n to fe m b e d d e d l i n u xs y s t e m sa n dd i g i t a li m a g ep r o c e s s i n gt e c h n o l o g y ,f a c e - d e t e c tt e c h n o l o g yh a s b e e ni m p l e m e n t e do nt h ep l a t f o r mw i t he m b e d d e dl i n u xo p e r a t i n gs y s t e m s ot h e d e v e l o p m e n to fs o co nf p g aa n dt h ei m p l e m e n t a t i o no fi m a g ep r o c e s s i n gb a s e d o ne m b e d d e dl i n u xh a v ep r a c t i c a la p p l i c a t i o nv a l u e i nt h i st h e s i s ,w eh a v ei m p l e m e n t e das o cd e s i g nb a s e do np o w e r p c 4 0 5a n d d e v e l o p e daf a c e d e t e c ts y s t e mo ne m b e d d e dl i n u x t h em a i nw o r ko ft h i st h e s i si n c l u d e s : ( 1 ) i n t r o d u c et h es o cd e s i g nm e t h o d o l o g yo nf p g a ,c o n s t r u c t o no fs o c s y s t e mw i t hp o w e r p cp r o c e s s o ra sac o r ea n di pc o r ea sp e r i p h e r a ld e v i c e sb a s e d o nf p g a ( 2 ) d e s ig nas o f t w a r ep l a t f o r mo ft h eso ca n dp o r t i n go fe m b e d d e dl i n u x o p e r a t i n gs y s t e m t h em a i nw o r k so fp o r t i n gi n c l u d eb u i l d i n go fc r o s s - c o m p i l e e n v i r o n m e n t ,d e v e l o p m e n to fb s p , r e d u c t i o no fk e r n e l ,s e t t i n gu po fr o o tf i l e s y s t e ma n di m p l e m e n t a t i o no fb o o t l o a d e r ( 3 ) i m p l e m e n t a t i o no ff a c e d e t e c tf u n c t i o no ns o cs y s t e m i m p r o v et h es p e e d o ff a c ed e t e c t i o nt h r o n g ht h es o f t w a r eo p t i m i z a t i o n k e yw o r d s :s o c ;p o w e r p c 4 0 5 ;l i n u x ;s y s t e ma c e ;f a c e d e t e c t ; 插图清单 图1 1x i l i n x 可编程逻辑器件的发展过程“3 图1 2x i l i n xf p g a 开发设计的发展4 图1 3p o w e r p c 内核嵌入式系统设计5 图1 4 系统总体框架“6 图2 1 系统的整体框架8 图2 2 系统的硬件模块一1 0 图2 3 系统的软件框架设计1 2 图2 4 系统开发流程图1 3 图3 1 系统的硬件框架“1 5 图3 2p o w e r p c 4 0 5 总体结构1 6 图3 3o p bu a r t l 6 5 5 0 顶层模块图1 6 图3 - 4u a r t l 6 5 5 0 模块图1 7 图3 5p l be t h e r n e t 模块图1 8 图3 - 6s y s t e ma c e 控制器的连接方式1 8 图3 7v g a 显示i p 核功能模块1 9 图3 8v g a 显示i p 核数据流1 9 图3 - 9 内存控制模块框图2 0 图3 1 0 时钟控制模块2 1 图3 1 ls o c 系统硬件电路设计流程2 2 图3 1 2 需要添加的i p 核2 3 图3 1 3v g a 的端口连接方式2 4 图3 1 4v g a 模块连接图2 4 图3 1 5s o c 硬件设计示意图2 5 图3 1 6d c m 功能模块2 7 图4 1l i n u x 系统移植框图2 9 图4 2 交叉编译开发模型3 0 图4 3 交叉编译器的建立过程3 1 图4 4b s p 的建立过程3 2 图4 5b s p 文件结构3 4 图4 6l i n u x 系统的总体配置- 3 5 图4 7l i n u x 内核模块分析3 6 图4 8 固态存储设备的典型空间分配结构一3 8 图4 - 9a c e 文件结构- 3 9 图4 1 0a c e 的功能4 0 图4 11 根文件系统的结构4 1 图4 1 2 根文件系统的建立流程4 2 图5 1h a r r 特征4 4 图5 2h a a r 特征在人脸上的匹配“4 4 图5 3 积分图的计算4 5 图5 4a d a b o o s t 算法示意图4 5 图5 5 级联分类器作用一4 7 图5 - 6 人脸检测系统流程图“4 7 图5 7 人脸检测程序算法框图”4 8 图5 8 检测速度测试图5 l 图5 - 9 单个人脸的检测结果5 2 图5 1 0 多个人脸的检测结果5 2 图6 1 系统框图5 4 表格清单 表5 1 测试集检测的检测率对比5 0 表5 2 网络图片进行检测的检测率对比5 0 表5 3 硬件优化前人脸检测的速度测试结果5l 表5 4 硬件优化后人脸检测的速度测试结果5 1 独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研究成果。据我所 知,除了文中特别加以标注和致谢的地方外,论文中不包含其他人已经发表或撰写过的研究成果, 也不包含为获得 金目垦至些太堂 或其他教育机构的学位或证书而使用过的材料。与我一同 工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示谢意。 学位论文作者签名:叶之金签字日期:2 0 0 9 4 19 学位论文版权使用授权书 本学位论文作者完全了解金月巴王些太堂有关保留、使用学位论文的规定,有权保留并向国 家有关部门或机构送交论文的复印件和磁盘,允许论文被查阅和借阅。本人授权金月曼至些太堂可 以将学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或扫描等复制手 段保存、汇编学位论文。 ( 保密的学位论文在解密后适用本授权书) 学位论文作者签名: 签字日期:公彳年午 学位论文作者毕业后去向: 工作单位: 通讯地址: 。 1 ) 鲕敛虚缸础鹦、 导师签名:乡铳l 一3 、 签字日期:t 一气年争月镭 , 电话: 邮编: 致谢 在本论文即将完成之际,谨此向我的导师张旭东副教授和高隽教授致以衷 心的感谢和崇高的敬意! 本论文的工作是在张老师的悉心指导下完成的。张老 师以他敏锐的洞察力、渊博的知识、严谨的治学态度、精益求精的工作作风和 对科学的献身精神给我留下了刻骨铭心的印象,这些使我受益匪浅,并将成为 我终身献身科学和献身事业的动力。 在攻读硕士的近三年里,高老师和张老师不仅为我创造了优越的科研和学 习环境,使我得以在电子领域中自由翱翔,同时在思想上、人生态度和意志品 质方面给予了谆谆教诲,这些教益必将激励着我在今后的人生道路上奋勇向前, 对两位老师的教诲必将铭记于心。 在此要特别感谢图像九连环的兄弟姐妹,他们是:凌虎、冯文刚、胡翊、 张翼、任溯、薛艳、范瑾瑾和吴克伟。很有幸能够在研究生阶段结交到如此志 同道合的朋友,一路上有了你们的陪伴,不仅使我在学习上受益颇多,生活上 更是变得色彩斑斓。曾几何时的我们,一起研究课题,一起分享美食,一起k 歌狂欢,一切的美好至今历历在目,难以忘怀。我想我们彼此心中会永远珍藏 着这份真挚的友谊,不管九连环的各位将来身在何方,都依然是永不褪色的九 连环。 感谢实验室的各位老师、师兄师姐和师弟师妹,感谢各位三年来对我的各 种帮助和关怀,使我在研究生阶段能够如此顺心,顺利。 感谢我的父母,感谢你们为我付出的一切,因为有了你们支持和理解,使 我能够专心踏实的学习,无任何后顾之忧。没有你们付出的辛劳,我无法顺利 的完成硕士学位,在这里,我要和父母道一声:你们辛苦了! 感谢女友王莹的相伴,你一直以来默默的支持和鼓励坚定了我永不言弃的 信念,使我困难面前不再畏惧,痛苦面前不再沮丧,所有的甘甜和酸楚永远一 起分担,你是我的另一半! 最后,感谢曾经教育和帮助过我的所有的老师、同学和朋友。衷心地感谢 为评阅本论文而付出宝贵时间和辛勤劳动的专家和教授们。 作者:叶之金 2 0 0 9 年4 月8 日 1 1s o c 系统的概述 第一章绪论 1 1 1s o c 基本概念 s o c 的定义多种多样,由于其内涵丰富、应用范围广,很难给出准确定义。 一般说来,s o c 称为系统级芯片,也有称其为片上系统,意指它是一个产品, 是一个有专用目标的集成电路,其中包含完整系统并有嵌入软件的全部内容。 同时它又是一种技术,用以实现从确定系统功能开始,到软硬件划分,并完成 设计的整个过程。从狭义角度讲,s o c 是信息系统核心的芯片集成,是将系统 关键部件集成在一块芯片上。从广义角度讲,s o c 是一个微小型系统,若把中 央处理器( c p u ) 比作大脑,那么s o c 就是包括大脑、心脏、眼睛和手的系统。 国内外学术界一般倾向将s o c 定义为将微处理器、模拟i p 核、数字i p 核和存 储器( 或片外存储控制接口) 集成在单一芯片上,通常是客户定制或是面向特定 用途的标准产品1 5 4 | 。 s o c 定义的基本内容主要表现在两方面:其一是s o c 的构成,其二是s o c 的形成过程。系统级芯片的构成可分为系统级芯片控制逻辑模块、微处理器 微控制器c p u 内核模块、数字信号处理器d s p 模块、嵌入的存储器模块、与 外部进行通讯的接口模块、含有a d c d a c 的模拟前端模块、电源提供和功耗 管理模块,对于一个无线s o c 还有射频前端模块、用户定义逻辑( 它可以由 f p g a 或a s i c 实现) 以及微电子机械模块,更重要的是一个s o c 芯片内嵌有基 本软件模块或可载入的用户软件等。 1 1 2s o c 技术发展状况 s o c ( s y s t e m o n c h i p ) 设计技术始于2 0 世纪9 0 年代中期,随着半导体工 艺技术的发展,i c 设计者能够将愈来愈复杂的功能集成到单硅片上,s o c 正是 在集成电路( i c ) 向集成系统( i s ) 转变的大方向下产生【4 3 。 19 9 4 摩托罗拉公司发布的f l e x c o r 系统( 用于制作基于6 8 0 0 0 t 和p o w e r p c 定制微处理器1 和19 9 5 年l s i l o g i c 公司采用s o c 为s o n y 公司进行设计,这 是基于i p 核完成s o c 设计的最早报道。由于s o c 可以充分利用已有的设计积 累,显著地提高a s i c 的设计能力,因此发展非常迅猛,引起了工业界和学术 界的广泛关注。2 0 0 0 年,美国著名的半导体器件生产厂商a l t e r a 公司最先提出 了基于可编程逻辑器件的片上系统解决方案,即s o p c 技术,并同时推出了相 应的开发软件以及相应的i p 模块库,2 0 0 2 年2 月,a l t e r a 公司所推出的新一代 可编程逻辑器件s t r a t i x ,被认为是世界上第一个为5 0 r t s 设计提供的真正意义上 的系统级芯片【3 l j 。 全球可编程逻辑器件市场占有份额最大的半导体器件生产厂商美国x i l i n x 公司,自19 8 5 年推出第一片现场可编程逻辑器件至今,就不断推出新器件和开 发工具,s o p c 系统级芯片( s o c ) 解决方案被誉为半导体业最重要的发展之一。 目前,从数字手机和数字电视等消费类电子产品到高端通信l a n w a n 设备中, 这一器件随处可见。过去为了创建此类嵌入式系统,设计工程师不得不在处理 器、逻辑单元和存储器等三种硬件中进行选择,而现在这些器件已合并为单一 的s o c 解决方案。 虽然国内设计产业发展很快,但低层次的设计较多,并未达到系统级水平, 在s o c 技术与应用方面,与国外还存在较大的差距。 近年来,国家在这个领域投入了大量的人力、物力和财力,科技部于2 0 0 0 年启动了“十五国家8 6 3 计划超大规模集成电路s o c 专项工作【35 1 。希望通 过努力,初步建成具有自主知识产权、品种较为齐全和管理科学的国家级i p 核 库,并掌握具有国际先进水平的s o c 软硬件协同设计、i p 核复用和超深亚微 米集成电路设计的关键技术。 2 0 0 2 年,“龙芯”c p u 研制成功为改变我国信息产业无“芯”的局面迈出 了重要的一步。2 0 0 5 年4 月18 日中国科学院计算技术研究所成功研制出“龙 芯二号”,最高工作频率为5 0 0 m h z ,其性能相当于8 0 0 1 0 0 0 m p e n t i u m l ,2 0 0 6 年5 月又推出“龙芯z d ,工作频率为6 0 8 0 m h z ,另外,多内核、多线程机 制的“龙芯3 号”将计划在“十一五”期间完成。 1 1 3x i l i n xf p g a 的s o c 开发状况 f p g a , d s p 和c p u 被称为未来数字电路系统的3 块基石,也是目前硬件一 设计研究的热点,与传统的电路设计方法相比,f p g a 具有功能强大、开发过 程投资小、周期短、可反复编程修改、保密性能好、开发工具智能化等特点。 自1 9 9 0 年来,f p g a 的成本降低了5 0 0 倍、功耗降低了5 0 倍、逻辑容量提高 了2 0 0 倍、速度快了4 0 倍,预计到2 0 1 0 年,f p g a 在价格上还会继续降低5 倍,容量会增大5 倍,单位功耗会有多5 倍的功能,另外速度还会提升5 倍。 f p g a 除了可编程逻辑外,还集成了很多i p 核,例如最新的p c i 、以太网 模块、高速串行收发器、d s p 模块以及嵌入式处理器等,正在向s o c 方向发展。 若以f p g a 实现一个3 2 位的处理器,则相当于0 4 美元提供2 4 0 m i p s 的性能, 或者说2 美元提供l0 万门。 随着f p g a 技术的发展,f p g a 的逻辑容量越来越大,成本越来越低。在 这种趋势下,f p g a 便可代替系统中越来越多的器件,最后发展到f p g a 片上 系统f 4 5 】。 图1 1 为x i l i n x 的可编程逻辑器件的发展过程。最初,f p g a 仅提供简单 的逻辑解决方案组合,随后发展为p l a t f o r m sf p g a ,并在功能及总成本上均为 系统结构设计工程师提供了极大的价值。现在从网络设备到高端消费类器件, f p g a 均开始了大批量生产。 x i l i n x 公司的p l a t f o r mf p g a 是高性能的s o c 解决方案,以因特网、无线、 全球化及个人通信为代表的信息化时代要求设备生产商在标准通信系统中增加 数据率及通道数,以支持视频流、音频流及数据流。p l a t f o r mf p g a 为生产商 提供了所需的系统灵活性、上市时间并可支持高带宽要求。此外,p l a t f o r mf p g a 提供了用于嵌入式处理器的系统控制、用于客户订制数据滤波及并行处理的 d s p 内核以及用于系统高速数据通信的吉比特串行及源同步i o 口。 图l - 1x i l i n x 可编程逻辑器件的发展过程 v i r t e x i i 系统门密度从4 万至8 0 0 万不等,可提供嵌入式系统存储器。由 于这种高密度片上存储器可提供快速高效的f i f o 缓冲区、移位寄存器及c a m , 因此增加了整体系统带宽。嵌入式r a m 模块及高速存储接口为带宽要求很高 的系统提供了强大的、基于存储器的数据通道。v i r t e x i i 器件及其扩展器件所 提供的p l a t f o r mf p g a 功能可解决系统级设计中面临的信号完整性、复杂系统 时钟管理及板上e m i 管理等问题。 p l a t f o r mf p g a 是一种灵活的解决方案,它在单芯片上集成了一系列软硬 i p 内核,同时硬件和固件可随时升级。f p g a 架构的可编程性缩短系统开发时 间,单个p l a t f o r mf p g a 就可满足多种应用需要。此外,它还提供了软硬件协 同设计的灵活性,设计工程师可在开发周期内便进行系统优化。 p l a t f o r mf p g a 采用了i p 插入和有源内连技术。采用i p 插入技术可将任何 大小或形状的软硬i p 内核无缝地插入到f p g a 架构中的任何部分,并保持与周 围阵列极佳的连通性。而有源内连技术则提供了有源的布线通道,使得软硬i p 内核无论位于阵列何处均可保持稳定、高效的性能。 系 统 设 计 由 的 功 能 整 厶 口 时间 图1 2x i l i n xf p g a 开发设计的发展 用于p l a t f o r mf p g a 的e m p o w e r 解决方案为嵌入式处理器提供了最高性能 的可编程系统,同时还可自由选择客户订制的解决方案。从v i r t e x i ip r o 开始, x i l i n x 在其高端的部分器件中增加了多个硬核p o w e r p c 内核,以推动这种趋势。 所采用的嵌入式p o w e r p c 4 0 5 微处理器内核工作频率为3 0 0 m h z ,可提供超过 6 0 0 m i p 的性能。此外,v i r t e x i i 器件上的m i c r o b l a z e 软处理器内核是3 2 位r i s c 处理器,工作频率为1 2 5 m h z ,可提供8 2 m i p 的性能。 4 图i - 3p o w e r p c 内核嵌入式系统设计 同时,x i l i n x 还推出了3 2 位软i p 核m i c r o b l a z e ,用以替代片上的微控制 器,帮助客户缩小p c b 板的面积和器件数量,并降低整个系统的成本。起初, m i c r o b l a z e 是基于o p b ( o n c h i pp e r i p h e r a lb u s ) 总线,当m i c r o b l a z e 发展到7 0 时( 对应的e d k 版本为9 2 ) ,m i c r o b l a z e 采用了和p o w e r p c 相同的p l b 总线。 同时,x i l i n x 还在e d k 中整合了m p m c ( 多端口内存控制) 。客户的数据可以 直接从外设写入内存,也可以直接从内存读出,大大提高了系统的效率。这样 大量的数据搬运可以不通过p l b 总线而直接完成, 基于p o w e r p c 的硬核处理器i p 核,在国外己有广泛的应用,但在国内使 用它进行嵌入式设计和开发甚少,还局限于高校科研和教学阶段。 1 2 基于f p g a 的s o c 设计的优势 基于f p g a 的s o c 设计技术是当前电子系统设计领域最前沿的技术之一。 它把s o c 设计和当前最流行的嵌入式系统结合起来,使之具有广泛的应用前 景。 使用f p g a 进行s o c 设计,对多数嵌入式设计工程师和f p g a 工程师来说 还并不熟悉,目前在基于f p g a 上的s o c 设计和应用的市场比例并不大,但是 使用f p g a 作为s o c 设计开发具有很大的优势。 最大的优势在于定制性,即为量身定做之意。设计嵌入式产品在选片过程 中很难做到完全接近需求,且还要为在p c b 板上添加c p u 没有集成的外设资 源而支付额外费用,但f p g a 则不存在上述问题。在f p g a 内,用户可以通过 配置添加任意外设数量,剔除不需要的外设,也可以根据实际需要修改外设的 功能,甚至自主设计独特的外设。做到完全的定制性,而不浪费资源。 相比传统的嵌入式c p u ,f p g a 内部的处理器核运算能力有一些不足,但 嵌入式产品主要功能是控制,在这点上,f p g a 可以使用纯逻辑控制方式,具 有天然的优势,尤其是在实时性要求较高的场合,f p g a 硬件的反应时间在1 1 5 级,这是传统嵌入式c p u 所不能企及的。 x i l i n x 公司是全球最大的f p g a 供应商,提供全面的处理器解决方案和器 件,是f p g a 业界唯一同时提供处理器软核和硬核的厂商,能支持嵌入式系统 设计人员为满足自己的嵌入式处理需求而选择最佳的性能和价位点。 事实上,这也类似于传统d s p 和c p u 等处理器的发展方向,它们也在片 上集成了各种硬件加速器,为特定应用提供更高的性能。f p g a 通过把更多硬 核集成进去,能够适合更多特定的市场,这是一个趋势。不过,和同类方案相 比,f p g a 继承了很多可编程特性。 1 3 论文的主要工作及章节安排 本论文的研究工作主要是在f p g a 上建立一个完整的s o c 系统设计及应 用,包括系统的硬件、l i n u x 系统及应用程序的开发。系统的主要功能是实现 人脸的检测。 本论文主要的工作如下: ( 1 ) 人脸检测系统的硬件平台的设计,在f p g a 上构建以p o w e r p c 处理器 为核心,以i p 核为外围设备的s o c 系统,并对主要的i p 核进行分析。 ( 2 ) 人脸检测系统的软件平台设计,在s o c 系统上移植l i n u x 系统,主要 的工作是编译环境的建立、板上支持包的开发、系统内核的裁减、根文件系统 建立及b o o t l o a d e r 的实现。 ( 3 ) 人脸检测系统的应用程序的开发,实现在s o c 系统上的人脸检测功能。 图1 4 描述了本文所做的工作,通过该图可以了解到整个论文的整体结构。 第二章 第三章 第四章 第五章 图1 - 4 系统总体框架 论文的章节安排如下: 第一章介绍课题的研究背景和意义,详细介绍使用f p g a 设计s o c 的优势 和人脸检测相关技术。 第二章分析整个人脸检测系统的设计,分别对硬件设计和软件设计进行相 关描述。最后简要介绍了开发的流程。 6 第三章介绍系统的硬件设计框架,通过配置f p g a 的内核和添加i p 构建了 人脸检测的s o c 系统的硬件电路。 第四章详细介绍l i n u x 系统的移植,完成从交叉编译环境的建立到根文件 系统的建立这一整套的l i n u x 系统的开发过程,并对每个过程进行详细的分析。 第五章对人脸检测技术进行简要的介绍,并在s o c 系统上实现人脸的检测 功能。 第六章总结和展望,对本设计的一个总结,简明地概括课题研究的进展和 不足,规划下一步工作的重点和目标。 7 第二章s o c 系统整体设计 近年来,对人脸检测系统的研究取得了很大的发展,现有的人脸检测系统 大多是基于p c 平台而开发的。随着高性能p c 的不断出现,基于p c 的人脸 检测系统也逐渐呈现出实时高效等特点,但因p c 机所固有的特点导致此类系 统具有体积过大、不宜便携、对某些专有系统存在着系统冗余等缺点,于是, 开发基于嵌入式平台的人脸检测系统便逐渐提上了日程。 本设计是基于嵌入式s o c 平台的人脸检测,整个系统的框架如图2 1 所示。 s o f t w a r ea p p l ,i c a t i o n 8 1 6 5 5 0 图2 1 系统的整体框架 如图2 一l 可知,整个系统的开发包括三个部分: ( 1 ) f p g a 的开发 本设计的f p g a 的开发目的是构建系统的硬件电路,硬件电路的设计包括 两个方面:p o w e r p c 4 0 5 处理器和外围设备。 ( 2 ) k e r n e l 的开发 本设计的k e r n e l 的开发主要包括系统的内核裁减移植和一些外围设备的驱 动开发。 ( 3 ) 应用程序的开发 本系统的应用程序开发主要是实现人脸检测功能。 8 臻墨;l:馕秀殇 d 凝t 。, 2 1 系统的硬件设计分析 2 1 1 系统的硬件平台的选择 在嵌入式人脸检测系统的开发过程中,硬件的选择至关重要,在现有的人 脸检测系统中,多数使用a r m 或d s p 进行系统的开发,整个系统的功能完全 由处理器来完成,难以达到实时的效果。在本系统中使用s o c 来进行系统的开 发,在s o c 上完成人脸检测功能,利用s o c 来进行嵌入式系统设计具有很大 的优势: ( 1 ) 可极大减少功耗开销。 ( 2 ) 在一个芯片中实现整个系统功能,系统内部数据传输速度快,可避免 系统的数据传输瓶颈。 ( 3 ) 可减少印刷板上的部件数和管脚数。 ( 4 ) 可降低板卡失效的可能性。 ( 5 ) 由于片内连线缩短,有改善板卡的性能。 ( 6 ) 可减少系统开发商成本。 本设计采用配置f p g a 来构建s o c 系统从而实现人脸的检测功能,该系统 具有如下优点: ( 1 ) 系统的扩展性比较好,既可以使用处理器来完成人脸的检测,也可以 通过硬件加速实现,利用f p g a 的逻辑资源来分担部分或整个工作,实现真正 的实时性能。 ( 2 ) 系统的构建完全由用户定制,采用何种处理器和需要那些终端设备完 全由系统设计者完全定制。 ( 3 ) 系统调试方便,具有处理器调试接口和f p g a 编程接口,方便调试, 对于f p g a 的开发者来说,可以通过f p g a 编程接口方式进行调试,对于嵌入 式处理器设计者来说,可以通过处理器调试接口进行调试。无论对于从事f p g a 工作者还是从事嵌入式处理器设计方面的设计师都能很快的适应。 2 1 2 系统的硬件电路总体框架 本设计是采用基于f p g a 的s o c 系统来完成人脸的检测功能。因为x i l i n x 公司的v i r t e xi ip r o 系列的f p g a 内嵌了p o w e r p c 4 0 5 硬核处理器p j ,系统的性 能高达6 0 0 m i p s ,可以很好的担负人脸检测的任务。所以本设计采用的f p g a 是v i r t e xi ip r o 系列的x u p v 2 p 3 0 ,处理器使用p o w e r p c 4 0 5 硬核处理器。系统 的总体硬件框架如图2 2 所示。 9 图2 2 系统的硬件模块 整个系统硬件模块包括: ( 1 ) 输入输出模块:视频采集卡,v g a 显示。 ( 2 ) s o c 系统模块:v i r t e xi ip r o 开发板。 ( 3 ) 硬件调试模块:r s 2 3 2 串口通信。 ( 4 ) 内存模块:2 5 6 md d r 4 0 0 。 由图2 2 可以看出,整个系统所要完成的工作是f p g a 通过视频采集卡采 集摄像头中的视频图像,再经过f p g a 中的处理器系统进行相关的数据处理最 终输出到v g a 显示,信号处理过程中的中间结果通过d d r 内存进行存储,电 源部分主要完成对开发板的电源供给,保证开发板的电压稳定;串口部分主要 完成系统的调试和终端显示功能,通过串口很容易知道系统运行的各个状态; c f 卡模块主要完成系统的启动数据的存储和装载软件平台的根文件系统。整个 系统的硬件电路设计是通过配置f p g a 来构建s o c 系统,实现对外围设备的控 制。 2 2 系统的软件设计分析 2 2 1 软件平台的选择 嵌入式系统的软件设计一般包括几个方面1 7 j : ( 1 ) 嵌入式系统的选择。 ( 2 ) 驱动程序的开发。 ( 3 ) 应用程序的开发。 本设计是在s o c 上开发人脸的检测程序,考虑到系统的扩展性及多用处 性,本设计采用移植l i n u x 的操作系统来实现。l i n u x 应用于嵌入式系统与其 它操作系统相比,有其自身优势4 4 】【4 7 1 。 ( 1 ) 广泛的硬件支持 l i n u x 能够支持x 8 6 ,p o w e r p c ,a r m ,n i p s ,a l p h a ,s p a r c 等多种体 系结构,目前已经成功移植到数十种硬件平台,几乎能够运行在所有流行的 c p u 上。l i n u x 有着异常丰富的驱动程序资源,支持各种主流硬件设备和最新 硬件技术,甚至可以在没有存储管理单元( m m u ) 的处理器上运行,这些都进一 l o 步促进了l i n u x 在嵌入式系统中的应用。 ( 2 ) 内核健壮,运行高效稳定 l i n u x 内核的高效和稳定性己经在从巨型机到嵌入式设备的各个领域内得 到了大量的事实验证。l i n u x 自身的健壮性、可靠性、稳定性是嵌入式l i n u x 领先于其它嵌入式操作系统最明显之处。 ( 4 ) 内核可剪裁 l i n u x 的内核设计非常精巧,分成进程调度、内存管理、进程间通信、虚 拟文件系统和网络接口五大部分,其独特的模块机制可以根据用户的需要,实 时地将某些模块插入到内核或从内核中移出。这些特性使得l i n u x 系统内核可 以裁剪得非常小巧,很适合于嵌入式系统的需求。 ( 5 ) 开放源码,软件丰富 l i n u x 是开放源代码的自由操作系统,为用户提供了最大限度的自由度, 由于嵌入式系统千差万别,往往需要针对具体的应用进行修改和优化,因而获 取源代码就变得至关重要。l i n u x 的软件资源十分丰富,每一种通用程序在 l i n u x 上几乎都可以找到,并且数量还在不断增加。在l i n u x 上开发嵌入式应 用软件一般不用从头做起,只需选择一个类似的自由软件做为原型,在其上进 行二次开发。 ( 6 ) 优秀的开发工具 一套完善的开发和调试工具对开发嵌入式系统是至关重要的。传统的嵌入 式开发调试工具使用在线仿真器( i n c i r c u i t em u l a t o r ic e ) ,通过取代目标板的 微处理器,给目标程序提供一个完整的仿真环境,从而使开发者能够非常清楚 地了解到程序在目标板上的工作状态,便于监视和调试程序。在线仿真器的价 格昂贵,而且只适合做底层的调试,若使用嵌入式l i n u x ,旦软硬件能够支 持正常的串1 :3 功能时,即使不用在线仿真器也可以很好地进行开发和调试工作, 从而可以节省一笔不小的开发费用。嵌入式l i n u x 为开发者提供了套完整的 工具链( t o o l c h a i n ) ,支持串行口、网络接1 :3 、j t a g ,u s b 等多种调试方式,利 用g n u 的g c c 做编译器,用g d b ,k g d b ,x g d b 做调试工具,能够很便携地 实现从操作系统到应用软件各个级别的调试。 ( 7 ) 完善的网络支持和文件管理机制 l i n u x 支持完备的t c p i p 协议栈,还能提供对网络上其它机器内文件的访 问,如n f s 。l i n u x 还可以支持s l i p 和p l i p ,使得通过串口和并口线进行连 接成为可能。另外l i n u x 还支持x 2 5 协议、i p x 协议、a p p l e t a l k 、s a m b a 等网 络协议,并且很容易移植到嵌入式系统中。此外,l i n u x 还支持e x t 2 、f a t l 6 、 f a t 3 2 、j f s 、r o m f s 等文件系统,这些都为开发嵌入式系统应用打下了很好的基 础。 ( 8 ) 基于l i n u x 的嵌入式产品成本较低 l i n u x 开放源码的开发模式得到了广泛的认可,现在大部分嵌入式l i n u x 的厂商代码也都采用了开放源码的技术思路。不仅l i n u x 本身是开放源码的, 许多基于l i n u x 的系统软件、应用软件、驱动程序等都是开放源码,这些均是 在开发嵌入式应用系统时可以利用的资源。l i n u x 本身及运行于其上的许多软 件都是以“c o p y l e f t ”的方式发布,这便降低了基于嵌入式l i n u x 开发出的嵌 入式产品的成本。拥有商业版权的嵌入式操作系统、嵌入式系统开发工具都十 分昂贵,当厂商采用这些工具开发嵌入式系统时,必然会把自已购买商业版权 的费用转移到最终的嵌入式产品中。 在众多l i n u x 系统中,与x i l i n x 有着长期合作的m o n t a v i s t a 公司的l i n u x 能很好的支持x i l i n x 的各种硬件结构,包括x i l i n xs y s t e ma c e 控制器、以太 网和g p i o 等。并且该l i n u x 是开放源码、无版税的嵌入式操作系统,具有实 时性的高级开发环境,并且在嵌入式领域中支持广泛的硬件平台。该操作系统 可维持3 0 多种的通用代码体系( 包括7 种不同体系结构的处理器) ,使用的是 标准的l i n u x2 4 2 0 的内核是针对嵌入式设备量身定制的实时、专业嵌入式操 作系统。所以在本设计中采用的是m o n t a v i s t a 公司的l i n u x 源码。 2 2 2 软件设计总体框架 在本设计中要完成人脸的检测功能,该系统的软件设计包括两个方面: l i n u x 系统的开发和人脸检测系统的开发。系统的软件框架如图2 - 3 所示。 j 应用程序层: 圈圈圈圈 l j 操作系统层 : i i 用户界面接口 i; ; 一 j ;广 j ! 广1 i i i 嵌入式操作系统内核 ij i。!:j:j:?:j:j:j:?:?:j:?:?:j:一j 应用程序层,主要实现人脸的检测功能以及系统的相关的界面操作。 操作系统层,由嵌入式操作系统内核,根文件系统和b o o t l o a d e r 构成。 硬件接口层,为设备驱动程序( d e v i c ed r i v e r s ) ,主要完成对系统硬件资 源进行配置、启动和读写等

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论