基于FPGA的机器视觉设计.doc

基于FPGA的机器视觉设计摘要：为实现系统快速更新，在此设计了一种新的机器视频解决方案，借助fpga技术，实现视频输入端口与gige vision ip的使用以及系统与计算机主机的连接。设计方案中采用了新的gige vision标准及gige vision ip核，使系统相比其他现有相关标准更简单、速度更快，是未来的发展方向。关键词：机器视觉; 视频; fpga; gige vision 引言机器视觉就是用机器代替人眼来做测量和判断。机器视觉作为人类视觉与大脑的延伸，是衡量现代工业自动化程度的标志之一。近年来，随着计算机技术尤其是多媒体技术和数字图像处理及分析理论的成熟，以及大规模集成电路的迅速发展，机器视觉技术得到了广泛的应用研究，取得了巨大的经济与社会效益。机器视觉系统主要由3部分组成：图像的获取、图像的处理和分析、输出或显示。本文介绍了基于fpga的一种机器视觉系统，该系统采用gige vision 摄像机来获取图像，在fpga中采用了gige vision ip核，根据tcp/ip传送协议实现了fpga与pc机的数据通讯。1fpga实现机器视觉的优势随着机器视觉系统应用中分辨率的提高和压缩算法的进步，对系统性能和构架灵活性提出了更高的要求，以实现系统的快速更新。可选择的系统构架包括标准单元asic，assp以及各种可编程解决方案，如数字信号处理器（dsp）或媒体处理器和fpga。每种构架都具有各自的优缺点，最终选择取决于终端设备要求和解决方案的可用性。理想构架应具有以下特点：高性能、灵活性、易升级性、低开发成本以及具有随着应用成熟和产量增加向更低成本迁移的能力。fpga具有并行运算、反复使用、大量可使用的软核的优势，是实现机器视觉理想构架的合理选择。fpga是小批量系统提高集成度、可靠性的最佳选择之一。随着vlsi工艺的不断提高，单一芯片内部已可以容纳上百万个晶体管，这使得fpga芯片所能实现的功能也越来越强，同时也可以实现系统集成。fpga有大量软核，可以方便进行二次开发。fpga甚至包含单片机和dsp软核，并且io数仅受fpga自身io限制，所以，fpga又是单片机和dsp的超集。也就是说，单片机和dsp能实现的功能，fpga一般都能实现。在soc设计中，基于fpga器件设计工艺的发展使得越来越多的功能集成到一个芯片成为可能。为实现这一目标，有一种非常实用的soc设计方法，称为基于核的设计，它将系统的功能划分为不同的核，采用ip（intellectual property）核来完成特定的设计功能。本文就是采用了gige vision的ip核来完成主要部分设计的。2机器视觉系统设计2.1设计原理系统原理框图如图1所示。图1系统硬件体系结构图这个解决方案基于xilinx低功耗低成本的spartan 3e fpga芯片上实现，它提供了整合camera link，gige vision ip，千兆以太网mac的平台和可选的visual applets软件。2.2视频输入模块在its及安防行业，现在主要使用的是模拟摄像机，也有部分厂家推出了网络摄像机(pcamera)。gige vision摄像机与他们之间的对比如表1所示。表1各类摄像机对比摄像机类型gige vision摄像机模拟摄像机网络摄像机成像元件逐行扫描ccd隔行扫描ccd隔行或逐行扫描ccd有效像素6404 801 3921 040,2 0482 048720576640480视频输出格式8 b/10 b数字输出模拟8 b数字输出视频输出接口1 000basetbnc10baset/100basetx输出帧率 /（f/s）一般：30最高：200252530数据压缩无压缩无压缩mpeg/jpeg远程设置可以不可以可以部分扫描输出可以不可以不可以sdk有无有应用开发难度容易难难从以上的对比表可以看出，gige vision摄像机的主要优点是:(1) 逐行扫描；(2) 高清晰，缓高分辨率达到4百万像素；(3) 帧率高：最高帧率达到200 f/s；(4) 数据未经压缩，无损失；(5) 可以根据需要输出部分扫描数据；(6) 可以通过软件自动改变摄像机参数，适应变化的现场环境；(7) 后期应用开发方便。基于gige vision摄像机的优点，本系统采用gige vision摄像机。2.3fpga中使用的模块fpga中使用camera link来进行与相机的互连。camera link是一个应用于高端机器视觉的强大的数据通道。它使用一个专门的电缆连接和标准化的通信协议。camera link支持大量的数据和高数据传输率，适合今天的图像数据传输的要求。在系统中xilinx fpga中使用的gige vision是一种由aia（automated imaging association）开发的相机接口标准。这是一项开放性的标准，它能让来自不同厂家的摄像机与应用软件通过吉比特以太网实现相互间的无间合作。gige vision 使用了一个标准的千兆以太网连接同其高带宽（1 gb/s）实现了未经压缩图像和数据的实时传输。使用gige vision ip是实现高性能机器视觉应用的理想解决方案。一个吉比特以太网相机使用camera link与gige vision相连。gige vision 是一种实现单/多相机与单/多计算机相连接进行数据集中和分布式处理的理想标准。使用标准千兆以太网允许使用标准电缆和连接器，从而降低材料费和整合成本以及后续增长以太网带宽的可扩展性。本方案中使用的gige vision ip核是根据的gige vision规范1.0版的gige vision 数据流协议的硬件实现。它是由xilinx的合作伙伴feith sensortoimage gmbh发开的。因为通过硬件来实现数据流通道可以达到千兆以太网的最大吞吐量。ip核的结构如图2所示。图2gige vision ip核结构gige vision的核心由内存控制器、吉比特以太网mac、控制微处理器和一个视频处理单元组成。gige vision核提供了吉比特以太网mac接入系统的其余部分，处理gige vision 数据流通道，对gige vision通道再发送申请包进行解码，并提供一个嵌入式cpu的网络接口。cpu处理了除gige vision数据流控制以外的所有网络协议。内存控制器作为特殊的视频帧缓冲区，它不是缓冲输入的视频帧，而是把它们分成可供网络传输和实现gige vision数据流协议的部分处理包重发送功能的较小区域。fpga中与计算机相连的部分使用的是finger lakes engineering为xilinx开发的phantom trimode mac ip核。它与gige vision ip核集成在一起，充分应用1 gb/x rx/tx速率，支持ipv4，ipv6，jumbo packet和mdio。phantom核具有独特的重新计时路径，从而能降低时钟缓冲器计数值同时简化核的集成度，对于低成本的spartan器件和高性能的virtex构架都是理想的选择。2.4主机接口设计本方案中使用吉比特以太网与计算机连接，计算机上需安装visual applets软件。visual applets是由silicon software开发的一款软件，可完全兼容xilinx的fpga。visual applets完成了一个极其强大、灵活、快速和优化的gige vision开发平台，它使不熟悉fpga的机器视觉专家也能简单地操作这个系统。silicon software开发的visual applets为最先进的fpga设计工具，经由易学易用的图形接口，可以开发出图像处理专用的fpga configuration，即所谓的applet。借由visual applets可以：(1) 使影像卡变成一个高效能的影像处理器；(2) 现代fpga的潜能可由任何使用者自行发挥；(3) 影像处理的解决方案可在数分钟内完成；(4) 达成硬件阶层的快速开发。使用visual applets，不必拥有较深的硬件知识，如数字电路、时间分析、fpga硬件设计语言。使用visual applets只要将各个处理模块之间作链接，各种链接的兼容性可实时显示，各模块间能以不同的位相关系作链接，同时也能评估系统需求资源与数据带宽分析，甚至于分析每个模块连接点之间的流量，快速找到设计瓶颈。设计完成后，产生编译档只要几分钟的时间，期间不需要任何人工动作，applet可立即在 microdisplay中使用并进行参数设定，同时也会自动产生一个visual c+ sdk project。3结语本文根据以fpga芯片为核心设计了一种通用的机器视觉系统，可以应用到产品生产线、车辆智能监控管理等各种场合。采用最新的高性能视觉标准和国际知名大公司开发的ip核以及主机visual applets 软件的使用极大地提升了系统的性能、可靠性。参考文献1feith. gige vision ip specification: feith sensor to image gmbh eb/ol. 20111010. http:/www.feith.de.2高原.吉比特以太网成就你身边的摄像机j.电子技术,2006(9):1517.3段峰，王耀南，雷晓峰.机器视觉技术及其应用综述j.自动化博览,2007(10):3942.4吕伟新，印丽颖.一种基于视觉的三维轮廓检测系统j.华中科技大学学报:自然科学版,2008(15):913.5陈增辉，林伟，刘滔.高速图像采集和传输系统设计j.现代计算机,2010(7):2325.6李琪，卢荣胜，刘宁，等.多gige相机高速视觉系统的架构与处理速度研究j.电子测量与仪器学报,2010(11):5255.7