基于机器视觉的室内农药自动精确喷雾系统

1、基于机器视觉的室内农药自动精确喷雾系统    引言当前我国森林病虫害严重制约了造林绿化和生态 环境 建设,但病虫害防治效率却是相当低下:施药技术落后,不管有无施药目标都采用均匀恒速的施药方法,而没有考虑到林木的栽植密度、株距及树冠形态等个体差别;施药器械落后,无论是施药器械的药液混合装置、动力装置还是喷雾装置,其 机械 化、自动化、精确化程度都相当低。落后的防治手段使农药的利用率低,花费大;农药残留、农药雾滴飘移加重了环境和生态问题;直接和频繁接触农药危及到操作者的人身安全。精确林业技术提供了解决办法,即在林业生产过程中运用视觉传感器、卫星定位等高新技术

2、,在作业过程中实时测知 工作 对象所需工作的质、量和时机等时空数据,以求获得最好的施药效果和最小的环境代价,从而节约资源,保护环境。从 文献 15可以看出,虽然目前已经有一些学者开展了机器视觉的精确施药方法研究,但其研究对象主要为田间作物如棉花、杂草等,还很少有人研究用于林木病虫害防治的精确施药系统,因此开展针对林木病虫害防治的精确施药系统的研究很有必要。1 室内农药自动精确喷雾系统设计1.1 设计要求根据研究目标要求,本系统需要完成以下功能:模拟施药过程中施药器械和施药目标之间的相对运动;利用机器视觉技术采集实时树木图像,通过图像处理完成目标树木的分割和识别;以图像处理结果为依据进行施药决策

3、;上位机PC和下位机单片机进行数据交换,将决策结果转化为喷雾指令,并控制喷雾执行系统实现自动精确喷雾。1.2 系统硬件组成室内农药自动精确喷雾系统的硬件主要包括:运动模拟试验台、彩色CCD摄像头、真彩色图像采集卡、PC机(上位机)、单片机芯片组(下位机)、智能喷雾台(包括若干智能喷头和安装喷头的喷雾台架、压力喷雾系统)及若干接口电路(如RS232/TTL电平转换、功率放大和光电耦合电路等),共分为运动模拟装置、图像采集(机器视觉)装置、自动精确施药装置等3部分。设计的传输带式模拟运动试验台用于模拟施药过程中施药器械和施药目标之间的相对运动,同时便于机器视觉系统采集到连续目标的运动图像。根据树木

4、自相似原理,在传输带上安装了树叶以模拟实际树木。工作台的启动、调速由西门子矢量型变频调速器6SE3214控制电动机来完成。图1中电动机1通过联轴器2带动主动轴3转动,从而带动传输带7运动,这样目标8就跟着传输带7连续地运动起来。通过调节张紧装置4可以调整传输带7的张紧状态,以使其运行平稳。 根据实际施药工作情况,以及实时图像采集处理要求,传输带的速度以23 m/s为佳。选用的电动机的转速为1 440 r/min,由带轮直径d=0.12 m得到传输带的速度达到10 m/s。自动精确施药装置由单片机、喷雾台架、喷头系统等组成。将若干个喷头布置在喷雾架横梁上,以此来测试图像处理和喷雾决策结果的正误。

5、每个喷头由一个二位二通电磁阀来控制其开闭。电磁阀的控制信号由单片机的I/O端口提供。电磁阀工作电压为220V,单片机发出的控制指令为5 V,因此在电磁阀和下位机之间接中间继电器,喷头连同电磁阀和继电器一同安装在盒子上。图2为喷头控制原理图。 1.3 系统软件组成开发了两套软件系统:一套用VC开发,是基于Windows平台的应用程序,用于控制硬件实现目标图像采集、图像分割、智能决策、信息发送等功能;另一套由汇编 语言 编写,运行于单片机上,实现信息接收、喷雾指令发送功能。利用Microsoft公司提供的VFW(Video ForWindows)开发了Capture类,实现模拟运动树木图像的连续采

6、集。视频流中帧图像的格式由图像采集卡和PC机显示卡决定,本系统中为DIB(设备无关位图)格式。利用Capture类的关键帧提取功能,从视频流中提取出特定的关键帧进行分析处理,从而减轻CPU负担。采集到的图像要进行图像分割,将目标树木从背景中分割出来。典型的基于颜色的分割算法将获取的图像从RGB模型转化为HSI模型,以此来削弱光照强度的影响。但色彩模型的转换非常耗时,对于实时性要求高的场合,这些图像分割算法根本不适用。文献6指出,彩色图像像素的RGB灰度级在很大程度上依赖于光照强度。在不同的光照条件下,直接用RGB值来进行识别会导致错误的结果。而利用简单的算术操作来组合RGB分量形成相对色彩因子

7、(relative color indices)进行彩色图像分割可以大大降低光照强度的影响。在实验室可控光条件及室外 自然 光条件下拍摄大量绿色树木的图像进行RGB各分量的分析发现,绿色树木图像的G分量值都相对较大,而R、B分量值都相对较小。图像中的背景则鲜有这种现象。据此设计了2G/(R+B)和(R+B+G)/3这一组相对色彩因子来实现树木图像与其背景的分割,其中加入(R+B+G)/3是为了保证图像有足够的光照强度,避免图像中的暗区引起错误分割。为了排除随机噪声的干扰,对分割后的图像进行中值滤波,得到最后的分割结果。由图3可见,当阈值取得合理时,能获得良好的分割效果。由单片机的I/O口输出信

8、号来进行继电器的控制存在以下问题:继电器的工作电压较高,因此从单片机输出的信号需要经过驱动电路进行转换,使输出的驱动电压能够适应继电器线圈的要求;继电器动作时,对电源有一定的干扰。为了提高系统的可靠性,在单片机和继电器之间用光电耦合器隔离。2 系统运行测试在实验室内,将变频器工作频率设定在220 Hz范围内可变,即目标和摄像头相对运动速度为1.313 km/h。采集到的视频流帧速率为10 f/s,关键帧采样间隔为0.3 s,即在视频流中每3帧抽取一帧进行图像分割。为了更加清楚地在不同运行速度上观察系统施药决策和精确施药的效果,在测试时仅控制一个喷头的开闭。运行测试表明,当系统运行于低速状态(1

9、.35 km/h)时,系统各环节协同较好。采集到的图像较清晰,图像分割结果和静止状态下分割结果基本一致,电磁阀工作稳定可靠,喷头的开闭和预期的完全一致。不考虑雾滴飘移等因素,有80%左右的液体击中目标,自动精确施药实现的效果较好。但当系统运行速度增大时,出现了以下问题:由于运动速度较大,采集到的图像开始出现模糊和拖尾,当速度大于7.8 km/h时,这种现象相当明显,图像噪声也有所增加,图像分割正确性下降。在0.3 s的采样间隔下,由于相对运动速度过大,CCD系统来不及采样,造成无目标的错误决策。由于电磁阀的 机械 响应特性,电磁阀需要足够长时间的高电平(或低电平)来开启(或闭合)阀门,系统运动

10、速度过大,使得目标在控制区中的时间缩短,决策程序不能在此期间生成足够长的高电平来开启阀门时,会发生错误。为解决以上问题,提高视频流的帧速率,同时缩短关键帧的采样间隔。在5.27.8 km/h的运行速度上,将系统帧速率提高到15 f/s,关键帧采样间隔为0.133 s(即每两帧抽取一帧进行图像分割)。经过以上调整,系统的可靠性有较大改善。但关键帧的采样间隔不能无限制缩短,关键帧的采样间隔必须比分割一帧图像所需的时间长,否则系统不能正常工作,因此当系统的运行速度更大时,由于受到图像处理速度的限制,不能再通过缩短关键帧采样间隔的方法来提高系统性能,从而可看出,图像处理算法的效率直接影响系统精确施药性

11、能和效率。在本系统中,传输带的运动速度(相当于施药目标和施药器械之间的相对运动速度)是至关重要参数,因为它直接决定了本系统是否有 经济 实用价值。在实际林木病虫害防治过程中,一般要求施药速度达到810 km/h。从系统实验室测试结果来看,在低速状态下系统运行是可靠的,在中速状态下,也可以用调整状态参数的方法(主要是缩短关键帧采样间隔)使之可靠运行,由于实验室内所用的模拟目标远比实际树木小,模拟目标间的间隔也要比行道树间的实际株距小,因此,通过相似原理可以推断出进行户外工作时,系统运行速度可以进一步提高,达到10 km/h以上,但仍需进行户外测试加以证实。3 结束语研究的室内农药实时精确喷雾系统

12、以实验室 环境 中的试验模型为研究对象,模拟林木病虫害防治农药喷雾的真实情况,分析和探索了在 自然 环境中基于实时视觉传感技术的农药精确喷雾的可行性和效果。建立了一套图像处理算法,并以此为依据做出决策来控制喷头实现农药的精确喷雾。对施药过程中的运动模拟、树木图像采集、图像分割、施药决策、喷雾执行等方面作了深入的探讨和研究。 参考 文献 1  Steward B L, Tian L F. Machine-vision weed density estimation for real time, outdoor lighting conditions.Transaction of ASA

13、E, 1999, 42(6): 189719092  Steward B L, Tian L F, Tang L. Distance-based control system for machine vision-based selective spraying.Transactions of the ASAE,2002,45(5): 125512623  Li Zhigang, Fu Zetian, Shi Yan, et al. Prototype system of automatic idenfication cotton insect pests and inte

14、lligentdecision based on machine vision. 2003 ASAE Meeting, Paper 031107.4  Kevin Gillis P, Giles D Ken, Slaughter David C, et al. Injection and fluid handling system for machine-visioncontrolled spraying. 2001 ASAE Meeting, Paper 011114.5  Chi Y T, Chien C F, Lin T T. Leaf shape modeling and analysis using geometric descriptors derived from beziercurves. Transactions of ASAE, 2003, 46(1);1751856  Ei -Faki M S, Zhang N, Peterson D E. Factors af