图像处理在车牌图像预处理中的应用_第1页
图像处理在车牌图像预处理中的应用_第2页
图像处理在车牌图像预处理中的应用_第3页
图像处理在车牌图像预处理中的应用_第4页
图像处理在车牌图像预处理中的应用_第5页
已阅读5页,还剩12页未读, 继续免费阅读

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

图像处理在车牌图像预处理中的应用

•灰度化

•车牌图像灰度化

•直方图均衡化

•灰度拉伸

•二值化

•全局阈值法和局部阈值法

•适用于车牌的二值化方法

•边缘检测

•图像梯度

•几种常见的边缘检测算子

・适用于车牌的边缘检测算子

一、车牌识别系统结构

车牌识别系统通常由数据采集(车牌图像摄取),车牌提取,车牌识别几个主要部

分

组成,其系统结构如图1.1所示:

车牌自动识别系统中:

图像摄取主要由硬件部分完成,它提取汽车的前景图像,将摄像头的视频信号转

换为数字图像信号送给计算机处理。

车牌图像预处理。由于拍摄的自然环境及光照条件的影响,车牌图像中存在许多

干扰,对车牌的定位带来不便,为了更好的提取车牌,需要对车牌图像进行预处

理以保证车牌定位的质量。

VLP检测。即图1.1中虚线环绕的部分,这一部分是系统的核心,它的实现影响

着整个系统的性能,主要利用模式识别、数字图像处理、信息论等知识对车牌图

像中的车牌进行定位及提取操作。

字符分割及识别。当车牌被成功提取后,需要分割其中的字符,并利用先验知识

对其进行识别,以得到最终结果。

二、图像处理具体过程

图像处理是人工智能在计算机图形学中的一个重要分支,是车牌识别系统的

理论依据。在自然条件下摄取的车牌,除了包含大量噪声外,还具有多样性,为

了使系统能够更好的分离车牌,必须对原始图像进行预处理。本章主要讨论车牌

图像预处理的一些常用方法,包括图像的灰度二值化、噪声处理、边缘提取等。

当摄像机从外界摄入视频图像时,首先把它转换为静态图片,再送入计算机进

行处理。由于拍摄环境的多变性,车牌图像中存在噪声和干扰,这些给车牌提取

带来困难。系统首先将愉入的彩色图像灰度化,并且进行亮度平均,使图像具有

较好的对比度:对图像进行边缘提取操作前.,往往先要进行噪声抑制操作,以提

高边缘提取的质量;二值化则多用于已提取车牌的处理上。

车牌图像预处理的难点在于:

1.车牌图像质量不佳,灰度化后会弱化图像中的车牌信息,因而好的灰度化处理

非常必要;

2.由于光照的原因,车碑很可能出现过分灰暗或明亮的情况,这种条件下的二值

化处理应该分情况讨论,对应特殊的分割阈值;

3.图像中的复杂背景具有丰富的边缘信息,不但会增加系统识别的难度,也会造

成系统的误判,怎样去除这些不必要的背景十分美键。实际操作中,因为车牌处

于图像的中部偏下位置,所以通常取图像的下半部分进行处理或优先考虑图像

中靠下方的位置。

4.车牌中的字符很容易在预处理中发生变形或丢失信息的情况,要注意保持车牌

的字符信息。

2.1灰度化

在计算机中,一幅图像由若干个像素组成,每个像素都带有图像的相关信息(如

背景、目标、噪声等),而图像处理技术则通过对这些像素进行处理而得到我们所

需要的关键信息。

211车牌图像灰度化

一般情况下,输入计算机的视频截取图像为RGB格式,即彩色图片。由于这

种图像包含大量的颜色信息,它的每个像素都具有三个不同的颜色分量

R(Red)、G(Green)、B(Blue),这样的图片占据的存储空间很大,而且在对其进行

处理时也会耗用较多的系统资源,导致系统的执行效率不高。与之相比,灰度图

像只含有亮度信息,从而大大减少「系统的工作时间,满足汽车牌照识别系统的

实时性要求。因此,在对图像进行其它预处理之前,一般先将彩色图像转换成灰

度图像。

最基本的灰度化方法就是直接使用R、G、B三分量中的最大值或平均值来

代替各个分量。灰度化以后,相同颜色的像素具有相同的亮度,这就形成了以亮

度为层次的灰度图片。灰度值大的像素比较亮,反之较暗。通常把灰度值分为

256等份,0度表示最暗的级别,即黑色;255表示最亮的级别,即白色。

图像的灰度化转换还有其它不同的算法,比较常见的是给像素的R、G、B分量

各自增加一个特定的加权系数,相乘后求和,其计算结果作为灰度值,转换公式

如下:

I=0.229R+0.587G+0.114B

式中I表示像素的灰度值。

加权系数的取值建立在人眼视觉模型的基础上,对于人眼比较敏感的绿色分量,

赋予较大的系数,而对于人眼比较迟钝的蓝色分量则取较小的系数。这样得到的

灰度图像在视觉上比较接近人的主观感觉。

2.1.2直方图均衡化

由于灰度图像建立在彩色图像的基础上,所以在不同的光照条件下,对同一辆汽

车所拍摄的图片有着很大的差异。就车牌图像而言,灰度的动态取值范围越广(即

图像的对比度越大)越有利于图像分析。

图2.1白天拍摄的彩色汽车图片图2.2傍晚拍摄的彩色汽车图片

图2.3白天的汽车灰度图图2.4傍晚的汽车灰度图

图2.1-2.4分别给出了白天和傍晚时相同汽车的彩色车牌图像及灰度图像。

从图中我们可以看出,由于白天的光线较好,使得汽车的灰度图像存在较大

的对比度,肉眼上更容易识别。而在实际拍摄条件下,影响图片亮度的因素除了

天气外,汽车自身的反光现象也是一个原因。

当车牌图像在反光或傍晚拍摄时,图像中的白色或黑色区域较大,使得空像

的整体像素灰度值偏向于两个极值。在这种情况下,车牌区域的对比度就被弱化

了。因此,我们要使图像的灰度值分布平均化,这就是直方图均衡化的作用。

图像的直方图是一个概率函数图像,它表示了图像中各种像素值的出现概率,

而直方图均衡化则是通过某种变换,得到一幅具有均匀灰度密度分布的新图像。

其结果是扩展了图像的灰度取值范围,从而达到增强图像对比的效果。

设原始灰度图像的像素数目为N,那么,直方图均衡化的具体计算步骤如下:

I.列出原始图像的灰度级,=0J,2…£-1,其中乙是灰度级的个数;

2.统计各灰度级的像素数目底/;),/=0,1,2…Z-1:

3.计算原始图像直.方图各灰度级的频率//;.)=幺2,/.=012..£-1:

N

4.计算用于灰度变换的函数TXOZS,'二°」2.4-1:

/=oN

5.计算映射后输出图像的灰度级力=)7(。)+$min+0.5J,

/二0,1,2…尸-I,P为输出图像的灰度级个数,INT为取整运算:

6.统计映射后各灰度级的像素数目〃⑴),/=0,12,一I;

7.计算输出图像直.方图。(力)=/,/=0,1,2…产-1:

N

8.用/;和力的映射关系调整原始图像的灰度级,获得直方图分布近似均匀的图像。

根据原图像的直方图统计值就可以算出均衡化后各像素的灰度值。进行上述步骤后,

由方图中灰度分布较广的部分被拉伸,稀疏的部分被压缩,使得各个灰度值的;II现概率

基本嗷,这样在•定程度上提高了图像的对比度。

图25原始汽车灰度图图2.6均衡化后的汽车灰度图片

图2.7原始灰度图片的直方图

图2.8均衡化后图片的直方图

直方图均衡化的结果如图2.528所示,可以看出经过均衡化处理后图像的时比

度得到了增强,直方图中的灰度函数分布基本平均。

2.1.3灰度拉伸

由于直方图均衡化是对图像中已经存在的像素值进行平均,那么图像中出现

较多的像素级就在均衡过程中起到了主要贡献作用。相对灰度级出现较少,图像

灰度处于极端的情况而言,我们需要图像的像素值在各个灰度级都有均匀分布

(包括原图中不曾出现的灰度级),灰度拉伸可以达到这个效果,从而起到增强图

像对比的作用。

如果造成图像的对比度不足,主要原因在于拍摄目标的远近不同,使得图像中

央区域和边缘区域的灰度失衡,或是由于摄像头在扫描时各点的灵敏度有较大

差异而导致图像失真,或是由于曝光不足(或过度)致使图像的灰度值大小被限制

在一个很窄的范围内。这时的图像模糊不清,似乎没有灰度层次。

假设原图像f(x,y)中,大部分像素的灰度级在一个较窄的范围[a,b]内,又或

者我们只对灰度级在某个范围内的像素感兴趣,经过线性灰度变换后,可以将这

一灰度范围[a,b]扩展到新图像g(x,y)中一个比较大的灰度范围[c,d]o并且有

。f(x,y)和g(x,y)的变换公式如下:

a

d_(

以彳/)=\"——L/5y)-c/(苍,)v〃

b-a

加_》次%,)_〃]+db4/(x,y)<〃z

从灰度直方图分析•,由于新图像的灰度范围变大,所以对数字图像来说,尽

管变换前后像素的个数不变,但不同像素的灰度差变大,增强了图像的对比度。

同时:这种两端截取式的变换使小于灰度级a和大于等于灰度级b的像素分别直

接变为c和d,将会造成部分信息的丢失。

因此,可以采用分段线性灰度变换以减少信息的丢失,将图像灰度分成两个以上

的区间分别进行线性变换。这种方法的优点在于可以根据需要来拉伸感兴趣的灰

度范围,相对抑制不感兴趣的范围。分成三段进行灰度变换的公式如下:

上/(")

a

g(x,y)=\"——[/(x,刃-司+ca4/(乐y)<b

b-a

</(x,

m-bby)<m

公式对灰度范围[a,b]进行了灰度扩展,而对灰度范围[0间和[b,m]进行了压缩。通

过调整折线拐点的位置和分段直线的斜率,可以对任意灰度范围进行扩展或压

缩。利用某些非线性函数,例如对数函数、指数函数等作为变换函数,可实现图

像的非线性变换。对数变化一般为:

1犷(2)+1]

g(")=〃+

b*Inc

其中a、b和c为可调参数,用于调整曲线的位置和形状,它使图像的低灰度区

得以扩展,而高灰度区得以压缩。与之对应的指数变换一般为:

g(x,y)=1

其中a、b和c同样为可调参数,用于调整曲线属性。它的效果与对数变换的

效果相反:扩展了图像的高灰度区,压缩的图像的低灰度区。利用对数函数进行

灰度变换在实际应用中有重要意义,它能扩展低灰度区,符合人们在视觉上的主

观感觉。

图2.9原始汽车灰度图片22.10灰度拉伸后的汽车灰度图片

图2.11原始灰度图片的直方图

图2.12灰度拉伸后图片的直方图

如图2.9-2.12所示,可以看出经过灰度拉伸处理后的图像的灰度分布区域由

(0,200)变换到另一个区域(128,255),图像的亮度明显增大。

2.2二值化

一幅灰度图像的亮度信息由256个灰度级组成,它能够呈现较为丰富的明

暗度。当我们识别车牌时,需要把目标从背景中彻底分量出来。为了尽可能少地

减少背景像素干扰,常常直接把图像分为目标和背景两部分。这样我们只能用两

个灰度级:。和1。通常目标像素值为1,背景像素值为0。要得到这种黑白分

明的图像,我们需要对图像进行二值化。

设图像二值化前的像素值为f(x,y),其中(x,y)表示图像的空间点坐标,变

化后的像素值g(x,y)为:

0

其中c为我们所说的阈值。

目前,在车牌识别系统中常用的灰度二值化算法主要包括全局阈值法和局部

阈值法等。并且出现了一些针对车牌图像的特殊二值化算法。由于上文介绍了图

像的灰度化变换,所以下面将逐一介绍基于灰度的三种阈值法算法。

2.2.1全局阈值法和局部阈值法

顾名思义,全局阈值法就是从图像的整体角度出发,计算图像的单一阈值

的方法,主要有迭代法和Otsu法等,这里我们介绍Otsu法。

Otsu法是常用的一种阈值选取方法,这是一种类间方差阈值法,它是在最小

二乘函数的基础上推导出来的。基本思想是:取一个阈值k,将图像中的像素按

灰度值分为大于等于k和小于k两类,也就是我们所说的目标和背景两类。求

出两类像素的方差和总体方差。然后给定三个分离指标:

任取其中一个,这里我们取第一个分离指标Q1,找出使其值最小的k即为

最佳阈值。其意义是使不同种类的方差最大,相同种类的方差最小。用P(i)示图

像各灰度级的频数,则阈值的计算步骤为:

1.求出图像中的最大灰度级勺J

2.令4=0;

3.利用灰度级〃把图像像索分为两类,按卜列公式求出两种方差。;和力:

。:=叱0」+匕4°

。;二叱匕

各参数的计算公式分别如下:

叱=£%/)'nm

匕这P(i)

/=()/=/+!

肥⑺

f〃解、二3〉-iP--3-

rJ=l+lU”7■

iy

4-2

4.令k=k+1,重复计算上一步,直到k取到最大灰度级

maxk;

5.找出令分离指标

Q1最小的k值,该值为最佳阈值。

局部阈值法则是针对灰度图像中的每一个像素点进行计算的。它将图像分块,

为每一块选取一个阈值进行分割,如果某块内同时有目标和背景,则直方图呈明

显双峰状态,可定出局部阈值;如果一块内只有目标或背景,那么直方图不呈双

峰,但可根据邻近有双峰区域的阈值通过内插而得到这一区域的阈值。局部阂值

法的难点之一是判断直方图是否存在双峰。一种较为直观的方法是:如果某一块

只有目标或背景,那么它的差分值就比较小。算法设计如下:

1.获得整幅图像的差分图,;

2.统计”中差分值最大的20%的点的均值〃,,/:

3.对于图像中的某•块,取得其在,中对应的区域《;

4.统计必中差分值最大的20%的点的均值;

若〃a丁某一给定值A,则认为这一块中只右.目标或背景,反之则认为其中同

时含有两者。

由于全局阈值法是从图像的整体角度出发计算单一阈值,因而计算时间较短,适

用于目标与背景存在较大对比度的图像;而局部阈值法则是逐个计算图像中的每

个像素灰度级,保存了图像的细节信息。相比全局阈值法来说,它的计算时诃较

长,计算量较大,但适用于背景信息丰富的图像。

2.2.2适用于车牌的二值化方法

由于车牌图像的特殊性,它包含的信息一般要少于普通的图像,综合考虑全局

阈值法和局部阈值法的优缺点,可以得到一种比较适合车牌图像的二值化方法。

实际处理中,由于光照不匀、灰度级动态范围太窄和车辆牌照污损等原因影响,

致使车牌的质量退化,常存在严重的伪影和模糊的字符边缘,因而极大影响了车

牌图像的二值化效果。而将牌照图像的空间分布特征[21]与最大类间方差的统计

特征相结合后,不仅能消除不均匀光照引起的伪影,还能减少笔画出现断裂现象

的几率,二值化效果较好。

假定牌照图像中字符像素所占比例为

R1,背景像素所占比例为R2,则O<R1,R2<1ERl+R2=lo

该灰度图像像素均值为:

其中4为字符像素灰度,应为背景像素灰度;

方差为

C?=0(&-〃)2+々(身2-〃)2

由以上两式得

厂=上(身-")2

Z;

由此导出的字符灰度为

"="士恬

背景灰度为

g2=M±hc

经过二值化后的车牌图像仍有可能出现小范围的泛白现象,但是这种现象对后面的

边缘提取没有太大影响。如图2.13214所示:

图2.13均衡化后的汽车灰度图片图2.14二值化后的汽车图片

2.3边缘检测

数字图像的边缘检测是图像分割、目标识别、区域形状提取等图像分析领域十分

重要的基础。边缘是图像的重要特征,图像理解和分析的第一步就是边缘检测。

在车牌识系统中,车牌区域存在大量的边缘信息,这是车牌区域不同于其它区域

的一个重要特征。因此,边缘检测对于车牌识别非常重要。

所谓边缘,就是指其周围像素值的变化呈现阶梯状或屋顶状的像素的集合,它存

在于目标与背景、目标与目标、区域与区域、基元与基元之间。边缘反应了空间

频率的变化,是图像分割的重要特征,也是纹理信息形状特征的基础。所以,我

们要把车牌从图像中分割出来,就要找到车牌区域与其它区域之间的边缘,从而

进行图像分割。由于边缘处于两个不同区域之间,所以边缘具有方向和幅度两个

特征。沿边缘走向,像素值的变化平缓;而垂直于边缘走向,像素值的变化明显。

它的存在相当于函数中的转折点或拐点,因而边缘上像素值的一阶导数较大,二

阶导数为冬。

2.3.1图像梯度

在介绍边缘提取方法之前,先引入图像梯度的概念。对于图像f(x,y),它在点

(x,y)处的梯度定义为一个矢量:

在介绍边缘提取方法之前,先引入图像梯度的概念。

对于图像/(即力,它在点(国力处的梯度定义为个矢量:

8

W/0-)]二2.1

式中空和更分别是f“,y)在彳和y上的偏导数o

ardy

矢量力(x、y)]的方向是/(x,y)在(乐y)点变化率最大的方向,其幅度为:

4/3,/)]=J(第2+鼾(2.19)

对于数字图像,一般用差分来近似微分运算。常用的梯度差分公式如下:

力G,力]:JL/V,j)一/(-1,/)『+L/V,力一/(/,j+(2.20)

由于上式的计算非常耗时•,所以实际计算中常采用绝对差算法,公式可简化为:

仇/V,力]二|/(z;7)-/(/+1,7,)1+1/(4J)-/(/;7+1)|(2.21)

而公式(2-22)可用两个卷积之和来表示:

。亿力二|G」+|G,|(2.22)

其中,。和d分别由以下模板计克:

I-11「10一

M=M-

00J10

2.3.2几种常见的边缘提取算子

边缘检测是确定图像中物体边界的方法,它能用边缘点构造出物体的轮廓。边缘检

测实际上就是计算图像不同方向上的梯度,以得到需要的边缘信息。对梯度进行近似计

算还可有很多方法,根据使用模板的不同,提出了许多不同的边缘检测算子。常用的图

像边缘提取算子有Roberts算子、Sobel算子、Prewitt算子、Laplacian算子等。

1.Roberts算子

图2.15Roberts边缘检测算子

图2.15采用了两个2x2卷枳核来形成Roberts边缘算子,待处理图像中的每个像素

点都使用这两个核进行卷积,可得到•幅边缘幅度图像。

2.Prewitt算子

类似于Roberts算子,Prewitt算子也由两个卷枳模板构成。

图2.16Prewitt边缘检测算子

3.Krisch算f

图2.17所示的8个卷积模板组成了Krisch边缘算子。待处理图像中的每个像素都

用这8个核进行卷枳操作,每个模板都对某个特定的边缘方向做出最大响应,所有方向

中的最大值作为边缘图像的输出,最大响应掩模的序号构成了边缘方向的编科。

+5+5+5-3+5+5-3-3+5-3-3-3

-30-3-30*5-30+5-30+5

-3-33-3-3-3-3-3+5-34-5+5

-3-3-3-3-3-3♦53-3+S+5-3

-30-3+50-3+50-3+50-3

+5十5+5+5+5-3+5-3-3-3-3-3

图2.17Krisch边缘检测算子

4.Sobel算子

Sobel弟子的卷积核如图2.18所示,这两个核分别对垂克边缘和水平边缘有敏感响

应,并以两个响应的最大值作为输出。

图2.18Sobel边缘检测算子

5.Laplacian算子

Laplacian算子是对二维函数进行运算的二阶导数算子,其模板如F:

图2.19Laplacian边缘检测算子

与前面几种边缘算子相比,Laplacian片子是种二阶导数算子,它找出梯度局部最

大值对应的点,并认为这些点才是真正的边缘点。•阶导数的局部最大值对应着二阶导

数的零点。通过找出图像灰度的二阶导数零点,就能找到精确的边缘点。

当Laplacian算子的计"值为零时,就认为该点是边缘点。由于这种算子用模板运

算来近似像索点的二阶导数,所以要排除灰度值本身为零的无意义点。Laplacian兑子不

依赖边缘方向,它具仃旋转不变,即各向同性的性质。但

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论