开题报告--监控系统中的行人检测算法的实现.doc

毕业设计（论文）开题报告题 目监控系统中的行人检测算法的实现学 院通信工程专 业信息对抗技术姓 名 班 级 学 号 指导教师 一、综述本课题国内外研究动态，说明选题的依据和意义科学技术的快速发展，在给人带来利益和便利的同时，也给人带来了安全隐患。如为保护某些具有较高的经济价值或技术优势的核心技术及机密而设立的禁区，交通工具的快速行驶等都会给人们带来安全隐患。因此，监控系统（特别是智能监控系统）越来越受到人们的重视。纵观各种影响社会安全稳定的事件，给人们带来严重损失的除不可控因素（地震、火山喷发等）外，主要是人的行为。因此，在监控系统中实现行人检测将可以避免巨大的人身、经济等损失，也成为了国内外研究的热点。目前，清华大学、浙江大学、上海交通大学计算机实验室以及中国科学院自动化研究所等是国内在行人检测研究上比较著名的高校或研究机构。而且，中国科学院自动化研究所的生物识别与安全技术研究中心开发的人脸识别系统已经投入使用（2008 年北京奥运会和 2010 年上海世博会等重大活动）。浙江大学人工智能研究所采用了单目视觉的方法，中科院的李和平、胡占义等提出基于监督学习的异常检测和行为建模算法。国外著名的智能监控系统有ibm的智能监控系统和以色列的ioimage公司推出的智能监控系统。另外，卡耐基梅隆大学开发的 nablab.10 系统已经应用于汽车的检测系统。虽然国内的监控系统行业近些年发展较快，但是和国外相比仍有一定的差距。监控系统中行人检测技术研究至今，比较成熟的算法主要有leibe等人基于 “局部特性的编码”进行的行人检测、oliver等人利用边缘图像来对不同的形状模型进行匹配(asm)和dalal与triggs 提出的基于梯度直方图 hog+支持向量机svm的行人检测算法等。而在所有的行人检测技术，基本都包括了运动目标检测和运动目标识别两个关键技术。运动目标检测是指通过比较视频图像中像素点的变化判断是否有运动物体，并通过图像处理技术将运动目标分割出来。运动目标的检测是运动目标识别的前提和保障，目前主要有光流法和帧差法（包括对称帧差法和背景减除法）。运动目标识别是对运动目标检测阶段获得的运动目标进行处理，识别出其是行人还是其他的物体。目前主要有基于运动的方法、基于模板匹配的方法、基于统计学习方法3等。opencv 是著名的开源的计算机视觉的函数库，由大量的 c 函数和 c+类构成作为接口，实现了图像处理和计算机视觉方面的很多通用算法。而且opencv中的机器学习函数库实现了机器学习研究领域中比较常见、应用较为广泛的学习方法，包括了贝叶斯分类器、k 邻近算法、支持向量机、决策树、adaboost 算法以及神经网路算法，基本上覆盖了机器学习领域中的主流算法。因此，使用opencv能够较灵活的实现行人检测。二、研究的基本内容，拟解决的主要问题： 监控系统的行人检测算法的实现主要包括运动目标检测和运动目标识别两个关键技术，在运动目标检测阶段可以采用帧差法，目标识别阶段可以采用基于hog特征的行人识别。1）帧差法帧差法是指通过当前帧与背景图像相减得到的帧或连续的两帧图像的差值得到中间帧运动对象的轮廓。通过该方法可以获得roi（感兴趣区域）区域，进一步缩小检测区域。2）hog特征 hog特征是在被称为单元（cell）和块（block）的网格内进行密集计算得到的，其中有若干像素组成一个单元，若干相邻的单元组成一个块。hog特征描述了图像局部区域的梯度强度和梯度方向的分布情况，该分布情况能对局部对象外观和形状进行很好的表征，适合于行人检测中肢体的外形变化和自由移动。3）opencv监控系统中行人检测算法的实现使用opencv开发工具，opencv提供了大量的图像处理方面的常用函数，而且是免费开源的，支持多种操作系统。 但是opencv并不支持所有的视频编码格式。三、研究步骤、方法及措施：研究开始时，首先要学习视频和行人的基本特性，了解opencv。接下来要查找文献，了解现在行人检测技术的发展，翻译文献，做出开题报告。然后确定算法流程，学习opencv工具。接着利用opencv工具实现行人检测算。最后，撰写论文，验收成果并答辩。本文拟采用的流程如下图2所示。输入视频预处理hog特征提取行人识别 图2 行人检测流程图视频输入是将通过摄像机或相机等硬件设备采集到的图像视频信息作为信号输入行人检测系统中。预处理包括图像编解码、图像处理、图像分割等，该阶段的目的是将感兴趣区域roi分割出来，作为下一步hog特征提取的输入信号。图像分割又分为静态的图像分割和运动的图像分割，前者适合使用背景减除帧差法，后者适合连续帧帧差法。hog特征提取部分是将感兴趣区域重新编码，输出特征向量作为hog特征，其主要思想是用梯度方向分布来表示行人形状和直立垂直特性。行人识别阶段是从其它目标中区分出行人，主要通过行人特定的特征匹配方法，或通过一般的分类方法，例如支持向量机、神经网络等来决定 rois 中是否包含行人。因支持向量机、神经网络等方法具有一定的难度，因此本文选用了基于hog特征的行人识别。在算法实现过程中，如何提取hog特征是关键。计算hog特征大致可以分为如下图3所示的五个步骤。输出特征向量滑动窗口计算图像特征向量归一化权重梯度方向直方图统计权重梯度方向直方图输入兴趣区域（roi）图像标准化与网格设置计算图像梯度 图3 hog特征提取流程图hog特征具体计算过程如下 假设用表示一幅图像，表示图像在像素点处的灰度值。（1）像素点处的水平梯度和垂直梯度（2）计算梯度强度和梯度方向 = = （3）将每个roi图像分割成若干个单元（cell），如dalal等人提出的hog 特征是针对1616 像素大小的block，每个 block又平均分为4个cell，即每个cell的大小为88 像素。每个cell 的特征是其内部88个像素的特征向量之和。 （4）计算每个单元格的方向直方图 假设将在区间划分为个均匀的区间(bin)，表示像素点在第个梯度方向的幅度大小，则：= 其中 那么，像素点处的梯度特征就可以用一个n维向量表示。（5）归一化直方图的每一块（block） 假设每一个block内有个cell，为了消除光照等影响，对block内的cell进行归一化： 表示在单元（cell）中，第个方向区间的累计强度在block中所占的比例，其中，是一个很小的数，避免分母为0。而每个cell可以用n维向量表示，每个block由m个cell组成，那么，每一个block就可以用维向量表示。（6）、将所有归一化的block串在一起构成人体特征向量。行人识别的计算方法使用bhattacharyya 距离公式计算图像roi区域和人的模板的hog特征的相似度。：样本矢量第个分量 ：模板矢量第个分量 ：矢量分量的数量当该结果越大时，说明相似度越高，此时roi区内有行人。四、研究工作进度：进度安排：序号时间内容12012/9/132012/10/8学习视频和行人的基本特性22012/10/92012/10/25现状查询，文献阅读（文献综述），翻译，开题报告32012/10/262012/10/31确定算法流程，学习编程42012/11/12012/11/30算法的学习和实现52012/12/12012/12/25撰写论文62012/12/262013/1/10成果验收及论文答辩五、主要参考文献：1 张旭东.行人检测技术研究d.电子科技大学2011年硕士学位论文.第3页2 李和平，户占义，吴毅红等，基于班建东学习的行为建模与异常检测j.软件学报,2007年3月,18(3):527-5373 张海荣. 视频图像中的行人检测算法研究与实现d.东北大学2009年硕士学位论文.第6页4 chang, shyang-lihyang, fu-tzuwu, wen-pocho, yu-anchen, sei-wang. nighttime pedestrian detection using thermal imaging based on hog feature. proceedings of 2011 international conference on system science and engineering, macau, china - june 2011:694-6985 张旭东.行人检测技术研究d.电子科技大学2011年硕士