人脸跟踪课件

1、人脸检测和跟踪的仿真实现数字视频技术1234介绍基于HAAR分类器的人脸检测CamShift跟踪算法实验结果人脸检测和跟踪概念简介人脸跟踪是在视频或图像序列中确定某个人脸的运动轨迹及大小变化的过程，它是进行动态人脸信息处理的第一个环节，在视频会议、可视电话、视频监控、人机智能交互等方面都有着重要的应用价值。由于人脸本身属于复杂多变的非刚体模式，在运动过程中，其大小、形状都会发生变化，因此实现实时而可靠的人脸跟踪方法具有一定挑战性。背景噪声，目标外观变化、运动，实时性，鲁棒性人脸跟踪的应用虚拟角色脸部捕捉游戏：用户只需要坐在摄像头面前，FaceRig就能将你化身成一位虚拟角色，用户能够从多位不同

2、的角色中选择自己的形象，包括毛茸茸的浣熊，恶魔领主，动漫萌妹和星际指挥官等等。FaceRig还支持用户切换背景环境以及改变自己的声音FaceRigHAAR特征人脸检测Haar分类器 = Haar-like特征 + 积分图方法 + AdaBoost + 级联类Haar特征分为三类：边缘特征、线性特征、中心特征和对角特征，组合成一组特征蒙板。在特征模版中，定义有白色和黑色的两种矩形，该模版的特征值定义为白色矩形区域像素和与黑色矩形区域像素和的差。人脸检测最初的弱分类器可能只是一个最基本的Haar-like特征，计算输入图像的Haar-like特征值，和最初的弱分类器的特征值比较，以此来判断输入图像

3、是不是人脸，然而这个弱分类器太简陋了，可能并不比随机判断的效果好。 Adaboost是一种迭代算法，其核心思想是针对同一个训练集训练不同的弱分类器，然后把这些弱分类器集合起来，构成一个更强的强分类器。Adaboost算法 重点是选取合适的描述特征和训练样本人脸检测适应性较强，接近100%的识别率，与人脸结构特征接近的都会被识别为人脸CamShift1.初始化：将输入图像变换到HSV空间，计算基于HS分量的颜色直方图2.跟踪：将新图像变换到HSV空间，计算目标直方图的反向投影，相当于关于目标位置的概率分布图3.迭代：通过迭代的方式不断收敛到目标概率最大位置，即为跟踪结果MeanShift Cam

4、Shift MeanShift算法的改进，在该算法基础上增加了对尺度的适应性算法说明算法设计人脸跟踪的框图设计实验结果人脸跟踪 由检测器初始化人脸的初始位置；利用Camshfit算法进行跟踪；绿色的方框为人脸跟踪的结果；方框的尺寸自适应改变；在框内检测人眼的位置；用蓝色的圆表示。针对实际应用中缺陷所做的修改颜色直方图 基于颜色信息的人脸跟踪时常将与面部肤色相似的颈部区域划入框内，导致跟踪漂移等问题，为矩形高度设置阈值，不超过宽度的1.5倍。人眼检测利用先验知识，人眼位于面部中上方区域，实际应用中将鼻孔错检为人眼，选择只对人脸框上方1/2的区域进行搜索，既降低了错检，也减少了检测时间。实验结果不足之处跟踪失败 人脸发生较大的变化时跟踪失败，在实际应用中考虑检测跟踪失败的情况，比如按照是否该帧检测到人眼确定跟踪是否丢失，或定期进行人脸检测修正人脸位置。实时性在耗时中，检测所需要的时间较长，实现更复杂的