视频监控程序设计说明书

1、视频监控系统程序设计说明书1引言编写目的本文主要说明视频监控系统的详细设计与实现。本文详细介绍了系统中各个模块的设计与实现细节以及关键技术的应用。其中，对每一个模块会有相应的文字说明以及相关设计流程图给出。项目背景本项目是对本实验课程中所介绍的课程的综合应用。本项目主要针对unix/linux系统编程和基于C+语言的GUI程序设计-QT进行针对性训练。旨在加强学生对unix/linux系统编程的理解和应用，提高学生的实践能力、编程能力以及分析问题和解决问题的能力。并且通过对本系统中客户端的设计和实现，让学生体会和熟悉面向对象编程的思想和一般方法。定义本系统=视频监控系统本文=视频监控系统设计说

2、明书2总体设计需求概述本系统是基于C/S架构的网络视频监控系统，主要由负责图形采集和传输的Server端和负责监控（显示图像）的Client端构成。本系统Server端是基于Linux系统的网络服务类软件，主要由数据采集和网络服务两部分构成。数据采集部分利用v4l2（videoforlinuxII）对网络摄像头进行控制和访问并且获取由摄像头捕获到的视频数据，然后再由网络服务部分将获取到的视频数据进行封装成http帧并利用http协议发送到客户端。由于本系统Server端的数据发送是基于http协议的，所以本系统客户端没有平台限制，只要支持以上的平台就可以访问本系统的服务。而且，本系统服务可以直

3、接通过web浏览器访问（对firefox浏览器支持最佳）。为了提高传输效率我们还需要进行客户端软件的开发，由于对客户端没有平台要求，所在Windows、Linux、Android、等平台都可以实现。本文主将以linux为例用Qt实现一个简易的客户端软件。软件结构serverclientdatacapturevideoservicedevicdconfigcreateservergetdatawaitconnectmovedatadatatransfer图视频监控系统结构图3程序描述Server:数据采集功能配置设备并从设备中获取图像数据。根据设备信息利用v4I2(videoforlinuxII

4、)通过ioctl对USB摄像头进行配置，打开设备抓取功能开始采集并转存数据，采集完毕以后关闭设备功能，最后关闭设备。技术概要本模块涉及到大量的对于设备的I/O操作，主要通过videoforlinuxII(v4l2)框架对设备进行设置和控制。其中包括一些特殊的结构体属性的赋值以及一些特殊控制标记的实际意义需要详细查阅V4I2提供的AP。程序逻辑本节主要以流程图的方式介绍Server端数据采集模块的主要程序逻辑设计。开始开始end图Server端数据采集流程图图主要描述了服务端数据采集部分的主要流程和编程步骤。下面将对每一个步骤进行详细的介绍：1打开设备：打开视频设备（这里指我们的USB摄像头）。

5、利用linux系统提供的接口函数open来对设备进行打开的操作。图对这一过程进行了详细的描述。2查询设备信息（或者叫获取设备信息）：查询设备驱动相关信息以及和视频采集相关的参数，根据获取到的信息初步判断设备类型以及将要处理的数据类型。利用ioctl函数以及v4l2提供的v4l2_capbility和v4l2_format两个结构体来保存获取到的设备驱动信息和帧信息。详细流程见图。VIDIOC_G_FMT等属性的含义需查询V4I2提供的AP。fd=-1、ffd=open()start图打开设备子图2structv4l2_capabilitycapstructv4l2formatfmtw1mems

6、et(&cap,0,sizeof(cap);memset(&fmt,0,sizefo(fmt);=V4L2_BUF_TYPE_VIDEO_CAPTURE=V4L2_FIELD_ANYgetinfo:图获取设备信息子图3. 设置采集方式设置视频设备（这里指USB摄像头）的采集方式，例如采集图像的分辨率，帧的采集速率（既每秒采集帧的数量）等选项的设置。用到v4l2中的v4l2_format和v4l2_streamparm两个结构体以及VIDIOC_S_PARM口VIDIOC_SFMT两个标记，相关介绍请查阅v4l2框架的API信息。实现步骤详见图。/本模块用到的宏定义#defineWIDTH320

7、structv4l2_formatfmt2#defineHEIGTH240structv4l2_streamparmparm#defineFPS5memset(&parm,0,sizeof(parm);memset(&fmt,0,sizefo(fmt);=V4L2_BUF_TYPE_VIDEO_CAPTURE=V4L2_FIELD_ANY=WIDTH图设置采集方式子图4. 申请缓存向驱动申请几块缓冲区（此处缓冲区是由内核管理的，所以需要申请），用来存放设备采集到的数据。用到v4l2中的v4l2_requestbuffer结构体和VIDIOC_REQBUF标记来向设备驱动申请缓冲区。实现步骤详见

8、图structv4l2_requestbuffer3rb/本模块用到的宏定义/表示申请缓冲区的数量#defineNB_BUFFER5memset(&rb,0,sizeof(rb);=NB_BUFFER=V4L2_BUF_TYPE_VIDEO_CAPTURE=V4L2_MEMORY_MMAPioctl(fd,VIDIOC_REQBUFS,&rb)NerrorYreturn4图申请缓存子图5. 设置缓存属性对申请到的缓存进行设置，包括设置缓存的访问方式（使用内存映射访问方式），对缓存进行映射，建立缓存队列。4structv4l2_bufferbufunsignedchar*mem_listmem_

9、list=(uchar*)calloc(NB_BUFFER,sizeof(uchar);inti=0;图设置缓存子图5.处理数据通过对设备设置VIDIOC_STREAMO和VIDIOC_STREAMOF来控制设备开始/停止采集数据，在设置开始和停止之间通过对缓存的轮换读取获得设备采集到的数据并对其进行处理（这里的数据处理主要做对图像压缩和传输两部分工作会在后面做详细介绍）。通过利用VIDIOC_QBU和VIDIOC_DQBU两个控制位来对缓冲队列进行入/出队列的控制，从而获得设备采集到的数据。详见图。5structv4l2_bufferbufmemset(&buf,0,sizeof(buf);

10、=V4L2_BUF_TYPE_VIDEO_CAPTURE=V4L2_MEMORY_MMAPioctl(fd,VIDIOC_STREAMON,&buf)数据处理ioctl(fd,VIDIOC_STREAMON,&buf)Nerror图数据处理子图Server:数据处理功能完成图像压缩，建立web服务供客户端访问。对摄像头采集到的数据进行一次huffman编码把图片转换成jpeg或者jpg格式（这个步骤也可以在客户端完成，但是浏览器不支持此种实现）。建立一个基于TCP/IP的web服务器，当有客户端连接本服务时利用HTTP协议发送转换好的数据技术概要本模块主要涉及到对原始图像数据的压缩以及基于C语

11、言的网络和多线程的编程。关于图像压缩的部分在本项目中不做研究所以只是简单的调用已有接口。对于网络服务功能以及多任务的处理功能的实现都是本项目要涉及到的重要内容，这里需要对基于C语言的TCP编程和多线程编程比较熟悉，可以参考UNIX环境高级编程。程序逻辑本模块的作用实际是上一个模块中的“数据处理”部分。由于设备采集到到的每一帧数据经过huffman编码以后会变成一张完整的图片，所以我们在下面发送数据的部分要做一个简单的封装，下面分别给出程序流程图（图）和数据封装格式（图）。startYendContent-type:typeContent-length:length空行图数据处理http响应头：

12、boundary帧头部图片数据boundary帧头部图片数据boundaryJFContent-type:typeContent-length:lengthi空行图服务端帧封装结构Client:获取数据功能向服务器发送请求，根据服务器的响应信息接收数据并根据响应信息按照一定的格式接收数据。与服务器建立基于TCP的连接，向服务器发送http请求，接收服务器返回的响应信息，技术概要本模块主要涉及到基于TCP的客户端编程，关于各户端编程的方法比较灵活，在语言框架选择方面也比较广泛，像JavaGUIMFC、QT等都可以实现。在这里我们QT为例来实现客户端程序。程序逻辑这里主要涉及到TCP客户端编程和对

13、服务器数据分较程式化有统一的编程步骤和一般流程，数据分割需要根据服务端数据发送情况的来确定。络编程流程割，TCP客户端的编程比TCP网络编程流程（图）和数据分割步骤（图图TCP网ocket()socket。bind()listen()I?从socket中读取一行onnect()SERVERrecl三次握CLIENTrite()accept()ad()Nite()Yose()ose()start图客户端数据分割流程Client:显示功能通过信号控制QT控件刷新图片。我们看到连续的图像是由一张一张的单独的图片不断刷新形成的，所以本模块主要功能是接收上一模块的数据准备好信号后将新的图像数据加载到控件并刷新控件，从而形成连续的图像。技术概要本模块主要涉及到QT的编程和使用，包括对一些控件的控制和线程控制由于循环显示图像时候会阻塞图形界面，所以用