视频大数据应用技术方案介绍ppt课件

,视频大数据应用技术方案介绍,2017年7月,建设目标和思路,建设内容,一,二,三,目录,深度应用,一、建设目标和思路-模式转变,警力不足,科技强警,事后处置,事前预防,被动应对,主动防控,建立红河州公安局“智慧警务”应用新机制,一、建设目标和思路-体系建设,信息,应用,1,2,3,数据,车型,车牌,时间,位置,手机,基站,性别,身高,人脸,年龄,品牌,视频监控图像,反恐维稳,案件侦破,灾害预防,犯罪预测,交通预警,新型警务防控体系新型警务作战模式,建设符合红河州公安局实战需求的特色应用,传感识别,社会动态管控,实有人口管理,通过视频监控、电子围栏、wifi探针，实现社会动态管控实现人轨、车轨、通讯轨迹分析与拟合功能精准打击和案件破获提供支撑,实现基层数据自动流转，录入，解决基层多平台数据采集录入难题；将人、房、车相结合人口积分制管理,实现指挥空间化、高效化、可视化，解决接处警与指挥脱节和监督问题，解决情报与指挥合成作战问题，完善各类案件证据体系问题,解决人、车、通讯工具在特殊条件下的自动预警深挖重点人员的团伙关系；实现分级分色的管控,实现民警积分制管理模式，解决民警精细化管理提高办公效率。,重点人员管理,精确打击,应急指挥调度,警员内务管理,动态积分,分级分色,可视化指挥,减负增效,一、建设目标和思路-能力建设,一、建设目标和思路-成效,智慧融合,智慧应用,智慧感知,智慧挖掘,视频图像解析服务,车辆大数据平台,视频结构化,人员分析挖掘,人脸卡口,车辆卡口,车辆结构化,WIFI卡口,电子警察,人脸结构化,省厅、公安部接口,旅馆信息,网吧信息,火车信息,汽车信息,常口信息,非经上网,车辆分析挖掘,视频结构化数据分析挖掘,轨迹分析挖掘,WIFI数据挖掘,关系挖掘,治安视频监控,视频图像实战应用平台,人员流动预警平台,视频图像解析平台,公安局数据汇聚管理平台,业务专题库,索引库,关系库,建设目标和思路,警务应用云建设内容,一,二,三,目录,深度应用,（一）、数据融合共享平台,POLICE,1、融合共享平台-大脑,数据驱动警务,2、融合共享平台总体架构,大数据服务总线系统,大数据资源管理平台,大数据集成管理平台,数据资源岛,数据资源采集上报,2、融合共享平台架构,XX公安局数据：约10亿条数据；采用Oracle+Solr方式，Solr用于建立索引；根据XX公安局现有数据量，可以采用1台Oracle服务器+3台Solr服务器建立数据资源平台，最大可以支持40亿条数据。,硬件配置：处理器：配置2颗处理器，单颗核数10核，主频2.2GHz；内存：256GBR-ECC，DDR内存；硬盘：2块600GSSD硬盘,8块6TSATA硬盘。,2、融合共享平台架构,实时流数据,结构化数据,数据汇聚平台,入库,实时预警,流式处理,ETL,特征搜索,SparkStreaming,消息队列(Kafka),卡口数据、案件数据、图片、视频等Hbase/Hive,数据集成(ETL),全文索引数据Solr,数据缓冲,数据接入适配,整合任务监控,数据载入,建索引,统计分析行为分析,挖掘建模Hive/Spark,Oracle数据库（10亿条、6TB）,Excel文件txt文件网页、照片,整合任务定制,卡口（4亿条记录）,Redis,交互查询,数据集成,数据集成(Loader),文本文件,3、融合共享平台功能,首页展示，数据资源的整体状态，一旦异常，预警提示。,4、融合共享平台功能,兼容Oracle库、MySQL库、Hbase库、Solr库,5、融合共享平台功能,资源编目，一目了然，不仅仅是结构化数据，还包括图片、文本,查看数据表的字段详细信息,6、融合共享平台功能,查看数据库中每类数据的具体内容，配合一键搜索，效果显著,数据库运行状态监控,（二）、视频解析平台,POLICE,1、视频图像解析平台架构,1、视频图像解析平台硬件架构,2、视频图像解析平台特点,实时分发,对视频、图片中的人、车、物实时提取出结构化描述信息，半结构化信息,实时汇聚图像解析记录/图片，建立车辆、人像、案事件视频三库；轨迹检索、关联研判,与公安各部门、警种、政府各部门实时共享图像解析数据；资源共享一体化；,高危地区人员、重点人员、本地关注人员实时比对；市/县分级比对技战法模型,一点布控、全市联动、精准预警,3、视频图像解析特点视频解析,行人、车辆、人骑车的分类,2轮、3轮、汽车的分类,运用深度学习技术，系统对同类目标不同特征也能很好的进行识别,不同类型目标,同类型目标，不同特征,3、视频图像解析特点视频解析,车辆信息结构化,人物信息结构化,人骑车信息结构化,3、视频图像解析特点卡口车辆解析,A积累几十种车辆相关技战法B能够识别2000多种车标、车型C百亿条车辆结构化数据秒级响应D由车找人、人车关联、车车关联,3、视频图像解析特点人脸解析,综合运用人脸形状特征、人脸灰度特征和人脸皮肤纹理特征等多种特征进行融合，比对。,4、视频图像解析资源库实时汇聚基础库,svac智能摄像机,卡口结构化服务,视频结构化服务,人脸结构化服务,图侦案事件,案事件视频库,动态人像库,卡口车辆库,公安部规范、标准接口,基础库,4、视频图像解析资源库实时汇聚专题库,通过对数据资源的不同要素(例如人、物品、车辆、机构、案事件、地址等信息)进行关联，面向业务应用，可以构建相应的各类专题资源库,专题库,4、视频图像解析资源库实时汇聚索引库,为了更好支撑全局检索、综合查询、关联查询、快速检索的应用，需要针对结构化、图像特征等数据建立索引库,6、视频图像解析平台实时比对,6、视频图像解析平台实时预警,一点布控、全州响应,6、视频图像解析平台实时预警,精准预警,7、特色应用人脸解析,7、特色应用智能搜索,5、视频解析数据量估算,视频结构化占用资源XX公安局视频图像解析平台需要保存约2.25亿条数据，一条结构化数据大小约4K，则需要存储资源：1.结构化数据存储：6.7亿x4K=3T；2.图片存储：2.25亿300K=67.5T，考虑冗余按70T计算；,XX公安局汇聚数据：图片：5000张500路90天约2.25亿张结构化数据：2.25亿*3约6.7亿条,视频图片数据平均大小：300KB/张,接入500路视频，每路视频平均采集5000张/天,数据基础,5、人脸解析数据量估算,人脸库占用资源XX公安局视频解析平台支持5000万量级的静态人像库的建库和检索，建库总量每增加1万人，需增加26M磁盘空间和26M内存1.占用内存：26M5000万/1万=130G；2.人脸特征存储：26M5000万/1万=130G；3.图片存储：5000万200k=10T。,XX公安局路人库：1000张500路90天约4500万,人脸照片数据平均大小：200KB/张,接入500路视频，每路视频平均采集1000张人脸/天,数据基础,XX公安局静态库：4500万路人库+500万常口库和布控库约5000万,5、卡口图片解析数据量估算,视频结构化占用资源红河州公安局视频图像解析平台需要保存约4亿条数据，一条结构化数据大小约2K，则需要存储资源：1.结构化数据存储：4亿x2K=800G；2.图片存储：4亿300K=120T；,xx公安局汇聚数据：已有4亿条,卡口图片数据平均大小：300KB/张,接入200路高清卡口,数据基础,视频图像解析平台数据存储总计：结构化数据：4T，图片存储：200T,建设目标和思路,视频大数据应用建设内容,一,二,三,目录,深度应用,三类管控人员流入触网,1、智能研判以人为核心,1、智能研判以人为核心,一人一档,1、智能研判以人为核心,可视化展示分析,1、智能研判以人为核心,两劳释放监外执行吸贩毒人员等通过模型挖掘形成本地关注人员*打、防、控一体*冒泡管理模式,1、智能研判人员预警,2、智能研判以车为核心,车辆关系及数据挖掘,建立车辆档案,2、智能研判以车为核心,2、智能研判以车为核心,2、智能研判轨迹拟合,2、智能研判-车辆技战法,区域徘徊车辆分析,疑似套牌车辆分析,非法营运车辆分析,车辆尾随跟踪分析,初次入城车辆分析,昼伏夜出车辆分析,相似路径寻车分析,车辆活动区域分析,房屋中居住人员身份、电话开展关联房屋中虚拟身份信息展开关联房屋中小区门卡信息展开关联实有人口管理系统中展开关联医保、社保等信息展开关联,3、智能研判以房屋为核心,建立共享的、开放式的视频图像工作框架，规范化、流程化的建立案件视频库，一案一档，积累图像数据资产,4、智能研判以案为核心