2022年AI视觉智慧城管解决方案

1、AI视觉 智慧城管解决方案用 卓 越 的 智 能 视 觉 算 法 赋 能 商 业CONTENTS1. 公司介绍2. 行业分析3. 解决方案4. 应用案例公司介绍北京容联易通信息技术有限公司(简称容联云通讯)，成立于2013年。是国家高新技术企业。2020年完成F轮融资1.25亿美元。容联总部位于北京，在北京、武汉、成都均设有研发中心，在上海、广州、深圳、成都、青岛、杭州、南京、贵阳等地设有分支机构，与华中科技大学建立AI联合实验室。十多年通讯领域技术积累，10家控股子公司，1200+名员工，技术团队700+；50000家付费企业客户，20万开发者，8000万终端用户。容联为企业提供云化与智能化

2、的通讯服务。包括AI（CV计算机视觉、NLP、语音和文本交互机器人）、 UC(企业级即时通讯、视频会议等)、 CC(云客服、云呼叫中心、智能客服等)、PaaS通讯能力(语音、短信)、行业解决方案和“AI+通讯”服务。容联逐渐从技术提供方案转变为软硬件结合的智能解决方案提供商以及AI创新应用咨询专家，深耕各行业垂直领域，布局容联智能生态产业链。容联已经服务了超过15万家企业客户，全面覆盖能源、制造、化工、政府、教育、医疗、互联网等行业。包括中石化、中石油、国家电网、中国平安、 中国银行、中国移动、华为、中国一汽、南方电网、中国人保、中国电信招商银行、中国联通、苏宁、中国中车、海尔、小米、泰康保险

3、等。视觉智能服务专家专注于垂直领域的视觉智能解决方案提供商AI研发实力业界领先依托核心技术构建产品应用生态聚焦行业解决方案150人的专业AI研发团队包括来自阿里、腾讯专家工程师、中科院学者等业界精英多项软著专利技术多项行业认证制造业、电网电力、智慧园区、能源化工、政府政务等垂直领域20202016.072018.062016.11组建AI核心研发团队，专注垂直行业AI应用落地完成F轮融资1.25亿美元2013容联云通讯成立获C轮融资7000万美金，发布CV视觉应用产品“慧眼”优化CV产品生态，推出“慧眼”、AiBox、MiniBox产品行业内单体最大融资落地电力行业智慧安监项目2016.09布

4、局AI赛道，与华中科技大学成立AI联合实验室2018.0320192014.08营收破千万公司获C+轮融资3000万美元深耕垂直行业CV应用积累成熟模型50+持续高速发展落地多个行业项目案例多产品生态，赋能行业应用化工园区智慧加油站智慧城管智慧变电站智慧零售容联针对企业用户app应用客流分析考评管理vip管理行业应用平台app 应用流程检测大屏预览智能派单扣分管理用户管理数据大屏数据大屏合作方管理传感器管理变电站管理巡检管理基于自身AI研发实力及产品服务生态提供一系列黑名单管理货架管理部署中心CPU|GPU|ARM行业应用中台视觉智能识别行业解决方案服务外接设备对接微信公众号工单流程在线训练平

5、台地图应用SDK/API慧眼管理平台基础功能框架TensorFlowPytorchCaffe设备管理视频预览视频回放告警推送运维管理告警检索统计分析日志管理多协议接入告警短视频行业应用完备的算法服务平台视频监控与管理平台轻量化终端计算一体机定制化模型生产车间视频图片资料接入模型API及SDK接入算法商城通用算法入侵检测城管算法烟火检测环保算法睡岗检测更多更多脱岗检测分析识别CV算法AI硬件行业算法语言PythonC+化工厂算法加油站算法Aibox系列Minibox系列聚焦垂直领域十二大行业上百种算法人脸识别人群密度人群流量脱岗检测睡岗检测拌线检测入侵检测物品搬移物品遗留人数检测智慧化工园区智慧

6、电力智慧加油站智慧工厂智慧交通智慧港口智慧工地智慧城管智慧社区违停检测烟火检测车牌识别安全帽识别安全帽识别全面覆盖工服检测安全帽检测反光衣检测手套检测口罩检测渣土车检测非法施工检测占道经营检测道路积水检测焚烧垃圾检测智慧零售智慧食安吸烟检测玩手机检测打电话检测摔倒检测奔跑检测漂浮物检测老鼠检测厨师服检测厨师帽检测更多智慧物流智能服务合作案例终端客户服务合作伙伴唐山火车站行业分析政策背景背景为规范城市管理执法工作，提高执法和服务水平，维护城市管理秩序,城市管理执法办法于2017年3月30日正式出台，自2017年5月1日起实施目的贯彻“法治思维、文明管理”的核心理念，坚持智慧执法，科技执法的原则。

7、广泛使用互联网+、大数据、人工智能、物联网等先进科学技术手段，实现全面提升城市治理能力现代化，达到节约行政成本，减少社会财富浪费，提高执法效能，促进社会和谐的目的。需求痛点执法人员不足事件处理滞后执法难度大管理方式落后建设目标目标利用智能终端，创新信息实时采集传输的手段，结合计算机视觉AI处理能力，大数据分析等多项能力，整合应用多项数字城市技术，建设一套智慧执法管理系统。具备执法服务实时监管、违规信息实时监控、自动化筛查、自动化比对、自动化汇总、自动化考核等多项功能实现全流程的智能化，减少人工干预流程，提高工作效率，实现非现场执法、智能化管理、数字化管理管理实效优化意义深决策转变达到监控领域全

8、覆盖，简化人工操作，提高工作效率现场执法转为“非现场执法”，提高城市管理效率有效整合信息和管理资源，推进节约型城市执法体系建设管理方式 服务加强数据融合解决方案智能视频分析的应用优势传统视频监控视觉智能服务利用已有视频监控AI赋能千行百业传统视频监控视觉智能服务事前无预警：缺乏智能化，灵活度需要依靠人力查看，响应不及时人工识别难：监控数据采集维度单一且效果欠佳，不可用在其他领域事后取证难：通常事后取证，通过事后回放发现异常情况，需要手动调查取证数据处理难：传统的视频监控数据海量堆叠存储，耗费大量存储空间保存无意义数据，难以从中清洗核心信息，难以为决策应用赋能视频兼容：兼容已有的视频监控系统，可

9、利用原有视频进行视频分析自动存储：监控视频进行实时分析，支持自动报警、自定义分析区域、异常事件视频自动存储等事前告警：通过智能识别分析，及时识别异常情况算法叠加：支持功能叠加，可根据实际需求开通相应算法，灵活便捷看得见看得懂智能视觉分析平台视频图像智能分析系统，利用视频智能分析技术，自动识别出视频图像中的影响质量、有安全隐患的人、事、物，助力企业节省人力成本，降低安全隐患，提升管理效率海量算法库，自由组合架构自由，自主算法支持海量算法采用集群或分布式架构，以完全自主知识产权的深度学习算法为基础，提供高识别率高效率的算法引擎和业务应用可根据具体场景优化算法效果可广泛应用在工业园区、生产制造企业、

10、住宅小区、校区、景区、工地等多种场景四大优势功能丰富，实用性强多前端接入，适配简单事前及时预警，防患于未然事中实时告警，方便管理人员快速处理事后信息存档，便于查证和决策分析支持通过标准协议接入摄像头、NVR/DVR.监控平台等多种前端，简单调试即可使用。适应多种网络的部署方案集中式方案：中心识别平台分布式方案：智能检测盒智能检测盒网络视频汇聚网络中心管理服务器中心识别服务集群功能丰富操作简洁云边协同软硬一体功能实用性强，算法场景丰富一键启动，快速部署使用方便，操作简单边缘节点智能分析，业务数据云端处理具备完整的业务软件系统及所需硬件检测流程视频采集AI图像处理图像传输息资料分析算法：特征提取几

11、何特征的图像识别方法基于特征脸（PCA）的人脸识别方法神经网络的识别方法背景过滤识别算法：基于预设规则特征点的识别算法基于模板的识别算法弹性图匹配的识别方法线段Haus dorff距离(LHD) 的识别方法利用神经网络进行识别的算法支持向量机(SVM) 的识别方法特征匹。事件识别属性识别时间信息算法场景违规占道监测出店经营占道经营对道路和广场等场景，针对画面中指定区域进行占道经营识别，主要对餐桌、餐车、遮阳伞等物品进行识别检测，从而判断其经营行为是否违规。识别沿街店铺在超出店铺经营外的区域进行违规营业识别沿街商铺前瞻道路区域进行违规经营算法场景违规经营监测无证游商违规撑伞对道路和广场等场景，针

12、对画面中指定区域进行违规经营识别，主要对无证游商、餐车、遮阳伞等物品进行识别检测，从而判断其经营行为是否违规。在摄像头覆盖范围，针对所划定的区域进行持续监测，如果检测到无证游商、小贩等行为，则进行告警在摄像头覆盖范围，针对所划定的区域进行持续监测，如果检测到遮阳伞等物体，则判定为违规撑伞，进行告警算法场景卫生状态监测对指定区域进行卫生状况监测对城市内的重点区域，进行卫生状况监测，主要算法包括垃圾满溢检测和乱堆物料监测垃圾满溢监测：对监测区域内的垃圾桶进行持续监测，如果监测到拦击满溢且长时间无人清理则报警乱堆物料监测：对指定区域内的空间区域进行检测，如果检测到物料堆放等违规行为，则进行报警处理垃

13、圾满溢乱堆物料算法场景车辆违停识别车辆违停识别摩托车、自行车占道识别对画面中指定区域内的摩托车、自行车进行识别，监测到其进行违规停放且一定时间内不移走，则进行违规告警对指定区域内进行车辆识别，监测到车辆违规停放且一定时间内不开走，则进行违规告警算法场景地面状况检测对指定区域的地面状况进行检测，监测违规行为和异常状况，例如地面积水、裸土识别等，一旦发现则进行告警地面积水裸土识别算法场景乱贴小广告检测在摄像头覆盖范围内，对指定区域进行检测，如果发现有违规粘贴各类小广告，则进行告警。乱贴小广告检测算法场景沿街晾晒检测对摄像头覆盖区域内的街道进行监测，如发现违规晾晒行为则进行告警算法场景人群密度监测对

14、指定区域内的人群密度进行检测，如发现指定区域内人员数量超过一定数量，则此区域有可能发生异常状况，或者可能造成踩踏等意外事故。人员聚集检测平台功能智能检测系统管理用户权限管理移动端告警管理告警检索告警审核相机管理相机接入管理算法配置统计分析多维统计报表视频管理数据大屏视频预览智能分析实时预警实时数据汇总数据可视化技术架构图标准接入代码仓库监控报警AdminAI GatewayWebsocket服务ELK日志持续构建监控应质量检查镜像打包持续部署制品库用层系统管理服务统计分析服务设备管理服务视频管理服务智能检测服务AVT引擎运维管理服务注册容错限流服务发现链路监控配置中心授权认证负载均衡弹性伸缩视

15、频流预览视频流预览视频流预览健康检查图像推送推/拉流服务任务调度图像编解码视频编解码指令服务PC Browser自动化测试数据总线AI能力引擎平台层AI GatewayAI任务调度加载模型openAPI模型仓库入侵检测吸烟检测人群密度检测睡岗检测物品搬移检测渣土车检测 违停检测手势识别通道异常检测非法施工检测口罩检测人体属性识别表片瑕疵检测打架检测安全帽检测人流量统计脱岗检测绊线检测疲劳检测工装检测烟火检测人脸识别徘徊检测表情识别摔倒检测人体关键点识别Webchat人员奔跑检测基础设备标准服务器工业化小型机视频接入视频流协议123视频支持rtsp、rtmp、hls等主流直播协议接入视频流处理按

16、照指定间隔时间对接入视频流进行解码抽帧，并编码为jpg或yuv图像输出供算法识别视频流预览对接入视频流进行实时转码，转换为h264编码并降低分辨率与码率，发布为http-flv直播流，供终端预览使用模型生产数据处理模型选型模型训练模型应用数据的采集处理模型上线和结果分析选择合适的识别模型数据调休与模型优化数据收集数据标注实时性要求精度要求数据增强场景调优上线运行数据预处理数据集整合硬件资源模型结构前向传播结果反馈训练/测试划分loss计算线上数据收集反向传播模型验证核心优势完备的产品生态算法服务平台视频监控与管理平台终端计算一体机算法商城丰富的算法积累深度行业经验与理解多行业落地经验，沉淀出百

17、余种算法模型围绕计算机视觉技术实际落地应用方向，聚焦城管指挥执法领域，深入研发专用、适用的模型及算法，提供可靠、稳定、持续响应的服务能力。领先的深度学习平台灵活的服务提供方式拥有集标注系统、训练系统、模型系统、部署系统、监控系统等一系列综合CV领域AI应用配套中台产品。支持私有云、混合云、公有云部署提供边缘计算、云计算等产品应用方式支持API、SDK、视觉分析服务等应用案例城管：唐山智慧城管执法项目案例背景此项目是唐山火车站站前广场智能化改造项目，站前广场人流量大，涉及的监管范围广，常规视频监控手段无法及时准确发现路面积水、井盖缺失等市容市貌问题，需要大量的人员进行翻看录像工作，管理效率低。场

18、景需求提供价值 中控室监管:：在岗数 、员脱岗、睡岗的变动观测；通过CV+AI的技术手段，通过视频监控实时采集并进行识别，一旦发现异常事件自动报警 市容市貌监管：井盖缺失、沿街摆卖、非法条幅小广告、路面积水； 人流管理：站前广场人员流动大，易造成人员聚集、踩踏事件，需精确统计进入离开人数，和人员聚集告警；及时发现并制止违规现象，解决安全隐患积水检测占道经营检测智能CV 重点区域管控：重点区域人员入侵告警、踩踏绿地告警；解决方案通过CV自动识别，替代人工抽查，高效便捷，还可以进行数据分析，确保广场秩序正常，人员安全 重点人员布控：布控区域内出现重点人员时需触发告警，在逃、票贩子黄牛等； 火灾预警

19、：出现冒烟起火事件时，需要及时触发告警。沿街晾晒检测市场监督管理：汕头市场监督管理局智慧监管项目案例背景汕头市场监督管理局以农贸市场区域、路面状况、食堂餐厅等场景为核心，通过AI视觉提升监管、决策，服务水平，打造新型智慧示范城市，加速建设城市大脑，深化AI在公共服务、智能交通、智慧监管等领域应用，全面迈向新型“智慧汕头”场景需求提供价值 农贸市场智慧监管实现全覆盖，形成视频归集、算法识别、风险预警，数据报表等“一站式”执法监管平台。经营时段内违规占用人行道、过道进行经营等违规行为智能识别对消防通道口、车辆通行道路存在的违停行为进行智能识别 学校/餐饮厨房 能精准识别占道经营、违章停车等道路违规

20、行为及路面问题，以及餐厅后厨违规问题等。车辆违停检测占道经营检测着装识别：厨师服、厨师帽、口罩等行为识别：抽烟、打手机、打架等有害生物识别：老鼠等智能CV解决方案垃圾桶识别：摆放不规范，垃圾溢满、未盖 食品加工厂 执法人员进行远程管控，一旦发现违规现象立即进行督察纠正，实现高效一体化的城市精细化管理着装识别：厨师服、厨师帽、口罩等行为识别：抽烟、打手机、打架等有害生物识别：老鼠等通道整洁度检测餐饮厨房检测消防：潍坊奎文区老旧小区消防改造案例背景此项目是山东省潍坊市消防大队主导的老旧小区消防改造项目，目前以奎文区作为试点，已经接入32个社区共计600路摄像机。基于深度学习的视频分析技术，利用社区

21、摄像机视频画面，检测社区内冒烟起火事件、车辆违停事件、消防通道占用事件并及时产生告警，通知值班人员处理，有效减少人力巡逻成本，提升管理效率。场景需求提供价值 1.冒烟起火检测： 基于深度学习算法、对火焰的形状、颜色，烟雾的形状、颜色进行模型训练，并加入前后帧比对逻辑，有效规避反光、过曝产生的误报，第一时间发现冒烟起火事件；通过CV+AI的技术手段，通过视频监控实时采集并进行识别，一旦发现异常事件自动报警及时发现并制止违规现象，解决安 2. 车辆违停检测：基于深度学习算法，对检测区域内违停车辆进行检测告警，无论是小轿车、SUV、皮卡车都可以检测到并告警，可根据已停放时间配置不同的检测逻辑，使用更

22、灵活；全隐患消防检测场景烟雾火焰检测智能CV通过CV自动识别，替代人工抽查，高效便捷，还可以进行数据分析，确保违规事件及时发现，消除安全隐患。解决方案 3. 消防通道占用检测：可检测指定区域内占用消防通道的物体，可根据占用时间配置不同的检测逻辑，使用更灵活，一旦出现违规占用消防通道事件即产生告警，执勤人员可第一时间前往现场处理问题。违停检测通道占用检测政务：海淀政务服务中心智能监控项目案例背景此项目是海淀政务服务中心智能化改造项目，办事柜台工作人员偶尔会出现离岗行为，严重降低事务处理效率，影响群众办事体验，通过普通视频监控和人工巡逻无法及时有效发现脱岗、打电话、玩手机等违规行为。场景需求提供价

23、值 办事柜台监管： 在岗数 、员脱岗、睡岗、打通过CV+AI的技术手段，通过视频监控实时采集并进行识别，一旦发现异常事件自动报警电话、玩手机、工作人员着装规范； 等候区监管：未戴口罩、吸烟、人员跌倒、人员聚集、打架事件；及时发现并制止违规现象，解决安全隐患 走廊楼梯间：吸烟、烟火告警；办事柜台和等候区检测智能CV智能识别管理平台通过CV自动识别，替代人工抽查，高效便捷，还可以进行数据分析，确保办事大厅秩序正常，提升服务质量解决方案 中控室监管:：在岗数 、员脱岗、睡岗的变动观测； 重点人员布控：布控区域内出现重点人员时需触发告警。办事柜台检测化工：多个化工园区智慧监控项目案例背景化工园区是对生

24、产安全要求非常高,视频监控是园区管理的重要手段，通常接入试点企业、园区自建、安监卡口等几方视频监控画面，随着接入数量的增多，运维人员日常巡更质量无法保证。场景需求提供价值 中控室监管: 在岗数 、员脱岗、睡岗的变动观测； 卡监管: 辆数、类型（渣、危化品）的安全监管通过CV+AI的技术手段，利用视频监控实时采集并进行识别，一旦发现违规自动报警 危化品仓库监管：区域警戒-变动（天、夜）、采集摄像头的温度以及劳保品安全帽的智能识别；物品遗留、物品移动、物品移等变动情况、温度摄像机的ocr识别及时发现并制止违规现象，解决安全隐患智能CV 罐区监管:区域警戒-变动（天、夜）固定点的安全帽、明的安全监管

25、、员、辆区域检测、明检测解决方案通过CV自动识别，替代人工抽查，高效便捷，还可以进行数据分析，确保园区安全 装卸点监管:辆和员有、数量的监督 现场作业/固定动点/间监管: 员的有和数量、明、员劳保品安全帽的安全监管卡口车辆智能监管石油石化：某知名品牌加油站CV项目案例背景针对加油站卸油场景，通过主流计算机视觉技术，对卸油过程中的操作行为、流程规范进行实时监管，一旦发现违规操作或违规现象，立即通知值班站长，现场处置，避免安全事故的发生。同时为加油站的安全管理提供数据支撑。场景需求提供价值通过CV自动识别，改变原有人工肉 静电夹识别：识别静电夹是否夹到卸油车上； 三角木识别：识别卸油人员是否按规定

26、摆放三角木眼检查模式，极大提升效率。针对整个卸油过程中实现全程监管，确保卸油安全，减少安全隐患，避免安全事故的发生。 灭火器识别：识别稳油期间，是否在车头摆放8kg灭火器，卸油口地端附件是否摆放35kg灭火器工装检测三角木检测智能CV 卸油人员穿戴识别：识别卸油人员是否按规定穿着防静电工服。违规现象自动抓拍图片及录制短视频，解决方案方便事后溯源。 卸油人员值守识别：识别整个卸油过程中，卸油人员不得离开摄像头范围，否则报警。 卸油管识别：识别卸油管的连接顺序。 登高作业识别：识别登高作业中，人员是否佩戴安全带。站区总部多级管理，数据一体化分析，对安全管理提供数据支撑。灵巧性智能软硬件一体机，部署

27、便捷， 烟火识别：识别卸油过程中，不得有烟火，否则报警。扩容方便，操作简单，界面友好。静电夹检测管线连接检测工地：柳州东城集团智慧工地AI中台项目案例背景柳州东城集团下属施工工地，安全监管和防范手段相对落后 ，希望通过视频智能化远程对分散的建筑工地进行统一管理，避免使用人力频繁的去现场监管、检查，减少工地人员管理成本，提高工作效率 ，利用信息化对建筑施工安全生产进行“智能化”监管 。场景需求提供价值 办公区/施工区域监管: 员脱岗检测、人数检测。 物料仓库监管：施工物品禁止移动，搬移检测。 施工区域等重点区域警戒：入侵检测、施工车辆检测。 重点区域劳保用品检测：安全帽检测，反光衣检测。 全区域

28、人群聚集检测、烟火检测。远程监管，减少人力成本。智能检测，提升监管效率。标准接入：对已有不同厂商摄像头施工车辆检测电梯内人员检测有效利用。智能CV解决方案及时发现并制止违规现象，解决安全隐患。重点区域劳保用品检测烟火检测电力：宁夏国网共享视频分析平台建设项目案例背景宁夏国网建设给各个生产部门使用的共享视频分析平台，视频从南瑞同一视频平台api获取，接入慧眼平台分析，结果再通过api接口推送给统一视频平台，供国网各部门使用，提升管理效率。场景需求提供价值 穿戴类检测： 基于深度学习算法、对工作人员的工装、安全帽进行模型训练，出现未戴安全帽、未按规定穿着工装行为，第一时间发现冒烟起火事件触发告警；

29、通过CV+AI的技术手段，通过视频监控实时采集并进行识别，一旦发现异常事件自动报警及时发现并制止违规现象，解决安 2违规行为检测：基于深度学习算法，对违规行为事件进行模型训练，发现吸烟、接打手机等违规行为第一时间触发告警；全隐患人员及安全帽检测抽烟检测智能CV解决方案通过CV自动识别，替代人工抽查，高效便捷，还可以进行数据分析，确保违规事件及时发现，消除安全隐患。 定制化算法检测：容联可以根据甲方实际场景和生产需求，为其定制场景化的算法，（1）吊车启动时吊臂下严禁站人（2）使用吊车时周围安置围栏（3）人员跨越围栏（4）安全监督人员不在场打手机检测人员检测港务：太仓鑫海港口智能治超项目案例背景太仓鑫海港口为货运港口，