2024工业视觉智能应用平台

『工业视觉智能应用平台』2024/7/11标杆案例1：服务中海油大榭石化，打造管廊“智能巡检”新标杆入选工信部等5部委评选“2023年度智能制造试点示范行动”智能制造示范工厂优秀场景客户需求痛点大榭石化为中海油集团第二大炼厂，具有千万吨级原油加工能力，拥有催化、加氢、重整、苯乙烯等近30套大型生产装置

解决方案与成效可见光管廊巡检可见光

热成像声音气体组分热成像声音气体组分

数字孪生监测预警

指挥调度应急处置

辅助决策设备联动

信息接报事件定位

视频调度分析研判路线长 空间窄 声音杂 照明差 路线长 空间窄 声音杂 照明差劳动强度大：隧道内管廊长度1.4公里，环境潮湿闷热，每天需进行多次徒步巡检作业质量低：巡检工人通过目视完成作业，出现温度异常、气体微小泄露等状况难以察觉安全保障难：出现有毒介质轻微泄露直接威胁巡检人员健康与生命安全

巡检效率提升

客户应用成效人工巡检频次降低

巡检作业范围提升

“大榭石化单点应用”自下向上拓展至“海油炼化集团集约管控”效率提高难：在不增加人力投入前提下，提高巡检频次与发现隐患风险能力有限

巡检效率 巡检频次 巡检范围人工巡检 机器人巡检标杆案例2：一见助力龙源电力打造“新能源生产数字化”龙源电力入选2023能源工业互联网优秀案例数字孪生可视化安全风险管控及生产运营管理生产运营与指挥调度中心统一资源管理与调度中心技能中心训练中心样本中心客户需求痛点 数字孪生可视化安全风险管控及生产运营管理生产运营与指挥调度中心统一资源管理与调度中心技能中心训练中心样本中心视频图像数据风机生产数据视频图像数据风机生产数据行为类数据场站摄像头无人机发电时序数据记录仪布控球域，不断引领行业发展和技术进步，已成为一家 本安全生产应用管理中心以开发运营新能源为主的大型综合性发电集团 部安全生产应用管理中心场站监控省平台场站监控将新型智能运维技术与行业知识有机融合，实现智能化生产运营及人员作业安全的智能化管控

应用管理数据分析应用管理数据分析场站调度集中管控全国 风电场，场站调度数据汇聚、边缘应用（风电场智能巡检、风电机组音频听诊等）数据汇聚、边缘应用（风电场智能巡检、风电机组音频听诊等）监控人效提升模型分析准确率响应效率小时级提升到巡检效率提升标杆案例3：一见平台落地临洮水利，打造国内首个防溺水AI系统客户需求痛点临洮，临洮河而建，河流贯穿整个城区，每年都有70-80左右人员溺水事件发生，有轻生者，也有失足落水者，溺水者大多数是青少年。过去依赖人力巡查，发现时往往悲剧已经发生因此客户希望借助百度AI视觉能力避免悲剧发生。

技术挑战和难度河道开放环境下，现场情况复杂，前期误报多因人员探头、跨越警戒线钓鱼、游泳等无效预警多夜间发生溺水事件频率高，处置周期较长

社会价值人员跳河预警时间缩短至10S以内成功挽救8名轻生者生命及时处置1400+涉水风险事件 线 CV单功能减少固定误报CV少无效预警比例流程，10s预警10分钟内处置完成 一见溺水事件预警—>人脸识别—>业务系统—>智能外呼 标杆案例4：一见平台落地中化集团，云边协同实现安全生产集中监管客户需求痛点 解决方案与成效中国中化控股有限责任公司（简称中国中化），业务范围覆盖生命科学、材料科学、石油化工、环境科学、橡胶轮胎、机械装备、城市运营、产业金融等八大领域，是全球规模领先的综合性化工企业

按照“云边协同”的模式，在公司总部侧建设一见工业视觉智能应用平台，具备算法仓库、算法任务管理、资源调度管理、应用管理、视频监控一张图等功能，在企业侧对生产区域内不安全行为进行实时视频分析，形成报警数据，作为考核、提醒、督促企业提升安全管理的依据。一见工业视觉智能应用平台模型纳管 资源管理 应用管理 视频监控一张图集团总部AI 告数型模 中化能源 中国蓝星 中国昊华 鲁西集团 沧州大化 警数型橡胶公司 中国金茂 中蓝晨光 …….. 据二级单位随着监管政策要求以及国家对于大型央企人工智能建设要求，AI视频监控系统建设已经逐步成为当前企业HSE数字化转型的必建任务

集中管控全国 二级企业，后续扩展至 企复用企业数字资产，纳管第三方分析模型

响应效率小时级提升到统计报警数据，形成企业安全管理一见产品定位：聚焦安全生产和质量管控场景，围绕核心应用沉淀工业视觉aPaaS平台，授人以鱼&渔，让专业级工业视觉AI应用落地平民化一见产品架构：4个中心+1个助手，训用一体、业务闭环、端到端优化、效果可感知应用中心：使能中心：深耕行业场景积累体系化数据、模型库和算法方案，提供AI技能编排等零代码能力，让非专业人员做出百度原厂应用效果运管中心：支持集团及其各级子公司多级管控模式云边端能力配置，以及算力管理、应用下发、AI技能（模型）下发、各模块权限控制等日常运行管理可视中心：结合企业安全风险和隐患的分级、分区管控，提供安全生产一张图，统一指挥调度、敏捷应急可视中心中心应用监测预警智能巡检缺陷检测…自定义应用使能中心度安安助手：可视中心中心应用监测预警智能巡检缺陷检测…自定义应用使能中心1套核心预警流程+5个模块→支撑4类应用类型覆盖安全生产和质量管控场景实时监控（视频流）任务列表（批量图片）实时监控（视频流）任务列表（批量图片）预警预警技能发布

运管中分级/合并/大模型过滤预警档案统计分析（违规次数、良品率…）误报修正应用配置处置数据回流 心分级/合并/大模型过滤预警档案统计分析（违规次数、良品率…）误报修正应用配置处置技 工业场景模型落地业务逻辑配置→实现不同客户场景AI模型使用灵活配置型能 前处理（校正/拼接/裁剪型

模 后处理（统计、距离、时空关系

逻辑判断感知设备与AI技能空 时空关系配置→

模 模型产线配置 场景模型库（矿、油、电、水）间 实现不同场景不设备组合分析方

型 零样本冷启动 智

模型 大模型复判标注训练临洮标注训练

大榭石化降低75%

龙源电力集控提效300%备设 感知设备（摄像头/相机） 控制通知（声光报警/道闸/机台备度安安助手

水利技能配置 挽救一见产品矩阵：平台&一体机，可灵活组合，端到端优化化工动火作业AI识别油气管廊AI化工动火作业AI识别油气管廊AI智能巡检水务安全生产AI监测预警矿山安全生产AI监测预警……PCB-AI质检铁路TFDS故障监测识别电力集团视频AI识别安全管控方案 ……PCB-AI质检铁路TFDS故障监测识别电力集团视频AI识别安全管控平民化平台 私有化部署 公有云订阅制

产品定位场景，提供端到端的工业视觉AI应用，帮质量问题一体机

旗舰版-PRO 标准版-STDAI盒子 轻量版-LTEAI盒子安全生产视频AI一体机

PCB复判一体机铁路TFDS一体机食品分拣一体机…

目标客户：一见平台：铁路、钢铁、食品等集团型客户、行业伙伴一见一体机：行业伙伴、集成商等一见一体机产品介绍：小标品、开箱即用、交付周期快（2～3周）开箱即用+高性价比+全国产化适配视觉大模型训推一体模型开发，训推一体支持CV大模型零样本冷启动支持128推理支持基于标准版/机进行扩展升级通用模型准确率平均98%+机型：P-12820P-add-on

高性能支持128/256发推理15个内置算法，支持算法选配练模型下发至一体机推理通用模型准确率平均95%+机型：S-25600S-25600-ICTS-12800S-12800-ICT一见安全生产视频AI一体机产品矩阵

高性价比支持64支持轮巡256路推理15个内置算法，支持200+法选配练模型下发至一体机推理通用模型准确率平均90%+机型：L-6400-ICTL-6400

1、丰富的AI模型库内置人员PPE15个高频使用的AI模型，历史项目落地统计平均准确率97300型库2、视觉大模型复判、训用一体基于现场环境进行智能数据收集，节省83%标注人力，可实现小时级模型训练及迭代，支持CV大模型复判，降低cornercase误报3、自主可控、强大推理性能基于百度自研高性能昆仑芯片，单卡可支持64视频流并发推理，摄像头可灵活组合任意AI技能4、标准化快速交付两天内发货，一周内完成交付，专业交付售后团队实现企业快速智能化升级一见产品策略：集团侧卡位推平台，场站侧伙伴铺量推一体机，建立一见公有云数据飞轮客户侧（集团卡位，场站规模化）百度侧（构建数据飞轮，形成竞争壁垒）客户侧（集团卡位，场站规模化）百度侧（构建数据飞轮，形成竞争壁垒）集团&省级公司集团&省级公司

一见平台（软件）私有化aPaaS 流 私有化aPaaS 排 直销带动更多一体机售卖直销

’ 库 更丰富

预警精度更高场景化算法方案更全场景化算法方案更全场站（数量大）场站（数量大）（软硬一体）

1渠道/交付伙伴AI技能下发客户本地渠道/交付伙伴3

行业场景化小模型（支持伙伴调优）（支持伙伴调优）泛化能力更强CV&多模态大模型 力 一见在工业视觉AI应用的核心理念降低模型训练及应用的技术门槛，训用一体、业务与AI融合，保障端到端效果矿山 油气 电

水务 化

电子 铁路 钢铁 …深扎场景，沉淀成体系的行业数据百度智能云一见平台（深度应用CV大模型+多模态大模型）核心AI能力工程化

大模型能力产品化

业务应用闭环

行业客户行业伙伴工业行业场景化AI模型和算法方案

零样本冷启动，满足碎片化需求

模型迭代优化、预警处置闭环低门槛即可训练出百度原厂效果AI模型

低频偶发场景模型快速上线、越用越准

预警逻辑灵活可配、端到端闭环让专业级工业视觉AI应用落地平民化一见内置「安全生产AI监测预警」超级应用AI+业务闭环，助力生产过程更安全、高效

模型生产、优化、应用全链条支撑零代码模型生产、迭代，编排及应用，满足行业场景化AI应用端到端效果要求分级分类预警

业务系统（闭环）预警处置

预警一张图

AI识别-处置-追溯全过程跟踪实时感知风险、智能识别异常、靶向推送预警、跟踪处置闭环、事后追溯分析，AI助力安全生产智能化CV大模型

实时预警

成效分析模型训练移动布控球巡检终端巡检机器人无人机视频监控模型生产移动布控球巡检终端巡检机器人无人机视频监控

场景化技能编排

多模态AI分析引擎人员、设备、环境异常识别

误报标注数据回流

实现主动预警：7x24小时AI实现异常情况秒级发现。一见·工业视觉应用平台控的工作量，监控人效提升300%一见·工业视觉应用平台其他智能化装备...送，处置效率提升10倍以上。其他智能化装备...一见内置「安全生产AI监测预警」超级应用配套小程序，业务处置移动化，随时随地可查看预警信息及快速处置便捷处理异常事件业安全运行态势云边协同，加速KA打造“集约化管控+分布式管理”的智能管控体系中心侧实现应用、资产、算力的复用，在边缘侧可实现一体机的规模化复制推广统一资产中心模型库、知识库、应用库平台应用中心统一资产中心模型库、知识库、应用库平台应用中心监测预警、智能巡检、安全生产智能助手……云 平台

数据上传

集团资源池化管理AI算力资源统一调度弹性利用集团资源池化管理AI算力资源统一调度弹性利用A企业

模型与应用下发二级单位应用边缘业务管理

模型与应用下发... B资源池化管理企业资源池化管理数据上传 模型与应用下边边缘应用边场站/厂区A边边缘应用边资源池化代理安全生产应用系统资源池化代理

场站/厂区B安全生产应用系统数据上传端

模型应用边缘加速卡边缘工作站 音视频传感器 无人机 噪声拾音设备 振动传感器GPS定位装置6大核心优势，保障AI应用端到端效果监测预警 智能巡检 外观缺陷检测 智能分拣 ...面向油气、电力、矿山、化工、铁路、钢铁、燃气热力等行业沉淀300+行业专属模型

CV大模型云边复判，自动完成数据收集并智能标注，仅需事件复核即可实现模型效果优化将百度算法工程师模型开发经验工程化，封装成产线，无需代码能力即可训练出百度原厂效果AI模型

零样本冷启动，通过Prompt可快速生成技能并迭代优化，提升平台易用性零代码可视化技能编排，业务人员可根据现场管理规程灵活配置AI技能

内置AI原生应用度安安，助力安全生产从“感知智能”迈向“决策智能”百度智能云AI大底座端到端优化百度自研昆仑芯、飞桨深度学习框架、文心大模型核心亮点1：聚焦安全生产和质量管控，沉淀丰富的场景化AI模型场景化AI模型，更加贴合生产运行，辅助企业从“被动监管”向“主动预防”转变矿山 油气

电力 水务

化工 园区

钢铁 港口

铁路 建材皮带跑偏皮带异物皮带撒漏料矿车超挂风门开关状态

油气管廊地面油污气体泄露跑冒滴漏人员摔倒

高危作业作业监护人员缺失吊物下禁止站人燃气吊压动作未佩戴防护面罩

风电光伏表计读数设备渗漏油光伏片缺陷

水厂/水环境游泳、钓鱼漂浮物黑臭水体河道口偷排水体蓝藻

危险区域闯入中控室人员离岗明火检测智能装卸车特殊作业识别

铁路全车破损异物车底部件丢失关键部件损坏未知形态缺陷关键部件移位核心亮点2：算法方案工程化，内置丰富的产线，周期短、效果优以前 现在算法工程师深度参与 算法经验沉淀至平台分析场景需求无需代码基础即可训练模型分析场景需求*算法方案设计 *算法方案设计*数据预标注 *数据预标注

平台能力内置通用产线：检测、分类、分割等基础模型；标注复核标注复核*模型转换**模型转换*模型训练*模型包组装**模型包组装*模型评测模型上线

核 练 线

应用成效降低开发周期：以往模型从0-1，需专业工具、专业算法工程师7天，现在依托产线完成，节省60%时间普通工程师即可训练出百度原厂效果的AI模型核心亮点3：零代码AI技能编排，灵活匹配现场操作规程场景举例 技能编排过程在采矿行业中需要对辅运场景中巷道矿车运输安全状态进行监管，车辆运行中禁止非工作人员闯入，称为『行车不行人』。

矿车检测开始工作人员 检测

矿车是否移动是否为工作人员

是工作人员与矿 车距离判断是

行车过程人员入侵预警灵活匹配生产现场业务规程AI技能编排数据源 模型节点 处理节点 判断节点 安全规程

预警生成可基于平台监测预警应用，实现闭环处置可封装为微服务，开放API接口，提供给生产运行系统核心亮点4：模型自迭代及CV大模型复判，提升复杂场景识别精度超低频安全生产事件缺乏有效数据，如何实现冷启动？

相同模型不同现场环境下的Corner-Case，如何快速优化？ 基于CV大模型生成的One-For-All安全生产大模型，中心端单卡A100可支持1万路复判文心·安全生产CV大模型

保持召回率同时，显著降低误报，秒级复判设备缺陷

设备异常 人员行

龙源烟火日均总误报数下降绝缘子 …盖破损 破

线路 …油异物

出舱 …柜门作业 合临洮越界误报数下降预警处置过程中，业务人员即可完成误报标注，数据回流至中心侧核心亮点5：多模态大模型，零样本冷启动，快速满足碎片化需求分析痛点 针对生产现场的长尾场景和碎片化需求，在少样本或0样本情况下，模型生产周期长，端到端效果差分析10:0010:05

零样本分钟级生成技能 30分钟完成迭代模客户提出需求（矿山皮带异物识别） 客户提出需求（矿山皮带异物识别）2.0版本大模型技能（90%精度）4500张矿山皮带异物，模型迭代拆解场景，明确Prompt（找出皮带的金属异物）拆解场景，明确Prompt（找出皮带的金属异物）样本准备设置数据收集规则（3帧/S）无需训练，自动生成1.0版本大模型技能无需训练，自动生成1.0版本大模型技能部署运行、上线推理

11:00am10:30am

自然语言交互提升平台易用性已有模型，需结合业务规则提升平台可用性已有模型，需结合业务规则提升平台可用性（临洮跳河，倚靠栏杆人员无需报警）Prompt（倚靠栏杆人员无需报警）Prompt（倚靠栏杆人员无需报警）自动生成新技能上线运行，减少误报

核心优势提升效率，小时级可完成构建场景化AI技能降低门槛技能贴合场景，根据业务规则，可通过辅助事件复核，提升平台易用性核心亮点6：内置基于大模型的安全生产智能助手–度安安大模型助力安全生产从“感知智能”迈向“决策智能”安全生产智能工作间安全生产应用中心风险AI洞察 设备异常诊

智能隐患上报

作业任务管理HSE专业问答 生产运行分析 安全报告生成安全生产使能中心设备管理

AI技能管理

知识管理

AI原生插件管理提供设备检维修、隐患处置、风险辨识和作业过程专业指导

安全、设备、工艺专家多位一体，对话式安全生产运行分析，工单任务一键下达

无需跨系统即可完成安全运行情况总结 例 一体机渠道标杆：水务行业一体机独家合作伙伴水厂侧售卖一体机快速铺货，集团侧部署大平台集中管控 客户简介 解决方案 该客户是一家专业的环境纵深生态平台，以智库和智能作为双引擎，主要服务中国的80%的以拥有污水处理和垃圾处理设施资产和运营为主业的上市公司。 痛点需求

水厂部署一见视频AI有效提高监控效率，减少人工干预；水务集团部署一见平台，实现统一安全管控。 客户成效 出货30+台一体机渠道已拓展10+出货30+台一体机渠道已拓展10+客户落地平均准确率>90%共建39个水务行业AI模型提升安全运营运营水平：需要一套智能化系统，对水厂进出车辆的车辆行驶路线和装卸环节重点监管，通过智能化手段对人落地平均准确率>90%共建39个水务行业AI模型矿山行业：某煤矿企业，覆盖综采、掘进等核心生产环节AI安全管控 客户简介 解决方案 皮带跑偏皮带异物禁区闯入煤流检测该客户是专门从事煤炭及相关产业的专业公司。截至目前，公司控制煤炭资源213亿吨，连续10年进入中国煤炭工业50强，积极推进智慧矿山建设。皮带跑偏皮带异物禁区闯入煤流检测痛点需求入井人员检测运煤车厢破损着装监测堆料堵塞痛点需求入井人员检测运煤车厢破损着装监测堆料堵塞 客户成效 智能感知：7*24小时实时监测皮带煤量变化、皮带转载点堆煤因素和趋势、皮带异物、皮带跑偏量、电机运行异常、托辊损坏不转等异常；智能决策：依托AI人工智能算法，实时分析和处置，皮带变频调速、皮带开停、皮带堆煤异物处理、皮带维检修，减少巡检人员70%以上；智能感知：7*24小时实时监测皮带煤量变化、皮带转载点堆煤因素和趋势、皮带异物、皮带跑偏量、电机运行异常、托辊损坏不转等异常；智能决策：依托AI人工智能算法，实时分析和处置，皮带变频调速、皮带开停、皮带堆煤异物处理、皮带维检修，减少巡检人员70%以上；智能控制：现场自动控制、地面集控人员集中控制、巡检人员现场处理与通信，提升煤矿安全生产水平。监控大屏示意无人化监控大屏示意安全化24化工行业：泰兴某化工园区，AI辅助动火作业等场景安全管控客户痛点：大量的视频监控系统需要被动式职守观察，传统小模型模型准确度低，系统产生大量的误报，导致预警系统不可用；解决方案：大模型在各类场景上的检测识别效果均优于传统模型；同时大模型能更灵活地定制新的场景，让新场景的开发更便捷。安全生产CV大模型人员行为监测 设备状态识别 环境异常预

云端复判基于CV大模型

疑似隐患识别能力显著增强

误报数降低…防护 …穿戴

仪表 …异常 …

跑冒 滴漏 …

边端初判轻量化分类模型

高危低频场景检出能力提升

召回率提升 动火作业未佩戴安全帽 动火作业明火检测火炬燃烧动火作业明火检测火炬燃烧25 登高作业未佩戴登高绳 25黑烟检测白烟检测玩手机识别黑烟检测白烟检测玩手机识别高位摄像头->人体目标小于50x50像素摄像头多为球机->道路画面频繁变动；技术挑战 轨道吊移动高位摄像头->人体目标小于50x50像素摄像头多为球机->道路画面频繁变动；技术挑战 轨道吊移动->人、车频繁遮挡；港口厂区拖车、铲车较多、临水作业等安全生产风险较高，同时由于港口区域范围大、监管难，传统业务诉求监管方式很难实现全范围监控管理；基于现场场景收集了30+视频片段，基于该数据集训练完成模型测试事件级准确率为基于现场场景收集了30+视频片段，基于该数据集训练完成模型测试事件级准确率为96.3%第一次上线后第一周统计事件级准确率：第一周统计事件级准确率：71%安全帽/工服检测

开放场景，像素