机器视觉自动检测技术

机器视觉自动检测技术第1页/共52页联系方式机械学院数字制造国家重点实验室E-mail：ywy20052006@126.com第2页/共52页学习目的知识－了解机器视觉与图像处理的基本原理、构造、编程技术，以及各种机器视觉检测技术的相关知识；能力－熟悉图像处理程序的编写与调试，具备基本的编程解决问题的能力；情商－具有机电工程师应有的认真负责之态度第3页/共52页大纲一、机器视觉基础(2学时)二、机器视觉器件(4学时)

1．相机的分类及主要特性参数

2．镜头的原理与选型

3．图像采集卡的原理及种类

4．图像数据的传输方式汇总及比较

5．光源种类与选型三、机器视觉成像技术(2学时)

1．灰度照明技术

2．彩色照明技术

3．照明器材原理及选型四、机器视觉核心算法集合(6学时)

1．滤波算法及其应用

2．数学形态学及其应用

3．边缘检测算法及其应用

4．污点查找算法及其应用

5．阈值分割的原理与方法汇总

6．模版匹配算法及其应用五、机器视觉工程应用(10学时)

1．机器视觉系统需求分析及系统设计概述

2．在表面检测领域中的应用及案例分析

3．在尺寸测量领域中的应用及案例分析

4．在包装行业中的应用及案例分析

5．在字符识别中的应用及案例分析第4页/共52页

第一课机器视觉基础

第5页/共52页1.机器视觉的定义机器视觉：用机器代替人眼来做测量和判断机器视觉系统采用图像摄取装置将被摄取目标转换成图像信号，传送给图像处理系统；图像处理系统根据像素分布和亮度、颜色等信息，进行运算来抽取目标的特征：面积、长度、数量、位置等；根据预设的判据来输出结果：尺寸、角度、偏移量、个数、合格/不合格、有/无等；指挥执行机构进行诸如定位或分选等相应控制动作第6页/共52页第7页/共52页2.机器视觉的特点机器视觉系统的特点在一些不适合于人工作业的危险工作环境或人工视觉难以满足要求的场合，常用机器视觉来替代人工视觉；在大批量工业生产过程中，用人工视觉检查产品质量效率低且精度不高，用机器视觉检测方法可以大大提高生产效率和生产的自动化程度，机器视觉系统广泛地用于工况监视、成品检验和质量控制等领域。机器视觉易于实现信息集成，是实现计算机集成制造的基础技术。第8页/共52页机器视觉与计算机视觉、图像处理模式识别人工智能数学认知科学机器学习计算机图形学传感器自动控制计算机软件计算机网络机械设计应用光学计算机视觉机器视觉工业自动化第9页/共52页3.检测功能有/无判断（PresenceCheck）面积检测（SizeInspection）方向检测（DirectionInspection）角度检测（AngleInspection）尺寸测量（DimensionMeasurement）位置检测（PositionDetection）数量检测（QuantityCount）图形匹配（ImageMatching）条码识别（Bar-codeReading）字符识别（OCR）颜色识别（ColorVerification）第10页/共52页4.机器视觉应用行业电子（Electronics）半导体（Semiconductor）计算机和外设（Computer&Peripherals）制药（Pharmaceutical）包装（Packaging）汽车（Automotive）印刷（Printing）消费品（ConsumerGoods）食品饮料（Food&Beverage）医学（Medicine）机械制造（OtherIndustries）机械制造IC装备消费电子汽车第11页/共52页4.1电子与半导体行业应用LED和LCD测试大小、形状、亮度、颜色ON/OFFLCD平板玻璃PCB检查焊点质量、丝印质量钻孔对位IC芯片、元件检测有无、方向/极性印刷质量、字符识别管脚排列一致性第12页/共52页4.2计算机和外设行业应用软盘、光盘印刷质量硬盘磁头倾斜度连接器针脚排列扁平电缆印字符识别第13页/共52页4.3制药行业应用胶囊生产中的质检壁厚、高度、外观缺陷药片形状、厚度药片装瓶数量计数第14页/共52页4.4包装行业应用药品、化妆品包装外观、条码完整性食品包装生产日期、条码、密封性第15页/共52页4.5汽车行业应用仪表盘校准（速度表）由表盘图像计算指针位置风挡雨刮器零件分类根据形状、面积、长度等车灯检测表盘、按键丝印质量零部件装配完整性第16页/共52页4.6印刷行业应用钱币印刷质量号码识别丝印质量塑料薄膜印刷对位第17页/共52页4.7消费行业应用钻石多棱面加工刀柄仿型加工鞋模制造喷雾器喷射形状分析陶瓷印花质量检查第18页/共52页4.8食品饮料行业应用瓶装液位高度检查啤酒瓶外观检测高度、形状、颜色、B标瓶盖标签完整性破损情况口服液瓶质检

罐装饮料外观检查保质期、条码第19页/共52页4.9医学应用血液分析光电内诊镜测试细胞分析第20页/共52页4.9机械制造行业量仪校准轴承检查焊接质量检查装配完整性第21页/共52页5机器视觉知名产品介绍美国Congnex，NI，DataTransaction德国Basler，VMT，Siemens日本Omron，Panasonic，Keyence加拿大Dalsa，Hexsight中国系统集成商第22页/共52页附：数字图像处理的发展概况和应用1964年：美国喷气推进实验室用计算机对“徘徊者七号”太空船发回的大批月球照片进行处理。数字图像处理应用从空间研究计划扩展到生物医学，工业生产，军事侦察等领域。二十世纪六十年代末：数字图像处理较完整的理论体系已形成，成为一门新兴的学科。二十世纪六十年代至八十年代：随着离散数学理论的创立和完善，数字图像处理理论和方法进一步完善，应用范围更加广泛。机器视觉的推广源自美国八十年代汽车工业的快速增长二十世纪九十年代以来：数字图像处理向更高级的方向发展：实时性，智能化，普及化，网络化，低成本第23页/共52页应用领域：通信：图像传输，电视电话，HDTV等。宇宙探测：星体图片处理。遥感：地形、地质、矿藏探查，森林、水利、海洋、农业等资源调查，自然灾害预测，环境污染的监测，气象云图。生物医学：CT，NMR，PET，SPECT，DSA，X射线成像，B超，红外图像，显微图像。工业生产：产品质量检测，生产过程控制，CAD，CAM。第24页/共52页应用领域：军事：军事目标侦察，制导系统，警戒系统，自动火器控制，反伪装等。公安：现场照片，指纹，手迹，印章，人像等处理和鉴别。档案：过期的文字、图片档案的修复和处理。机器人视觉娱乐：电影特技，动画，广告，MTV等。第25页/共52页图像处理最先应用于空间探索第26页/共52页地球资源勘探第27页/共52页微波段成像（雷达）不受气候、光照条件影响，可以穿透云层，通过植被、冰层和极干燥地区西藏东南山区航天器拍摄的雷达图像地球资源勘探第28页/共52页遥感图片第29页/共52页第30页/共52页气象云图气象预报第31页/共52页计算机合成图像

第32页/共52页计算机合成图像

第33页/共52页军事应用目标跟踪第34页/共52页军事应用隐形飞机、定位轰炸第35页/共52页军事应用第36页/共52页军事应用第37页/共52页火星车前部图，中部的两个小突出是两个黑白CCD摄像机自动驾驶勇气号火星车第38页/共52页

Rocky7视觉系统获取的立体图象对(a)深度图象

(b)障碍物探测示意图Rocky7视觉系统对场景的深度恢复

第39页/共52页“机遇”号火星车拍摄火星土壤的显微照片

“勇气”号火星车发回的彩色照片美国勇气号和机遇号火星探测移动机器人第40页/共52页CMU月球探测实验车Nomad漫游者第41页/共52页X-Ray第42页/共52页MRI第43页/共52页MRI第44页/共52页

超声图像第45页/共52页

超声图像第46页/