精品图像应用姜志国PPT课件.ppt

数字图像处理技术的应用 北京航空航天大学宇航学院图象处理中心姜志国2006年5月 1 第一节数字图像处理应用概述 2 1 1图像的重要性 人类离不开图像 计算机图像技术渗透到各个科技领域 百闻不如一见 画面比文字更形象生动 人类70 以上信息来自视觉 21世纪 信息技术 生命科学 航空航天为重要技术 图像技术在其中起着重要的作用 3 1 2数字图像技术应用 我国发射的多颗卫星 多数用于对地观测和侦察 微机普及 图像民用 普及 计算机成熟是图像技术普及应用基础 数字图象处理技术已应用到各个领域 以下举几个例子 4 1 遥感图像应用 农业普查 森林覆盖计算 水利工程等的客观估计计算 森林火灾监护 客观反映火灾情况 面积 5 QuickBird示例影像 北京颐和园高分辨率卫星影像 拍摄时间为2003年9月 6 水体界线的确定在近红外图像上 水体呈黑色 7 2 导弹末制导 图象识别技术应用于导弹的精确未制导 使其精确打击目标 如 机场 桥梁等 8 3 生物特征识别 军事 公安中的人脸 指纹 掌纹识别等 9 4 医学应用 CT MR1 PET B超 DSA 血管造影 红外乳腺 显微病理 电子显微镜 远程医疗图像 皮肤图象 X线 刀与 刀脑外科等等离不开图像 10 全自动细胞DNA定量分析检测系统 11 12 13 5 工业图像 X线控探伤 轴 X线检察 三维测量 定位 形状测量 机器人视觉 商检 14 CT图像中缺陷的快速定位方法 模拟CT断层图像 实验结果 实际CT图像 实验结果 15 6 民用 数码相机 照片扫描管理等 16 第二节应用案例及分析 显微图像自动聚焦 融合 三维成像 17 研究意义 人类通过不同尺度的成像 从宏观宇宙 遥感 到微观分子 来观察 了解客观物质世界 客观物质的结构是三维的 而传统研究显微样本三维结构的方法是通过在显微镜下获取其二维图像进行观察和分析的 难以准确理解样本的三维结构 因此 研究显微三维成像理论及三维定量分析技术具有很高的实用价值和重要的学术意义 该领域的研究也是显微信息学科的研究热点之一 18 应用领域 通过对显微镜的自动操纵 图像融合和显微三维成像 可应用于医学的远程诊断 空间科学实验 生物 材料等 及微观观察测量实验等 19 2 1显微图像自动聚焦算法2 2多层聚焦融合算法2 3基于聚焦深度的三维成像系统 20 远程的病理会诊 显微智能仪器 需要全自动控制显微镜系统 自动控制显微镜的关键技术 显微图像的自动聚焦分析 全自动显微镜示例 自动聚焦问题的提出 21 透镜成像模型图 22 评价函数最大值的位置即为聚焦位置 不存在可能导致聚焦错误的局部极大值 具有较强的抗噪能力 聚焦曲线尖峰性好 聚焦速度比较快 聚焦评价函数指标 难点问题 有效的聚焦评价函数的确定 23 基于改进Laplacian算子的自动聚焦方案 空域 聚焦图像比离焦图像有较锐化的边缘 频域 聚焦图像比离焦图像包含更多的高频分量 使用象元间的可变步长step来计算二阶差分 即 24 聚焦实验 对比 灰度方差算子 灰度差分绝对值之和 SMD 算子 Roberts梯度算子 基于Sobel梯度算子的Tenengrad函数 能量谱方法 改进拉普拉斯算子等 25 c 聚焦评价函数曲线 a 离焦图像 b 聚焦图像 实验一 包含40幅图像的一个序列得到的聚焦评价函数曲线 26 c 聚焦评价函数曲线 实验二 对实验一中40幅图像的序列加入20 的高斯噪声 a 离焦图像 b 聚焦图像 27 自动聚焦应用实例 为配合全自动显微镜系统的需求 研究运动目标的检测与跟踪算法模块 为空间科学实验目标成像观察用 倒置生物镜的活体目标局部聚焦演示 倒置生物镜的活体目标采集系统 与中科院空间中心联合 28 自动聚焦算子小结 改进Laplacian算子可以有效地抑制噪声干扰 聚焦评价函数曲线平滑 有明显的峰值 单峰性好 且变化陡峭 步长的选择 噪声干扰小时 步长和阈值取小 噪声和亮度变化大时 步长和阈值可以取得稍大一些 一般步长取7 29 2 1显微图像自动聚焦算法2 2多层聚焦融合算法2 3基于聚焦深度的三维成像系统 30 传统光学硬件的问题 随着放大倍数和分辨率的增大 景深减小 使得物体不可能在一幅图像中完全聚焦清晰 而生物医学及材料科学的成像要求显微镜既要有更高的分辨率又要有足够的景深 这是传统光学硬件的矛盾 31 解决方法 利用数字图像融合技术 对序列图像进行合成 Multi Focus 序列显微图象融合原理图 32 空域融合算法 为解决反射光显微图象融合问题 提出引入空域算法中的改进拉普拉斯算子 33 改进拉普拉斯 Sum Modified Laplacian SML 图像融合算子 N 窗口的大小 即为点 i j 的聚焦清晰的测度 34 各种空域融合算子的实验分析 基于点处理的方法 简单的空域融合算子 灰度平均法 最大离差法 和基于区域处理的方法 简单的区域融合方法 灰度方差算子 基于Sobel梯度算子的Tenengrad函数方法 改进拉普拉斯算子方法 35 空域融合算法 基于点处理的方法 最大灰度法最小灰度法灰度平均法最大离差法 36 简单的区域融合方法 最大 最小对比度 灰度平均法等 灰度方差算子 LocalConvariance 空域融合算法 基于区域处理的方法 37 空域融合算法 基于区域处理的方法 基于Sobel梯度算子的Tenengrad函数方法 38 a 序列图像之1 b 序列图像之5 c 序列图像之11 d 序列图像之14 e 序列图像之20 f 序列图像之3031幅蝴蝶眼睛序列显微图像 39 改进Laplacian法multi focus结果 11 11窗口 步长5 40 岩石图象depthfromfocus实验 10幅岩石图像序列 仅示9幅 41 多层叠合结果 42 2 1显微图像自动聚焦算法2 2多层聚焦融合算法2 3基于聚焦深度的三维成像系统 43 聚焦深度 DepthfromFocus 的基本思想 在前面multi focus方法基础上 提取z方向信息 即可实现通过二维图像序列进行三维重建 优点 计算方式实现表面三维成像 代替反射光激光共聚焦成像 要解决问题 高度插值拟合 三维表面测量 显示 44 高度图的插值拟合 SML聚焦评价函数曲线 从图中我们可以看出 聚焦评价函数曲线在峰值处具有高斯分布 在边缘处对称性不太显著 这主要是由图像采集过程中显微镜的初始位置造成的 为此 我们将分析仅限于聚焦评价函数的峰值区域 45 聚焦评价函数的高斯插值 由SML算子可得到两个结果 聚焦评价函数最大值和该值在序列中的位置d 46 基于DepthfromFocus的高度插值与三维测量 实验结果 深度索引图像 蝴蝶眼睛三维高度图像 47 未经高斯插值处理的深度图 b 高斯插值处理后的深度图深度索引图像 高度图的插值拟合效果 48 a 原36幅图像聚焦分析拟和曲线b 抽取的12幅图像聚焦分析拟和曲线36幅病理图像序列的聚焦曲线 插值精度分析 聚焦最大值的层为21 拟合的聚焦算子最大层面为21 13 四舍五入取整为21 49 下表为5个图像序列样本的实验结果 拟合计算值与实际测量值基本相符 表 自动聚焦算法中的步长拟合比较表 50 三维表面测量分析 z轴控制器分辨力 0 1um测量参数 直线或曲线距离 剖面分析 表面积 分形维等参数 测量目标 材料断口 皮肤 三维纹理 采用机械材料表面测量国标GB350 对应国际标准为ISO4287 51 2020 3 21 52 根据显微序列图象合成原理 研制 设计了Z轴自动控制显微镜 结合研发的软件系统 组成了光 机 电一体化的 显微三维成像系统 三维实体测量显微镜 Z轴自动控制器 DepthfromFocus成像硬件系统设计 岩石图象depthfromfocus实验 多层叠合结果 高斯插值处理后的深度图 10幅岩石图像序列 仅示9幅 53 岩石三维表面的剖线 Profile 测量分析示意图 54 三维图像的表面重建显示 直接利用高度图 纹理图进行三维重建显示 55 可以从任意角度观察岩石的三维表面图象 56 立体图像的左右视图生成 用脚印法生成左右视图 模拟生成的左视野图象模拟生成的右视野图象 57 仿真立体图像 Anaglyph 58 总结 传