数据融合与信息处理

关于数据融合与信息处理集成与融合新系统：升华、再生融合：综合、互补集成：基础、结构图2.1集成、融合关系图第2页,共54页，2024年2月25日，星期天数据融合20世纪80年代诞生，主要解决多传感器信息处理问题，把分布在不同位置的多个同类或不同类传感器的局部、不完整的观察量加以综合，利用其互补性、冗余性，克服单个传感器的不确定性和局限性，提高整个传感器系统的有效性能，已形成对系统环境相对完整一致的感知描述，提高测量信息的精度和可靠性内涵的延展，不同方法获得的参量的综合第3页,共54页，2024年2月25日，星期天数据融合的三层定义全空间综合互补多传感器动态信息处理算法融合图2.2数据融合的3层定义第4页,共54页，2024年2月25日，星期天数据融合的内涵延展举例红外和可见光图像融合？PET,MR,CT等模式图像间的融合？特征点、面、区域提取与基于体素方法的融合用于配准基于颜色、纹理、光度等特征的融合用于识别？基于颜色、面积、纹理等特征的融合用于分割？特征选择？第5页,共54页，2024年2月25日，星期天信息的互补问题本质在于对不确定处理和精确处理的互补，复杂，并不是简单的代数相加运算。包括信息表达方式上的、结构上、功能上的、不同层次上的互补。把握不同信息的本质举例：特征点和体素/像素的互补？纹理和颜色的互补？时域、频域、复频域的互补？第6页,共54页，2024年2月25日，星期天数据融合的基本框架信息源信息转换、传递、交换信息互补、综合处理信息融合处理报告

信息流：信息获取信息预处理信息融合融合决策第7页,共54页，2024年2月25日，星期天2多传感器数据融合的基本原理N个不同类型的传感器收集观测目标的数据。对传感器的输出数据（离散的或连续的时间函数数据，输出矢量，成像数据或一个直接的属性说明）进行特征提取的变换，提取代表观测数据的特征矢量。对特征矢量进行模式识别处理（如聚类算法，自适应神经网，或其它能将特征矢量变换成目标属性判决的统计模式识别法等），完成各传感器关于目标的说明。将各传感器关于目标的说明数据按同一目标进行分组，即关联。利用融合方法将各一目标各传感器数据进行合成，得到该目标的一致性解释与描述。第8页,共54页，2024年2月25日，星期天2.1数据融合的层次结构数据层融合特征层融合决策层融合第9页,共54页，2024年2月25日，星期天数据层融合全部传感器的观测数据直接进行融合，然后从融合的数据中提取特征矢量，并进行判断识别。传感器必须同质优点：保持了尽可能多的原始信息缺点：处理的信息量大，处理实时性差。第10页,共54页，2024年2月25日，星期天数据层融合图例待识别物体图像数据声音数据气味数据传感器传感器传感器统一的数据矩阵特征提取决策第11页,共54页，2024年2月25日，星期天特征层融合将每个传感器的观测数据进行特征抽取以得到一个特征矢量，然后将这些特征矢量融合起来，并根据融合得到的特征矢量进行判定优点：对通信带宽的要求较低缺点：由于数据丢失使其准确性有所下降第12页,共54页，2024年2月25日，星期天特征层融合图例待识别物体图像数据声音数据气味数据传感器传感器传感器统一的特征矩阵决策特征提取特征提取特征提取第13页,共54页，2024年2月25日，星期天决策层融合决策层融合是根据一定的准则以及每个决策的可信度作出最优决策。每个传感器执行一个对目标的识别过程，将来自每个传感器的识别结果进行融合。优点：对通信带宽要求最低缺点：产生的结果相对最不准确。第14页,共54页，2024年2月25日，星期天决策层融合图例待识别物体图像数据声音数据气味数据传感器传感器传感器统一的决策结果特征提取特征提取特征提取决策结果决策结果决策结果第15页,共54页，2024年2月25日，星期天各种融合层次的特性比较特性数据层融合特征层融合决策层融合信息量最大中等最小信息损失最小中等最大容错性最差中等最好抗干扰性最差中等最好对传感器的依赖性最大中等最小数据融合方法最难中等最易预处理最小中等最大分类能力最好中等最差第16页,共54页，2024年2月25日，星期天2.2数据融合的体系结构集中式分布式混合式第17页,共54页，2024年2月25日，星期天集中式将各传感器结点的数据都送到中央处理器进行融合处理。优点：实时融合，精度高，解法灵活缺点：对处理器要求高，可靠性较低，数据量大，难以实现第18页,共54页，2024年2月25日，星期天集中式结构图示传感器1传感器2传感器n预处理预处理预处理融合结点第19页,共54页，2024年2月25日，星期天分布式各传感器利用自己的量测单独跟踪目标，将估计结果送到总站，总站再将子站的估计合成为目标的联合估计优点：对通信带宽要求低，计算速度快，可靠性和延续性好缺点：跟踪精度没有集中式高第20页,共54页，2024年2月25日，星期天分布式结构图示传感器1传感器2传感器n预处理预处理预处理融合结点局部判决局部判决局部判决第21页,共54页，2024年2月25日，星期天2.3多传感器融合系统的设计的注意问题系统中传感器的类型、分辨率、准确率传感器的分布形式系统的通信能力和计算能力系统的设计目标系统的拓扑结构（包括数据）第22页,共54页，2024年2月25日，星期天2.4数据融合中的检测、分类和识别算法基于物理的模型仿真估计：卡尔曼滤波、最大似然、最小方差句法：图像代数基于特征推理技术基于参数的方法：古典概率推理、贝叶斯方法、D-S理论、广义证据基于信息论的方法：神经网络、聚类、表决方法、熵、品质因数、相关量测基于知识的模型逻辑模板、基于知识的专家系统、模糊集第23页,共54页，2024年2月25日，星期天2.4.1统计和估计方法运用概率估计的方法获取不同信息源的融合权重包括：古典概率推理、卡尔曼滤波、贝叶斯准则、D-S证据理论、广义证据理论第24页,共54页，2024年2月25日，星期天古典概率推理在给定的假设条件下，观测是来源于某一物体或事件的概率主要缺点：1）用于分类物体或事件的观测量的概率密度函数难以得到2）在多变量数据情况下，计算的复杂性加大3）一次只能评估两个假设条件4）无法直接应用先验似然这个有用的先验知识第25页,共54页，2024年2月25日，星期天卡尔曼滤波是一种线性递推的滤波方法，将状态变量引入滤波理论，用信息干扰的状态空间模型代替通常滤波采用的协方差函数，并把状态空间描述与离散时间联系起来特点：基于最小二乘法的信息优化方法，运算量小，始于实时处理，用于目标跟踪、状态估计等中。第26页,共54页，2024年2月25日，星期天贝叶斯准则利用样本提供的信息时也充分利用了先验知识，以先验分布为出发点，克服了古典统计中精度和信度预定，不依赖于样本的不合理性缺点：1）确定先验的似然函数非常困难2）当潜在具有多个假设事件并且是多个事件条件依赖时，计算将变的非常复杂3）各假设事件要求互斥4）不能处理广义的不确定问题第27页,共54页，2024年2月25日，星期天D-S证据理论针对事件发生后的结果（证据）探求事件发生的主要原因（假设），分别通过各证据对所有的假设进行独立判断，得到各证据下各种假设的基本概率分配即mass函数，然后对某假设在各证据下的判断信息进行融合，进而形成“综合”证据下该假设发生的融合概率。概率最大的假设即为判决结果。特点：1）概率论的推广，能区分“不确定”、“不知道”。2）要求各证据之间彼此独立，很难满足。3）随着推理过程的增加，计算量也大大增加。第28页,共54页，2024年2月25日，星期天广义证据处理

（generalizedevidenceprocessing,GEP）把决策空间分为若干个假设事件（命题），然后把贝叶斯方法扩展到此假设空间中。在此方法中，来自非斥命题的证据可以使用贝叶斯公式融合，从而得到某一判决。与D-S方法的不同之处在于：其概率分配值的赋予与融合是基于命题或假设事件的先验概率的。第29页,共54页，2024年2月25日，星期天2.4.2基于信息论的融合方法能把参数数据转换或映射到识别空间。所有的这些方法都有着相同的概念，即识别空间中的相似是通过观测空间中参数的相似来反映的，但是却不能直接对观测数据的某些方面建立明确的识别函数。包括：参数模板匹配、人工神经网络、聚类算法、表决算法、熵量测技术、品质因数、模式识别以及相关量测等技术第30页,共54页，2024年2月25日，星期天聚类分析法在一定条件下，按照目标间的相似性把目标空间划分为若干子集，划分的结果应使表示聚类质量的准则函数为最大。当用距离来表示目标间的相似性时，其结果降判别空间划分成若干区域，每一个区域相当于一个类别。常用的距离函数有明氏距离、欧式距离、马氏距离、类块距离等。包括：聚类分析法、表决法、神经网络法、参数模板匹配法、熵量测、品质因数、模式识别，等。第31页,共54页，2024年2月25日，星期天类间距离离差平方和法（wardmethod）D2=WM－WK－WL即对异常值很敏感；对较大的类倾向产生较大的距离，从而不易合并，较符合实际需要。ClusterKClusterLClusterM第32页,共54页，2024年2月25日，星期天表决法由每个传感器提供对被测对象状态的一个判断，然后由表决方法对这些判断进行搜索，以找到一个由板书以上传感器“同意”的判断（或采取其它简单的判定规则），并宣布表决结果。适合实时融合融合无偿较大第33页,共54页，2024年2月25日，星期天神经网络非线性，自学习，自组织，并行性，容错性权值，学习收敛性，学习速度，网络模型，结构，等需要人为地根据融合对象的特点进行调整第34页,共54页，2024年2月25日，星期天参数模板匹配把在一段时间内得到的多传感器数据与多个信息源按照预先选择好的条件进行匹配，然后判断观测量是否包含支持某一现象的证据第35页,共54页，2024年2月25日，星期天熵量测来源于通信理论通过事件发生的概率来度量实践中所包含信息的重要程度。度量信息价值的函数应具有这样的性质，即信息价值的大小与接受到该信息的概率成反比。第36页,共54页，2024年2月25日，星期天2.4.3认知模型的数据融合方法基于认知的模型试图通过模拟人的处理过程来自动实现决策的过程。这包括：模拟人的处理过程来自动实现决策的过程模糊逻辑法逻辑模板法专家系统基于知识的系统模糊集理论第37页,共54页，2024年2月25日，星期天模糊逻辑法隶属度函数，如正态函数、三角函数、梯形函数等。隶属度函数是主观确定的，但其对模糊推理的影响并不大。第38页,共54页，2024年2月25日，星期天隶属度函数若对论域（研究的范围）U中的任一元素x，都有一个数A（x）∈0，1与之对应，则称A为U上的模糊集，A（x）称为x对A的隶属度。当x在U中变动时，A（x）就是一个函数，称为A的隶属函数。隶属度A（x）越接近于1，表示x属于A的程度越高，A（x）越接近于0表示x属于A的程度越低。用取值于区间0，1的隶属函数A（x）表征x属于A的程度高低。隶属度属于模糊评价函数里的概念：模糊综合评价是对受多种因素影响的事物做出全面评价的一种十分有效的多因素决策方法，其特点是评价结果不是绝对地肯定或否定，而是以一个模糊集合来表示。A(x)=表示模糊集“年老”的隶属函数，A表示模糊集“年老”，当年龄x≤50时A（x）=0表明x不属于模糊集A（即“年老”），当x≥100时，A（x）=1表明x完全属于A，当50くx〈100时，0〈A（x）〈1，且x越接近100，A（x）越接近1，x属于A的程度就越高。这样的表达方法显然比简单地说：“100岁以上的人是年老的，100岁以下的人就不年老。”更为合理。第39页,共54页，2024年2月25日，星期天专家系统将人类专家的知识和经验以知识库的形式存入计算机，并模仿人类专家解决问题的推理方式和思维过程，运用人类的知识和经验对现实中的问题作出判断和决策。具有采用类似自然语言的方式表达，易于理解和维护缺乏自学习自我完善能力第40页,共54页，2024年2月25日，星期天基于知识的系统将规则或知名的专家知识结合起来实现自动对目标的识别。包含以下4个部分：1）知识库，包括基本事实、算法和启发式规则等2）一个大型的包含动态数据的全局数据库3）一个控制结构或推理机制4）人机界面第41页,共54页，2024年2月25日，星期天模糊集理论模糊集理论是将不精确知识或不确定性边界的定义引入到数学运算中来，它可以方便地将系统状态变量映射成控制量、分类或其他类型的输出数据。允许知识或者身份边界的不确定性。不累计所有输入输出，而只累计输出。第42页,共54页，2024年2月25日，星期天多传感器数据融合的特点1）加强对多传感器的管理。2）针对多传感器数据融合，建立统一的融合理论和广义融合模型。3）研究不确定性融合推理方法和容错能力强、实时性好的高效融合模型。4）解决数据配准、数据预处理、等问题，建立高效性能可靠的数据库管理系统和检索推理机制，利用成熟的辅助技术，建立面向具体应用需求的数据融合系统。5）将人工智能技术引入到数据融合领域；利用集成的智能软计算方法，提高多传感器融合的性能。6）利用有关的先验数据提高数据融合的性能，研究更加先进复杂的融合方法。7）在多平台/单平台、多传感器背景下，建立计算复杂度低的数据处理模型和算法。8）建立数据融合测试评估系统和多传感器管理体系。9）工业化、商品化、专业化。第43页,共54页，2024年2月25日，星期天3分布式自适应动态数据融合方法3.1测量模型和方法简述3.2测量数据范围的推导3.3最优范围的确定第44页,共54页，2024年2月25日，星期天3.1测量模型和方法简述模块1模块2模块3模块N被测单元各模块间相互传递测量数据第45页,共54页，2024年2月25日，星期天本方法的特点融合过程中考虑了测量时间小量误差对测量结果造成的影响，真正实现动态融合。综合考虑了多传感器中各传感器测量精度对最终融合结果造成的不同影响。可通过改变传感器的精度参数使融合变得不再“死板”，而是一个动态的过程，即方法可以“适应”各传感器的精度变化。以“表决”的方法，综合各传感器的测量数据，判断各传感器是否处于正常的工作状态，以避免处于故障状态的传感器所测量的数据给最终融合带来的不