人工神经网络方法优秀课件

人工神经网络方法

——原理及应用张倩倩、孙晶人工神经网络方法人工神经网络简介应用实例

——长江三角洲地区

城市体系的职能分类

人工神经网络，是一个具有高度非线性的超大规模连续时间动力系统，是由大量的处理单元(神经元)广泛互连而形成的网络。是人脑的某种抽象、简化与模拟。人工神经网络的特点和优越性：具有自学习功能；具有联想存储功能；具有高速寻找优化解的能力。在现代地理学中，人工神经网络方法特别适用于地理模式识别、地理过程模拟与预测、复杂地理系统的优化计算等问题的研究。yiθix1x2xnW1iW2iWni神经元模型神经元模型

基于生物神经元构造，W.McCulloch和W.Pitts于1943年建立了一个模拟神经元功能的数学模型，这个模型被称为MP模型。

MP模型是一个多输出单输出的非线性元件。在MP模型中，f是二值函数，其输出值为0或1，分别代表神经元的抑制和兴奋状态，它可以用阶跃函数表示，即当wji>0时，为兴奋性突触结合；当wji<0时，为抑制性突触结合；当wji=0时，为无结合。神经元构成的神经网络如图所示。yjwkjθjj#θkk#θii#θmm#wijwmiwkiyiymyk…神经网络（a）所示的两个神经元串行连接，当w21>0为兴奋性连接时，若神经元1处于兴奋状态，则神经元2也处于兴奋状态；当w21<0为抑制性连接时，若神经元1处于兴奋状态，反而会使神经元2容易处于抑制状态。在（b）中，两个神经元处于相互结合性状态，若w12和w21均为正，则某一个神经元处于兴奋状态时，另一个神经元也倾向于兴奋状态，这称为神经元之间的协调作用；若w12和w21均为均为负，则当某一个神经元处于兴奋状态时，另一神经元倾向于抑制状态，这称为神经元之间的竞争作用。协调和竞争是神经网络中并行信息处理的基本动态特性。

神经网络的基本结构把大量的神经元通过一定的拓扑结构连接起来，就形成了神经网络。神经元之间的连接方式有相互结合型结构和层状结构两大类。21435(a)相互结合型12345(b)层状结构神经网络的结构图(a)所示的相互结合型神经网络系统中存在着反馈环。在神经元的学习过程中，进行误差反馈。反馈有正、负之分，正反馈使系统发生振荡，负反馈使系统稳定。在大脑神经系统中，由于负反馈的存在，使控制抑制的机构起着十分重要的作用。正反馈对大脑神经元的同步动作起着一定的作用。在图(b)所示的层状神经网络结构中，信号依特定的方向传播。在生物体内，大脑皮质之间、感觉器官和大脑之间，就可以看作是一种分层结构，即功能模块级的分层。在大脑内确实存在各种机理不同的功能模块，这一点被大脑的解剖研究已经证明，而且每一个模块内部是由神经元组成的并行处理系统。

人工神经网络的学习规则神经网络的学习过程，一般是，首先设定初时权值，如果无先验的知识，初时权值可设定为随机值。接着输入样本数据进行学习，参照评价标准进行评判。如果达到要求，就停止学习，否则按照给定的学习法则调整权值，继续进行学习，直到取得满意的结果为止。神经网络的学习规则，主要包括误差传播式学习、联想学习、竞争性（Competitive）学习和基于知识的学习等。各种学习规则都是以Hebb规则为基础的。

误差传播式学习感知器（Perceptron）是神经网络中的一种最基本的神经网络模型，它是F.Rosenblatt于1961年提出来的。设神经元的输入输出关系为η是学习速率，di是教师信号或希望输出，δi是实际输出yi与希望输出di之差，yi和xj取1或0的离散值。联想式学习根据空间或时间上接近的事物之间，性质上相似或相反的事物之间，以及存在因果关系的事物都可能在人的大脑中产生联想的原理，人们提出了许多无教师的联想式学习模式，其学习规则可以表示为在联想式学习中，权值变化仅是输入与输出同时兴奋的结果。由于联想发生在输入与输出之间，所以这种联想被称为异联想（Hetroassociation）。

输入层输出层具有侧向抑制性连接的竞争学习网络神经网络模型的种类

按照拓扑结构可以分为反馈神经网络模型和前向神经网络模型；按照性能可以分为连续型和离散型神经网络模型，确定型和随机型神经网络模型；按照学习方式可以分为有教师学习和无教师学习神经网络；按照连接突触性质可以分为一阶线性关联神经网络模型和高阶非线性关联神经网络模型。常见的人工神经网络模型，主要包括感知器（Perceptron）神经网络、线性神经网络、前馈神经网络、径向基函数神经网络、自组织竞争神经网络、回归神经网络等。

应用实例：——长江三角洲地区城市体系的职能分类

建立城市职能分类的指标体系Kohonen网络的原理建立城市分类的Kohonen网络模型结果及讨论

2选择反映城市社会经济的指标在城市国民生产总值综合指标中，选取国内生产总值、人均国民生产总值、第一产业、第二产业、第三产业、工业产值、农林牧渔总产值以及有关财政、金融、保险等17项指标。3选择反映城市基础设施的指标从交通运输、邮电事业的指标中，选取了公路客运量、公路客运量、邮电业务总量3项指标。表——城市职能分类指标体系

城市社会发展

总人口、非农业人口、从业人员、在职职工年平均工资、在校学生数、各类专业技术人员、公共图书馆图书藏量、医院卫生院床位数。城市经济发展

城市社会发展国内生产总值、人均国民生产总值、第一产业产值、第二产业产值、第三产业产值、工业产值、农林牧渔总产值、固定资产投资、财政总收入、地方财政收入、地方财政支出、出口总额、利用外资、年末金融机构存款余额、年末金融机构贷款余额、保险收入、已决赔款。

城市基础设施

公路客运量、公路客运量、邮电业务总量。

Kohonen网络的原理

Kohonen网络也称为自组织特征映射网络(Self-OrganizingFeatureMap,简称SOM网络)，通过寻找最优权值矢量对输入模式集合进行分类。1Kohonen网络结构由输入层和输出层（也称竞争层）构成的两层网络，输入层用于接收输入模式，输出层的神经元一般按正则二维阵列排列，两层之间的各神经元实现双向权连接。2Kohonen网络的学习和工作规则

Kohonen网络的自组织学习过程可以描述为：对于每一个网络的输入，只调整一部分权值，使权向量更接近或更偏离输入矢量，这一调整过程，就是竞争学习，随着不断学习，所有权矢量都在输入矢量空间相互分离，形成了各自代表输入空间的一类模式，这就是Kohonen网络的特征自动识别的聚类功能。建立城市分类的Kohonen网络模型1指标数据的处理在本模型中，采用标准差标准化，将原始数据转换为：

结果及讨论

从长江三角洲城市的分类模型结果来看，分类结果与实际情况大体一致，结果较为理想。该方法的最大的优点是避免了各层次权重带来的主观性。运用Kohonen网络进行城市分类，存在很多需要改进的地方。比如，如果指标体系的合理选取和完善，加大学习样本以及输入模式，就可以加大网络的适应性；另外网络的学