第十四聚类分析

第十四聚类分析演示文稿第一页，共二十八页。（优选）第十四聚类分析第二页，共二十八页。1.聚类的目的

根据已知数据，计算各观察个体或变量之间亲疏关系的统计量（距离或相关系数）。根据某种准则（最短距离法、最长距离法、中间距离法、重心法等），使同一类内的差别较小，而类与类之间的差别较大，最终将观察个体或变量分为若干类。第三页，共二十八页。2.聚类分析的应用例子同一种疾病（如肝炎），根据临床表现等将病人分成若干类（甲、乙、丙、丁、戊型肝炎）根据疾病的若干临床表现，将病人分成轻、中、重三型在儿童生长发育研究中，把以形态学为主的指标归于一类，以机能为主的指标归于另一类第四页，共二十八页。3.聚类的种类根据分类的原理可将聚类分析分为：

K-meansCluster过程（快速聚类法）

HierarchicalCluster过程（系统聚类法）根据分类的对象可将聚类分析分为：系统Q型（即样品聚类clusteringforindividuals）系统R型（即指标聚类clusteringforvariables)第五页，共二十八页。4.聚类分析与判别分析间的联系

先采用聚类分析获得各个个体的类别（classification）；然后采用判别分析建立判别函数，对新个体进行类型识别（identification）第六页，共二十八页。5、距离与相似系数（P418）（1）距离

假使每个样品有p个变量，则每个样品都可以看成p维空间中的一个点，n个样品就是p维空间中的n个点，则第i样品与第j样品之间的距离记为dij。第七页，共二十八页。（2）相似系数

研究样品间的关系常用距离，研究指标间的关系常用相似系数。相似系数常用的有：夹角余弦与相关系数第八页，共二十八页。5、方法原理按距离的远近划分类别6、用途细分市场消费行为划分设计抽样方案等第九页，共二十八页。7、操作时距离测量方法建议使用默认值即可（Q型分类）8、变量选择无关变量有时会引起严重的错分应当只引入在不同类间有显著差别的变量尽量只使用相同类型的变量进行分析第十页，共二十八页。9、共线性问题对纪录聚类结果有较大的影响最好先进行预处理10、变量的标准化变量变异程度相差非常大时需要进行标准化后会削弱有用变量的作用第十一页，共二十八页。11、异常值影响较大还没有比较好的解决办法应尽力避免12、分类数从实用角度讲，2～8类比较合适13、专业意义一定要结合专业知识进行分析第十二页，共二十八页。二、K-meansCluster过程属于非系统聚类法的一种也叫快速聚类\动态聚类、逐步聚类、迭代聚类）（quickclustermethod、k-meansmodel）适用于样本量很大的情形，用系统聚类法计算的工作量极大，作出的树状图也十分复杂,不便于分析

第十三页，共二十八页。1、原理选择初始凝聚点根据欧氏距离将每个样品归类各类的重心代替初始凝聚点根据欧氏距离将每个样品归类，……

直至达到指定的迭代次数或达到终止迭代的判据要求第十四页，共二十八页。2、初始凝聚点

initialclusterseeds；clustercenters自动选择必须给出允许分类的最大个数k凭经验选择以初始凝聚点建立一个数据文件,在SPSS的CETERS过程的READINITIALFROM选择项中输入该数据文件第十五页，共二十八页。3、方法特点要求已知类别数可人为指定初始位置节省运算时间样本量大于100时有必要考虑只能使用连续性变量第十六页，共二十八页。4、菜单：Analyze-classify-KmeansCluster5、分析实例(P416data13-02)

第十七页，共二十八页。三、HierarchicalCluster过程

1、系统聚类的基本思想相近的聚为一类(以距离表示，样品聚类)相似的聚为一类(以相似系数表示，变量聚类)第十八页，共二十八页。2、方法原理先将所有n个变量／观测量看成不同的n类；然后将性质最接近（距离最近）的两类合并为一类；再从这n-1类中找到最接近的两类加以合并；依此类推，直到所有的变量／观测量被合为一类；使用者最后再根据具体的问题和聚类结果来决定应当分为几类。第十九页，共二十八页。3、类与类之间的距离1.最短距离法(singlelinkage)2.最长距离法(completelinkage)3.中间距离法(medianmethod)4.类平均法(averagelinkage)5.可变类平均法(flexible-betamethod)6.重心法(centroidmethod)7.Ward离差平方和法(Ward'sminimum-variancemethod)第二十页，共二十八页。8.Mcquitty的相似分析法(Mcquitty'ssimilarityanalysis)9.最大似然估计法(EML)10.密度估计(densitylinkage)11.两阶段密度估计法(two-stagedensitylinkage)等。第二十一页，共二十八页。4、系统聚类法的性质

单调性

中间距离法、重心法不具有单调性空间的浓缩与扩张

不同聚类法作图，横坐标的范围可相差很大。最短距离法与重心法比较浓缩；可变类平均比较扩张；类平均法比较适中。第二十二页，共二十八页。5、有关问题

几种聚类方法获得的结果不一定相同指标聚类采用相似系数，相似系数大或距离小则表示类间关系密切，为了统一，可采用以下公式变换。

第二十三页，共二十八页。6、特点一旦观测/变量被划定类别，其分类结果就不会再进行更改；可以对变量或记录进行聚类；变量可以为连续或分类变量；提供的距离测量方法非常丰富；运算速度较慢。第二十四页，共二十八页。

7、变量聚类法

原理与观测量聚类法类似,只是将标准化后的变量视为“个体”，变量间的相关系数描述“个体”间的相似程度。

第二十五页，共二十八页。8、路径：Analyze-Classify-HierarchicalCluster9、分析实例（P428/P437data13-03/data11-03）

第二十六页，共二十八页。SPSS自带数据集judges.sav是中、美、法等七个国家的裁判和未经严格