关联规则挖掘算法

2019/11/22,1,关联规则挖掘算法FP-growth,2019/11/22,2,关联规则的基本概念,数据挖掘是指从大量的、不完全的、有噪声的、模糊的、随机的数据中，提取隐含在其中的、人们事先不知道的但又是潜在有用的信息和知识的过程数据关联是数据库中存在的一类重要的可被发现的知识。若两个或多个变量的取值之间存在某种规律性，就称为关联关联分析的目的是找出数据库中隐藏的关联网。,2019/11/22,3,关联规则的基本概念,支持度：P(AUB)，即A和B这两个项集在事务集D中同时出现的概率置信度：P(BIA)，即在出现项集A的事务集D中，项集B也同时出现的概率,2019/11/22,4,关联规则的基本概念,bread=milk支持度-7,置信度-65P(breadUmilk)=7P(milkIbread)=65如果一条关联规则同时满足最小支持度阈值和最小置信度阈值，那么就认为它是有趣的，并称为强关联规则。给定一个事务集D，挖掘关联规则问题就是产生支持度和可信度分别大于用户给定的最小支持度和最小可信度的关联规则，也就是产生强规则的问题。,2019/11/22,5,FP-tree构造算法,扫描事务数据库一次。收集频繁项的集合F和它们的支持度。对F按支持度降序排序，结果为频繁项表L。创建FP-tree的根结点(null)。对于D中每个事务：选择事务中的频繁项，并按L中的次序排序。设排序后的频繁项表为p|P，其中p是第一个元素，而P是剩余元素的表调用insert_tree(p|P，T)。如果T有子女N使得N.item-name=p.item-name，则N的计数增加1；否则创建一个新节点N，将其计数设置为1，连接到他的父节点T，并通过节点链结构将其连接到具有相同item-name的节点如果P非空，递归的调用insert_tree(P，N),2019/11/22,6,FP-growth算法,ProcedureFP-growth(Tree，a)ifTree包含单个路径pthenfor路径P中每个节点组合(记做)产生模式a，其支持度support=中节点的最小支持度;elseforeachai在tree的头部产生一个模式=aia，其支持度support=ai.support;构造的条件模式基，构建的条件FP-treeTree;ifTreethen调用FP-growth(Tree，);,2019/11/22,7,事务数据库,2019/11/22,8,第一步、构造FP-tree,扫描事务数据库得到频繁1-项目集F定义minsup=20%，即最小支持度为2重新排列F,2019/11/22,9,重新调整事务数据库,2019/11/22,10,创建根结点和频繁项目表,Null,2019/11/22,11,加入第一个事务(I2,I1,I5),Null,I2:1,I1:1,I5:1,2019/11/22,12,加入第二个事务(I2,I4),Null,I2:2,I1:1,I5:1,I4:1,2019/11/22,13,加入第三个事务(I2,I3),Null,I2:3,I1:1,I5:1,I4:1,I3:1,2019/11/22,14,加入第四个事务(I2,I1,I4),Null,I2:4,I1:2,I5:1,I4:1,I3:1,I4:1,2019/11/22,15,加入第五个事务(I1,I3),Null,I2:4,I1:2,I5:1,I4:1,I3:1,I4:1,I1:1,I3:1,2019/11/22,16,加入第六个事务(I2,I3),Null,I2:5,I1:2,I5:1,I4:1,I3:2,I4:1,I1:1,I3:1,2019/11/22,17,加入第七个事务(I1,I3),Null,I2:5,I1:2,I5:1,I4:1,I3:2,I4:1,I1:2,I3:2,2019/11/22,18,加入第八个事务(I2,I1,I3,I5),Null,I2:6,I1:3,I5:1,I4:1,I3:2,I4:1,I1:2,I3:2,I5:1,I3:1,2019/11/22,19,加入第九个事务(I2,I1,I3),Null,I2:7,I1:4,I5:1,I4:1,I3:2,I4:1,I1:2,I3:2,I5:1,I3:2,2019/11/22,20,第二步、FP-growth,首先考虑I5，得到条件模式基、构造条件FP-tree得到I5频繁项集：I2,I5:2,I1,I5:2,I2,I1,I5:2,Null,I2:2,I1:2,I3:1,2019/11/22,21,第二步、FP-growth,接着考虑I4，得到条件模式基、构造条件FP-tree得到I4频繁项集：I2,I4:2,Null,I2:2,I1:1,2019/11/22,22,第二步、FP-growth,然后考虑I3，得到条件模式基、构造条件FP-tree由于此树不是单一路径，因此需要递归挖掘I3,Null,I2:4,I1:2,I1:2,2019/11/22,23,第二步、FP-growth,递归考虑I3，此时得到I1条件模式基,即I1I3的条件模式基为构造条件FP-tree得到I3的频繁项目集I2,I3:4,I1,I3:4,I2,I1,I3:2,N