前言
继关联分析-问题定义(1)(https://blog.youkuaiyun.com/weixin_40997544/article/details/125078189?spm=1001.2014.3001.5502),本章讲述❤️频繁项集的产生❤️!
|
---|
TID | 项集 |
---|---|
1 | {面包,牛奶} |
2 | {面包,尿布,啤酒,鸡蛋} |
3 | {牛奶,尿布,啤酒,可乐} |
4 | {面包,牛奶,尿布,啤酒} |
5 | {面包,牛奶,尿布,可乐} |
今日感慨:天地不言 青山不尽🐎🐎🐎
提示:以下是本篇文章正文内容,下面案例可供参考
一、频繁项集的产生
1. 格结构(lattice structure)
格结构(lattice structure)常常被枚举所有可能的项集。图2-1显示 I I I= { a a a, b b b, c c c, d d d, e e e} 的项集格。一般来说,一个包含 k k k个项的数据集可能产生 2 k − 1 2^k - 1 2k−1 个频繁项集,不包括空集在内。由于在许多实际应用中 k k k的值可能非常大,需要探查的项集搜索空间可能是指数规模的。
2. 候选项集(candidate itemset)
发现频繁项集的一种原始方法就是确定格结构中每个候选项集(candidate itemset)的支持度计数。为了完成这一任务,必须将每个候选项集与每个事务进行比较,如图2-2所示。如果候选项集包含在事务中,则候选项集的支持度计数增加。例如,由于项集{面包,牛奶}出现在事务1,4,和5中,其支持度计数将增加3次。这种方法的开销可能会非常大,因为需要进行次比较,其中 N N N是事务数, M = 2 k − 1 M = 2^k - 1 M=2k−1是候选集数,而 w w w是事务的最大宽度。
有几种方法可以降低产生频繁项集的计算复杂度。
(1)减少候选项集的数目(
M
M
M)。后续介绍的先验(
a
p
r
i
o
r
i
apriori
apriori)原理,是一种不用计算支持度值而删除某些候选项集的有效方法。
(2)减少比较次数。替代将每个候选项集与每个事务相匹配,可以使用更高级的数据结构或者存储候选项集或者压缩数据集,来减少比较次数。
解释
此文仅为本人学习过程中的笔记,并非原创。我是菜鸟大人,一个只会写paper的小菜鸡🤦♀️🤦♀️🤦♀️。