論文背景介紹

在基于Fp-tree的關(guān)聯(lián)數(shù)據(jù)挖掘算法出現(xiàn)之前，人們對于增量數(shù)據(jù)挖掘已經(jīng)做出了探索，但這些算法均是基于Apriori算法，所以很難應(yīng)用于基于Fp-tree的增量數(shù)據(jù)挖掘。

本文引入了一個高效的增量數(shù)據(jù)挖掘算法，Cantree，通過實驗對比已有的基于Fp-tree的增量數(shù)據(jù)挖掘算法FELINE和AFPIM，評價出各個算法的優(yōu)劣以及它們的適用范圍。

Fp-tree的改進(jìn)算法

FELINE：該算法在存儲上對Fp-tree進(jìn)行了壓縮，它的構(gòu)造過程較為費時，適用于interactive mining，即“build once,mine many”.對于min_support_count經(jīng)常變換的情況較為適合。

AFPIM：該算法適用于增量數(shù)據(jù)挖掘，因為數(shù)據(jù)庫修改后，每個itemsets的support_count會改變，通過計算改變后數(shù)據(jù)庫中1-itemset的support_count，并做一次重新排序。對排序后的結(jié)果通過冒泡排序的方法對原來的Fp-tree做一次更新維護(hù)。他的缺點是對于新的滿足min_support_count的itemset沒有更新進(jìn)來，所以當(dāng)加入足夠多的transaction后，需要重新構(gòu)建新的Fp-tree。優(yōu)點是對經(jīng)常小范圍更新數(shù)據(jù)庫的情況，有一定的優(yōu)勢。

Cantree算法簡介

Fp-tree在構(gòu)造的過程中會首先遍歷數(shù)據(jù)庫，得到1-itemset的support_count，并提取其中的頻繁項，對篩選出的結(jié)果參照support_count的大小降序排序，并依照這個順序遍歷數(shù)據(jù)庫中的每個transactions，構(gòu)造fp-tree。

Cantree的構(gòu)造：
對Fp-tree的構(gòu)造做了精簡，省去了Fp-tree開始對1-itemset的support_count的統(tǒng)計，所以它僅僅需要掃描一次數(shù)據(jù)庫。在構(gòu)造樹的過程中對于每個transaction中的itemsets按照一個固定順序排序（比如升序排序），然后按照Fp-tree的構(gòu)造方法遍歷數(shù)據(jù)庫。形成的Cantree要比Fp-tree大一些，因為它增加了一些非頻繁項。正因為如此，當(dāng)有新的db‘加入時，它可以直接對transaction進(jìn)行掃描加入Cantree當(dāng)中。

Cantree的查找：
CanTree在查找過程類似于Fp-tree，不同點在于因為Fp-tree中的節(jié)點已經(jīng)按照support_count排序，它的查找過程是自下而上的，而CanTree需要對上下路徑分別進(jìn)行查找，并排除其中小于min_support_count的項。

詳細(xì)的算法介紹和測評結(jié)果見論文：CanTree a tree structure for efficient incremental mining of frequent patterns

總結(jié)

以上是生活随笔為你收集整理的增量数据挖掘论文推荐的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。