weka实战005:基于HashSet实现的apriori关联规则算法

2024-06-11 09:58

本文主要是介绍weka实战005:基于HashSet实现的apriori关联规则算法,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

这个一个apriori算法的演示版本,所有的代码都在一个类。仅供研究算法参考


package test;import java.util.Collections;
import java.util.HashMap;
import java.util.HashSet;
import java.util.Iterator;
import java.util.Vector;//用set写的apriori算法
public class AprioriSetBasedDemo {class Transaction {/** 购物记录,用set保存多个货物名*/private HashSet<String> pnSet = new HashSet<String>();public Transaction() {pnSet.clear();}public Transaction(String[] names) {pnSet.clear();for (String s : names) {pnSet.add(s);}}public HashSet<String> getPnSet() {return pnSet;}public void addPname(String s) {pnSet.add(s);}public boolean containSubSet(HashSet<String> subSet) {return pnSet.containsAll(subSet);}@Overridepublic String toString() {StringBuilder sb = new StringBuilder();Iterator<String> iter = pnSet.iterator();while (iter.hasNext()) {sb.append(iter.next() + ",");}return "Transaction = [" + sb.toString() + "]";}}class TransactionDB {// 记录所有的Transactionprivate Vector<Transaction> vt = new Vector<Transaction>();public TransactionDB() {vt.clear();}public int getSize() {return vt.size();}public void addTransaction(Transaction t) {vt.addElement(t);}public Transaction getTransaction(int idx) {return vt.elementAt(idx);}}public class AssoRule implements Comparable<AssoRule> {private String ruleContent;private double confidence;public void setRuleContent(String ruleContent) {this.ruleContent = ruleContent;}public void setConfidence(double confidence) {this.confidence = confidence;}public AssoRule(String ruleContent, double confidence) {this.ruleContent = ruleContent;this.confidence = confidence;}@Overridepublic int compareTo(AssoRule o) {if (o.confidence > this.confidence) {return 1;} else if (o.confidence == this.confidence) {return 0;} else {return -1;}}@Overridepublic String toString() {return ruleContent + ", confidence=" + confidence * 100 + "%";}}public static String getStringFromSet(HashSet<String> set) {StringBuilder sb = new StringBuilder();Iterator<String> iter = set.iterator();while (iter.hasNext()) {sb.append(iter.next() + ", ");}if (sb.length() > 2) {sb.delete(sb.length() - 2, sb.length() - 1);}return sb.toString();}// 计算具有最小支持度的一项频繁集 >= minSupportpublic static HashMap<String, Integer> buildMinSupportFrequenceSet(TransactionDB tdb, int minSupport) {HashMap<String, Integer> minSupportMap = new HashMap<String, Integer>();for (int i = 0; i < tdb.getSize(); i++) {Transaction t = tdb.getTransaction(i);Iterator<String> it = t.getPnSet().iterator();while (it.hasNext()) {String key = it.next();if (minSupportMap.containsKey(key)) {minSupportMap.put(key, minSupportMap.get(key) + 1);} else {minSupportMap.put(key, new Integer(1));}}}Iterator<String> iter = minSupportMap.keySet().iterator();Vector<String> toBeRemoved = new Vector<String>();while (iter.hasNext()) {String key = iter.next();if (minSupportMap.get(key) < minSupport) {toBeRemoved.add(key);}}for (int i = 0; i < toBeRemoved.size(); i++) {minSupportMap.remove(toBeRemoved.get(i));}return minSupportMap;}public void buildRules(TransactionDB tdb,HashMap<HashSet<String>, Integer> kItemFS, Vector<AssoRule> var,double ruleMinSupportPer) {// 如果kItemFS的成员数量不超过1不需要计算if (kItemFS.size() <= 1) {return;}// k+1项频项集HashMap<HashSet<String>, Integer> kNextItemFS = new HashMap<HashSet<String>, Integer>();// 获得第k项频项集@SuppressWarnings("unchecked")HashSet<String>[] kItemSets = new HashSet[kItemFS.size()];kItemFS.keySet().toArray(kItemSets);/** 根据k项频项集,用两重循环获得k+1项频项集 然后计算有多少个tranction包含这个k+1项频项集* 然后支持比超过ruleMinSupportPer,就可以生成规则,放入规则向量* 然后,将k+1项频项集及其支持度放入kNextItemFS,进入下一轮计算*/for (int i = 0; i < kItemSets.length - 1; i++) {HashSet<String> set_i = kItemSets[i];for (int j = i + 1; j < kItemSets.length; j++) {HashSet<String> set_j = kItemSets[j];// k+1 item setHashSet<String> kNextSet = new HashSet<String>();kNextSet.addAll(set_i);kNextSet.addAll(set_j);if (kNextSet.size() <= set_i.size()|| kNextSet.size() <= set_j.size()) {continue;}// 计算k+1 item set在所有transaction出现了几次int count = 0;for (int k = 0; k < tdb.getSize(); k++) {if (tdb.getTransaction(k).containSubSet(kNextSet)) {count++;}}if (count <= 0) {continue;}Integer n_i = kItemFS.get(set_i);double per = 1.0 * count / n_i.intValue();if (per >= ruleMinSupportPer) {kNextItemFS.put(kNextSet, new Integer(count));HashSet<String> tmp = new HashSet<String>();tmp.addAll(kNextSet);tmp.removeAll(set_i);String s1 = "{" + getStringFromSet(set_i) + "}" + "(" + n_i+ ")" + "==>" + getStringFromSet(tmp).toString()+ "(" + count + ")";var.addElement(new AssoRule(s1, per));}}}// 进入下一轮计算buildRules(tdb, kNextItemFS, var, ruleMinSupportPer);}public void test() {// Transaction数据集TransactionDB tdb = new TransactionDB();// 添加Transaction交易记录tdb.addTransaction(new Transaction(new String[] { "a", "b", "c", "d" }));tdb.addTransaction(new Transaction(new String[] { "a", "b" }));tdb.addTransaction(new Transaction(new String[] { "b", "c" }));tdb.addTransaction(new Transaction(new String[] { "b", "c", "d", "e" }));// 规则最小支持度double minRuleConfidence = 0.5;Vector<AssoRule> vr = computeAssociationRules(tdb, minRuleConfidence);// 输出规则int i = 0;for (AssoRule ar : vr) {System.out.println("rule[" + (i++) + "]: " + ar);}}public Vector<AssoRule> computeAssociationRules(TransactionDB tdb,double ruleMinSupportPer) {// 输出关联规则Vector<AssoRule> var = new Vector<AssoRule>();// 计算最小支持度频项HashMap<String, Integer> minSupportMap = buildMinSupportFrequenceSet(tdb, 2);// 计算一项频项集HashMap<HashSet<String>, Integer> oneItemFS = new HashMap<HashSet<String>, Integer>();for (String key : minSupportMap.keySet()) {HashSet<String> oneItemSet = new HashSet<String>();oneItemSet.add(key);oneItemFS.put(oneItemSet, minSupportMap.get(key));}// 根据一项频项集合,递归计算规则buildRules(tdb, oneItemFS, var, ruleMinSupportPer);// 将规则按照可信度排序Collections.sort(var);return var;}public static void main(String[] args) {AprioriSetBasedDemo asbd = new AprioriSetBasedDemo();asbd.test();}}

运行结果如下:


rule[0]: {d }(2)==>b (2), confidence=100.0%
rule[1]: {d }(2)==>c (2), confidence=100.0%
rule[2]: {d, a }(1)==>c (1), confidence=100.0%
rule[3]: {d, a }(1)==>b (1), confidence=100.0%
rule[4]: {d, a }(1)==>b (1), confidence=100.0%
rule[5]: {d, c }(2)==>b (2), confidence=100.0%
rule[6]: {d, b, a }(1)==>c (1), confidence=100.0%
rule[7]: {d, b, a }(1)==>c (1), confidence=100.0%
rule[8]: {d, c, a }(1)==>b (1), confidence=100.0%
rule[9]: {b }(4)==>c (3), confidence=75.0%
rule[10]: {b, c }(3)==>d (2), confidence=66.66666666666666%
rule[11]: {b, c }(3)==>d (2), confidence=66.66666666666666%
rule[12]: {d }(2)==>a (1), confidence=50.0%
rule[13]: {b }(4)==>a (2), confidence=50.0%
rule[14]: {d, c }(2)==>b, a (1), confidence=50.0%
rule[15]: {d, b }(2)==>a (1), confidence=50.0%

这篇关于weka实战005:基于HashSet实现的apriori关联规则算法的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1050850

相关文章

python使用watchdog实现文件资源监控

《python使用watchdog实现文件资源监控》watchdog支持跨平台文件资源监控,可以检测指定文件夹下文件及文件夹变动,下面我们来看看Python如何使用watchdog实现文件资源监控吧... python文件监控库watchdogs简介随着Python在各种应用领域中的广泛使用,其生态环境也

el-select下拉选择缓存的实现

《el-select下拉选择缓存的实现》本文主要介绍了在使用el-select实现下拉选择缓存时遇到的问题及解决方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录项目场景:问题描述解决方案:项目场景:从左侧列表中选取字段填入右侧下拉多选框,用户可以对右侧

Golang使用minio替代文件系统的实战教程

《Golang使用minio替代文件系统的实战教程》本文讨论项目开发中直接文件系统的限制或不足,接着介绍Minio对象存储的优势,同时给出Golang的实际示例代码,包括初始化客户端、读取minio对... 目录文件系统 vs Minio文件系统不足:对象存储:miniogolang连接Minio配置Min

Python pyinstaller实现图形化打包工具

《Pythonpyinstaller实现图形化打包工具》:本文主要介绍一个使用PythonPYQT5制作的关于pyinstaller打包工具,代替传统的cmd黑窗口模式打包页面,实现更快捷方便的... 目录1.简介2.运行效果3.相关源码1.简介一个使用python PYQT5制作的关于pyinstall

使用Python实现大文件切片上传及断点续传的方法

《使用Python实现大文件切片上传及断点续传的方法》本文介绍了使用Python实现大文件切片上传及断点续传的方法,包括功能模块划分(获取上传文件接口状态、临时文件夹状态信息、切片上传、切片合并)、整... 目录概要整体架构流程技术细节获取上传文件状态接口获取临时文件夹状态信息接口切片上传功能文件合并功能小

python实现自动登录12306自动抢票功能

《python实现自动登录12306自动抢票功能》随着互联网技术的发展,越来越多的人选择通过网络平台购票,特别是在中国,12306作为官方火车票预订平台,承担了巨大的访问量,对于热门线路或者节假日出行... 目录一、遇到的问题?二、改进三、进阶–展望总结一、遇到的问题?1.url-正确的表头:就是首先ur

C#实现文件读写到SQLite数据库

《C#实现文件读写到SQLite数据库》这篇文章主要为大家详细介绍了使用C#将文件读写到SQLite数据库的几种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以参考一下... 目录1. 使用 BLOB 存储文件2. 存储文件路径3. 分块存储文件《文件读写到SQLite数据库China编程的方法》博客中,介绍了文

Redis主从复制实现原理分析

《Redis主从复制实现原理分析》Redis主从复制通过Sync和CommandPropagate阶段实现数据同步,2.8版本后引入Psync指令,根据复制偏移量进行全量或部分同步,优化了数据传输效率... 目录Redis主DodMIK从复制实现原理实现原理Psync: 2.8版本后总结Redis主从复制实

JAVA利用顺序表实现“杨辉三角”的思路及代码示例

《JAVA利用顺序表实现“杨辉三角”的思路及代码示例》杨辉三角形是中国古代数学的杰出研究成果之一,是我国北宋数学家贾宪于1050年首先发现并使用的,:本文主要介绍JAVA利用顺序表实现杨辉三角的思... 目录一:“杨辉三角”题目链接二:题解代码:三:题解思路:总结一:“杨辉三角”题目链接题目链接:点击这里

Node.js 中 http 模块的深度剖析与实战应用小结

《Node.js中http模块的深度剖析与实战应用小结》本文详细介绍了Node.js中的http模块,从创建HTTP服务器、处理请求与响应,到获取请求参数,每个环节都通过代码示例进行解析,旨在帮... 目录Node.js 中 http 模块的深度剖析与实战应用一、引言二、创建 HTTP 服务器:基石搭建(一