位置: IT常识 - 正文

利用python实现Apriori关联规则算法

编辑:rootadmin
利用python实现Apriori关联规则算法 关联规则

推荐整理分享利用python实现Apriori关联规则算法,希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:,内容如对您有帮助,希望把文章链接给更多的朋友!

        大家可能听说过用于宣传数据挖掘的一个案例:啤酒和尿布;据说是沃尔玛超市在分析顾客的购买记录时,发现许多客户购买啤酒的同时也会购买婴儿尿布,于是超市调整了啤酒和尿布的货架摆放,让这两个品类摆放在一起;结果这两个品类的销量都有明显的增长;分析原因是很多刚生小孩的男士在购买的啤酒时,会顺手带一些婴幼儿用品。

不论这个案例是否是真实的,案例中分析顾客购买记录的方式就是关联规则分析法Association Rules。

关联规则分析也被称为购物篮分析,用于分析数据集各项之间的关联关系。

关联规则基本概念

项集:item的集合,如集合{牛奶、麦片、糖}是一个3项集,可以认为是购买记录里物品的集合。

频繁项集:顾名思义就是频繁出现的item项的集合。如何定义频繁呢?用比例来判定,关联规则中采用支持度和置信度两个概念来计算比例值

支持度:共同出现的项在整体项中的比例。以购买记录为例子,购买记录100条,如果商品A和B同时出现50条购买记录(即同时购买A和B的记录有50),那边A和B这个2项集的支持度为50%

置信度:购买A后再购买B的条件概率,根据贝叶斯公式,可如下表示:

 提升度:为了判断产生规则的实际价值,即使用规则后商品出现的次数是否高于商品单独出现的评率,提升度和衡量购买X对购买Y的概率的提升作用。如下公式可见,如果X和Y相互独立那么提升度为1,提升度越大,说明X->Y的关联性越强

关联规则Apriori算法

1. Apriori算法的基本思想 对数据集进行多次扫描,第一次扫描得到频繁1-项集的集合L1,第k次扫描首先利用第k-1次扫描的结果Lk-1产生候选k-项集Ck,在扫描过程中计算Ck的支持度,在扫描结束后计算频繁k-项集Lk,算法当候选k-项集的集合Ck为空的时候结束。 2. Apriori算法产生频繁项集的过程 (1)连接步 (2)剪枝步

3.Apriori算法的主要步骤 (1) 扫描全部数据,产生候选1-项集的集合C1 (2) 根据最小支持度,由候选1-项集的集合C1产生频繁1-项集的集合L1 (3) 对k>1,重复步骤(4)(5)(6) (4) 由Lk执行连接和剪枝操作,产生候选(k+1)-项集Ck+1 (5) 根据最小支持度,由候选(k+1)-项集的集合Ck+1产生频繁(k+1)-项集的集合Lk+1 (6) 若L不为空集,则k = k+1,跳往步骤(4),否则跳往步骤(7) (7) 根据最小置信度,由频繁项集产生强关联规则

Apriori算法是经典的关联规则算法。Apriori算法的目标是找到最大的K项频繁集。Apriori算法从寻找1项集开始,通过最小支持度阈值进行剪枝,依次寻找2项集,3项集直到没有更过项集为止。

代码实现 

本次算法实现我们借助了mlxtend第三方包,pip install mlxtend安装一下即可

编译工具:jupyter notebook

首先导入本次项目用到的第三方包:

import pandas as pdfrom mlxtend.frequent_patterns import apriorifrom mlxtend.frequent_patterns import association_rulesimport warningswarnings.filterwarnings('ignore')

接下来我将使用两个小案例给大家示范如何使用关联规则算法

案例一

准备数据

order = {'001': '面包,黄油,尿布,啤酒', '002': '咖啡,糖,小甜饼,鲑鱼,啤酒', '003': '面包,黄油,咖啡,尿布,啤酒,鸡蛋', '004': '面包,黄油,鲑鱼,鸡', '005': '鸡蛋,面包,黄油', '006': '鲑鱼,尿布,啤酒', '007': '面包,茶,糖鸡蛋', '008': '咖啡,糖,鸡,鸡蛋', '009': '面包,尿布,啤酒,盐', '010': '茶,鸡蛋,小甜饼,尿布,啤酒'}data_set = []id_set= []shopping_basket = {}for key in order: item = order[key].split(',') id_set.append(key) data_set.append(item)shopping_basket['ID'] = id_setshopping_basket['Basket'] = data_setshopping_basket利用python实现Apriori关联规则算法

将数据转换为DataFrame类型

data = pd.DataFrame(shopping_basket)data

 

接着我们需要将Basket的数据转换为one-hot(0,1)编码

这一步主要就是对数据的ID和Basket进行划分处理,最后进行合并

data_id = data.drop('Basket',1)data_basket = data['Basket'].str.join(',')data_basket = data_basket.str.get_dummies(',')new_data = data_id.join(data_basket)new_data

 调用apriori算法

apriori()中min_support也就是最小支持度默认为0.5,所以我们要修改的话直接修改这个值

frequent_itemsets = apriori(new_data.drop('ID',1),min_support=0.5,use_colnames=True)frequent_itemsets

 从结果中,我们发现在二项集中,出现了尿布和啤酒,说明尿布和啤酒的关联性很大。

接着我们查看其具体的关联规则

association_rules(frequent_itemsets,metric='lift')

我们看出尿布和啤酒的提升度值也很大(大于1) ,更一步说明了尿布和啤酒的关联性很强,所有在销售的时候,应该将其放在一起售卖,或者适当增加一下促销方式。

案例二

步骤跟案例一相似

准备数据

shopping_backet = {'ID':[1,2,3,4,5,6], 'Basket':[['Beer','Diaper','Pretzels','Chips','Aspirin'], ['Diaper','Beer','Chips','Lotion','Juice','BabyFood','Milk'], ['Soda','Chips','Milk'], ['Soup','Beer','Diaper','Milk','IceCream'], ['Soda','Coffee','Milk','Bread'], ['Beer','Chips'] ] }data = pd.DataFrame(shopping_backet)data

将数据转换为apriori算法要求的数据类型

data_id = data.drop('Basket',1)data_basket = data['Basket'].str.join(',')data_basket = data_basket.str.get_dummies(',')new_data = data_id.join(data_basket)new_data

调用apriori算法

frequent_itemsets = apriori(new_data.drop('ID',1),min_support=0.5,use_colnames=True)frequent_itemsets

 

 如果光考虑support支持度,那么[Beer, Chips]和[Diaper, Beer]都是很频繁的,那么哪一种组合更相关呢?

association_rules(frequent_itemsets,metric='lift')

 显然[Diaper, Beer]的lift值更大,说明这个组合更相关

本文链接地址:https://www.jiuchutong.com/zhishi/300169.html 转载请保留说明!

上一篇:JS中let用法(js let用法)

下一篇:23年 车辆检测+车距检测+行人检测+车辆识别+车距预测(附yolo v5最新版源码)(2021年车辆检测)

  • 工会经费税前扣除比例是多少
  • 增值税附加税怎么填
  • 减资需要的资料
  • 未能确认收入的原因
  • 合同取得成本如何结转
  • 分公司可以享受小规模纳税人优惠
  • 公司注销公司帐户剩的钱怎么办
  • 出售交易性金融资产的交易费用计入
  • 增值税加计递减额,这个科目如何使用
  • 个人非专利技术转让属于什么收入
  • 赠送车子需要过户吗
  • 会计发票怎么样粘贴,记账凭证也要粘上吗
  • 抵债资产处置账务实例
  • 工会专户收到职工福利经费会计处理怎么做?
  • 税前扣除的职工福利费标准
  • 领用包装物会计处理
  • 企业购买用于绿化的土地
  • 法院拍卖房法院有什么义务和责任
  • 代收房款
  • 公司在走注销流程被起诉了怎么办
  • 应交税费应交堤围费的税率多少?
  • 劳务费发票税率是多少
  • 代开票扣了个人所得税怎么做账?
  • 资产减值损失是什么类科目
  • 软件行业的收入怎么样
  • 商品和安装能开什么发票
  • 季度申报利润表怎么填
  • 推广的产品
  • 结转未交增值
  • 怎么计提企业所得税在哪里知道计提多少
  • 随机赠送是啥意思
  • 报销各种费用怎么做分录
  • 汽车维修行业会计分录
  • win7电脑软键盘怎么打开
  • 进项抵扣发票如何查询
  • 蝴蝶兰的养殖方法和注意事项 盆栽蝴蝶兰烂根
  • 房屋装修固定家具是否计入房产税
  • json格式字符串提取值
  • 公司向股东借的钱怎么还
  • webpack--》webpack底层深入讲解,从初识到精通,真正实现从0到1的过程
  • video.js能播放什么格式
  • mobilenet模型
  • php 方法
  • 机动车销售统一专票
  • js必学知识点
  • sql语句的查询语句
  • python uppercase函数
  • 营业外收入汇算清缴时也得计入收入
  • 企业购房如何入账
  • 红冲以前年度收入
  • 小规模纳税人开专票可以抵扣进项吗
  • 小规模纳税属于什么科目
  • 公司员工报销没有发票挂内账有风险吗
  • 通行费电子发票进项税额如何填报
  • 怎么冲减多计提的工会经费
  • 月末本年利润借方余额表示什么
  • 押金退还需要多久
  • 库存商品调价会计分录
  • 4s店出售试驾车的增值税是多少
  • 钱汇错了报警有用吗
  • 本年利润的会计科目
  • 购销业务活动包括哪些
  • 材料入库单金额写含税价吗
  • 金税系统怎么填写开票信息
  • 工业企业材料入库账务处理
  • navicat不能创建string类型
  • sql删除多条记录
  • kvm虚拟化网络配置
  • mac怎么分区硬盘分区
  • windows 10预览版
  • linux br0配置
  • WIN10怎么彻底删除works2
  • nodejs nodemon
  • javascript要怎么学
  • Python selenium 三种等待方式解读
  • 农业部利剑行动
  • 电子税务局新户报道怎么弄
  • 越南进口废塑料新政策
  • 滨州市望海花园北侧规划
  • 银行宣传岗位职责怎么写
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设