![大话数据科学:大数据与机器学习实战(基于R语言)](https://wfqqreader-1252317822.image.myqcloud.com/cover/435/34752435/b_34752435.jpg)
3.6 R语言实战
3.6.1 泰坦尼克号
统计学的分类数据分析是,检验两个因子是否独立,或相关性是否显著。以泰坦尼克号为例,在统计学中是检验乘客身份(因子)和存亡(因子)是否无关或显著相关。在关联规则分析中是挖掘“头等舱”和“存活”是否有关联,参见《大话统计学》例题14.4。
如果将“存活”变量当作因变量(目标变量),问题就是监督式学习的分类模型。
关于泰坦尼克号的数据如表3-3、图3-14、图3-15所示。这个数据和《大话统计学》第14章的数据略有不同,因为参考数据来源不同。
表3-3 泰坦尼克号的数据
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-T98_60153.jpg?sign=1739337925-mnwKMJ2tA8KvTNr2WJfW0PPbyRlCYOYZ-0-7537a9ee5d368898cec1c7892e0cd789)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P98_60154.jpg?sign=1739337925-2z9HfY9FUGZhxA3qBdH2I299uYRI4CXe-0-18b382b95ee7da474dce896aa9fcb29d)
图3-14 R语言mosaicplot图
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P99_60155.jpg?sign=1739337925-Ah8JDZyqFlxOpl1iTj6SyIMmQ6lT4zyt-0-2f76ebb88c5e2032015aa5f5e90e3931)
注:[1],…,[6]是图3-16的规则
图3-15 泰坦尼克号的存活率
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P99_20380.jpg?sign=1739337925-fmOJ7OpWpRudh0E5ZjWHbICKTqAG9UOt-0-1b9f3fe5a49363dae4dfceedadc43e11)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P99_20381.jpg?sign=1739337925-12LwuO7p12fRCi3s6lQFn7DWRrhwxzkS-0-fb27af71f2fa2d3da6dd3195ab4b784e)
图3-16 关联规则的网络图
【R例3.3】泰坦尼克号:数据Titanic、Titan,函数{包}:apriori、itemFrequency、eclat {arules}
图3-3关联分析数据有5种格式,R例3.1和R例3.2是(a)0-1二元关联矩阵。
泰坦尼克号数据档案是(d)事务频数表Titanic,转成(c)因子项目数据框Titan。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P100_60156.jpg?sign=1739337925-vzKS4dWPm3ang7Mlan4dh8kveAlngMKM-0-2c5a006102f15edaff13040f60426ff3)
关联规则如图3-18所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P101_20450.jpg?sign=1739337925-8M3pOL0dIMaCoc3WRcDL3PTjYtD9LG8x-0-b95b6ee52c9e599d4b659f3d0addee3b)
图3-17 平行坐标图
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P101_20453.jpg?sign=1739337925-tjjgASUaxm3GOUVx0FO0oAi0wlgFld95-0-373694e85d6a1d32aa174523bdfa9b64)
图3-18 27个关联规则
3.6.2 商店数据
商店数据文件是图3-3(e)事务表格式格式
【R例3.4】商店数据:shop.csv,函数apriori、itemFrequency
数据框格式data.frame:110893行,2列,如图3-19所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P102_20493.jpg?sign=1739337925-9QLuGluFAbBgmLzsSevTM8fBQtvcWrYD-0-43b01e693e38fdf3954104d753402d4a)
图3-19 事务表格式
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P102_20496.jpg?sign=1739337925-L3XhiPbYpCO0cGZgZoI0ux3qfXcWxYEd-0-f84685cf9b9964092487772ce002713d)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P103_20525.jpg?sign=1739337925-TSHyf5sCTW06gC1W03jnyylYmAXbDZeK-0-3ab365646e6e264a1b24512a13f45cf8)
图3-20 项目频数
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P103_60158.jpg?sign=1739337925-pG5K3O3ZnxiZZind983BN8dJtsGoCfIo-0-64153d09f4ac252b3b30dc43fbafd701)
交叉销售关联规则如图3-21所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P104_20563.jpg?sign=1739337925-ToOl4imj6U5JQHuOdqYCkvFmDc3RpWcr-0-b189f07fb133d2c87ed8fbedae8a2812)
图3-21 交叉销售关联规则
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P104_60161.jpg?sign=1739337925-cycBdFWtf8d8XD9hJfksHBopuAvbmuUk-0-59fb7923615aca73014023502bd66e10)
负关联规则如图3-22所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P105_20598.jpg?sign=1739337925-kaY1bv0GnmrtE3e3ec8HTFA3a2pslpXW-0-5161475e9e6b313eb3087b084bf7a19b)
图3-22 负关联规则
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P105_60163.jpg?sign=1739337925-0PrQImI95c9hQDSL546nkE5YZqC0L9Gh-0-1d9af4b3656f007e291d6af19c746535)
关联规则如图3-23所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P105_20601.jpg?sign=1739337925-MTwR5ipFQ7df09oWocykh37LR4KGsIMq-0-090a14e1534a75a8f0dba5cdae5c300c)
图3-23 关联规则
3.6.3 食品杂货数据
【R例3.5】食品杂货:数据Groceries,函数apriori
Groceries数据arules的transactions格式:9835行(记录)。
数据是图3-3(b)事务数据库的格式。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P105_20608.jpg?sign=1739337925-2or9pj1R9dEM9AXKYnEsYMlIOqkWc57h-0-65c58f31c05bfc7857e1b54d29b6f18b)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P106_20643.jpg?sign=1739337925-zC25gD5DZNGnvYclzzspStNxSWLchGwv-0-fa2b995546104464198406ebc944aefb)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P107_20673.jpg?sign=1739337925-IWezNpbWThN5gQjTHHw4R7TKw7nxxoax-0-2e696e7af5e13ab6b3543c24e7d8f83e)
3.6.4 人口收入数据
在R语言包arules的内建数据集有Adult和AdultUCI两个有关个人收入的数据集,共有48842个记录。AdultUCI数据有15个变量,虽然是数据框的格式,但是不能将AdultUCI数据输入apriori函数计算关联规则,因为变量有数值型变量。
AdultUCI的15个变量:
(1)年龄Age数值整数变量。
(2)工作等级Workclass因子有8个水平。
(3)教育Education有序因子有16个水平。
(4)教育年数education-num数值向量。
(5)婚姻marital-status因子有7个水平。
(6)职业Occupation因子有14个水平。
(7)家庭关系Relationship因子有6个水平。
(8)种族Race因子有5个水平。
(9)性别Sex因子有2个水平。
(10)资本获利capital-gain数值向量。
(11)资本损失capital-loss数值向量。
(12)Fnlwgt数值向量。
(13)每周工时hours-per-week数值整数变量。
(14)出生国家native-country因子有41个水平。
(15)收入Income有序因子有2个水平(小small < large大)。
将AdultUCI数据的第4和第12个变量删除。
将(1)年龄Age改为有序因子有4个水平。
将(10)资本获利capital-gain改为有序因子有3个水平。
将(11)资本损失capital-loss改为有序因子有3个水平。
将(13)每周工时hours-per-week改为有序因子有4个水平。
上述的因子全部加起来 13个变量共有115个因子。
数据Adult是图3-3(b)事务数据库的格式transactions。
数据 AdultUCI是图3-3(c)数据框的格式data.frame 48842 obs. 13 variables。
【R例3.6】人口收入:数据Adult.CSV,函数apriori
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P108_20713.jpg?sign=1739337925-4FsZe6DnZxND9pDotJnn6Qqfs4UU34nr-0-d85f581da28bedb6e73ad4d111371edb)
3.6.5 鸢尾花数据
鸢尾花数据(Iris data set)包含了150个样本,分别是山鸢尾、变色鸢尾和维吉尼亚鸢尾。用4个特征变量测量花朵:萼片长度、萼片宽度、花瓣长度、花瓣宽度。
(1)萼片长度(Sepal Length):计算单位是厘米。
(2)萼片宽度(Sepal Width):计算单位是厘米。
(3)花瓣长度(Petal Length):计算单位是厘米。
(4)花瓣宽度(Petal Width):计算单位是厘米。
(5)类别(Class):可分为Setosa、Versicolor和Virginica三个品种。
【R例3.7】连续变量关联分析:鸢尾花数据iris,函数apriori
数据框格式data.frame:150个观察值 5个变量
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P109_60164.jpg?sign=1739337925-DnumymF2c8pNefwN25Dbznda87czthk9-0-33b7a2a2f431e80fda89dc1cb8807f1c)
鸢尾花数据特征变量分布图如图3-24所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P109_20750.jpg?sign=1739337925-yhW4xCaA57zFEshl9Am65kNGd1uhADvY-0-3d15e8177c98a631ae5e324dbd3b4f06)
图3-24 鸢尾花数据特征变量分布图(下图是去除填充颜色)
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P110_60165.jpg?sign=1739337925-leY0w80c8pDi20zGfIBHObQx1bHQgG7h-0-99bdcde713377b3fa1162378009748e3)
鸢尾花数据特征变量分布如图3-25所示。
![](https://epubservercos.yuewen.com/8CA86F/18562448501472406/epubprivate/OEBPS/Images/Figure-P110_20795.jpg?sign=1739337925-xv06NRBPrSzQeUS2ZJzbmUql5tV13GH3-0-bc7ed2eda8782647b7fdae704c551235)
图3-25 鸢尾花数据特征变量分布图