京公网安备 11010802034615号
经营许可证编号:京B2-20210330
R语言聚类算法比较
在使用不同的聚类算法完成数据聚类操作后,我们可以对算法的性能进行评估,绝大多数情况下,我们即可以使用簇内距离也可以使用簇间距离作为评价标准。使用fpc算法包的cluster.stat函数来比较不同的聚类算法。
操作
导入fpc包,选择层次聚类算法,距离计算采用single方法(最短距离法),将得到簇存放在hc_single中:
library(fpc)
single_c = hclust(dist(customer),method = "single")
hc_single = cutree(single_c,k = 4)
选择层次聚类算法,距离计算采用complete方法(最长距离法),将得到的簇存放在hc_complete:
complete_c = hclust(dist(customer),method = "complete")
hc_complte = cutree(complete_c,k = 4)
选择k均值聚类算法,将得到的簇存放km对象中:
set.seed(22)
km = kmeans(customer,4)
获得km聚类算法聚类结果的基本统计信息:
cs = cluster.stats(dist(customer),km$cluster)
通常我们习惯使用within.cluster.ss和avg.silwidth这两个函数来验证聚类算法:
cs[c("within.cluster.ss","avg.silwidth")]
$within.cluster.ss
[1] 61.3489
$avg.silwidth
[1] 0.4640587
将得到的不同方法生成聚类结果的统计信息并以列表显示:
sapply(list(kmeans = km$cluster,hc_single = hc_single,hc_complte = hc_complte), function(c)cluster.stats(dist(customer),c)[c("within.cluster.ss","avg.silwidth")])
kmeans hc_single hc_complte
within.cluster.ss 61.3489 136.0092 65.94076
avg.silwidth 0.4640587 0.2481926 0.4255961
原理
聚类结果的验证通常采用两种技术:簇内距离和簇间距离。其中,簇间距离距离越大,聚类效果越好,而簇内距离越小,聚类效果越理想。使用fpc包中的cluster.stat函数来计算训练好的聚类对象的相关统计信息。
从输出结果可以得知,within.cluster.ss计算的是每个聚类内部的距离平方程,而avg.silwidth计算的是平均轮廓值。within.cluster.ss的计算结果体现了同一个簇之间对象的相关程度,该值越小,簇内对象的相关性越大。而avg.silwidth值则同时考虑了簇内对象的聚合度和簇内对象的聚合度簇间对象的分离度。数学上对于每个点x可以采用下列公式计算其轮廓系数:
轮廓系数(x) = [b(x) - a(x)]/max([b(x),a(x)])
其中,a(x)是点x到所有与它在同一簇中的其他点的平均距离,而b(x)则是点x到所有与它不在同一簇的点平均距离的最小值。通常轮廓系数取值范围为0~1,越接近于1说明聚类效果越好。
从最后产生的结果可以知道,在within.cluster.ss和avg.silwidth测量长度下基于最长距离的层次聚类算法的聚类效果要优于最短距离层次聚类算法和k均值算法。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在日常办公中,数据透视表是Excel、WPS等表格工具中最常用的数据分析利器——它能快速汇总繁杂数据、挖掘数据关联、生成直观报表 ...
2026-02-28有限元法(Finite Element Method, FEM)作为工程数值模拟的核心工具,已广泛应用于机械制造、航空航天、土木工程、生物医学等多 ...
2026-02-28在数字化时代,“以用户为中心”已成为企业运营的核心逻辑,而用户画像则是企业读懂用户、精准服务用户的关键载体。CDA(Certifi ...
2026-02-28在Python面向对象编程(OOP)中,类方法是构建模块化、可复用代码的核心载体,也是实现封装、继承、多态特性的关键工具。无论是 ...
2026-02-27在MySQL数据库优化中,索引是提升查询效率的核心手段—— 面对千万级、亿级数据量,合理创建索引能将查询时间从秒级压缩到毫秒级 ...
2026-02-27在数字化时代,企业积累的海量数据如同散落的珍珠,若缺乏有效的梳理与分类,终将难以发挥实际价值。CDA(Certified Data Analys ...
2026-02-27在问卷调研中,我们常遇到这样的场景:针对同一批调查对象,在不同时间点(如干预前、干预后、随访期)发放相同或相似的问卷,收 ...
2026-02-26在销售管理的实操场景中,“销售机会”是核心抓手—— 从潜在客户接触到最终成交,每一个环节都藏着业绩增长的关键,也暗藏着客 ...
2026-02-26在CDA数据分析师的日常工作中,数据提取、整理、加工是所有分析工作的起点,而“创建表”与“创建视图”,则是数据库操作中最基 ...
2026-02-26在机器学习分析、数据决策的全流程中,“数据质量决定分析价值”早已成为行业共识—— 正如我们此前在运用机器学习进行分析时强 ...
2026-02-25在数字化时代,数据已成为企业决策、行业升级的核心资产,但海量杂乱的原始数据本身不具备价值—— 只有通过科学的分析方法,挖 ...
2026-02-25在数字化时代,数据已成为企业核心资产,而“数据存储有序化、数据分析专业化、数据价值可落地”,则是企业实现数据驱动的三大核 ...
2026-02-25在数据分析、机器学习的实操场景中,聚类分析与主成分分析(PCA)是两种高频使用的统计与数据处理方法。二者常被用于数据预处理 ...
2026-02-24在聚类分析的实操场景中,K-Means算法因其简单高效、易落地的特点,成为处理无监督分类问题的首选工具——无论是用户画像分层、 ...
2026-02-24数字化浪潮下,数据已成为企业核心竞争力,“用数据说话、用数据决策”成为企业发展的核心逻辑。CDA(Certified Data Analyst) ...
2026-02-24CDA一级知识点汇总手册 第五章 业务数据的特征、处理与透视分析考点52:业务数据分析基础考点53:输入和资源需求考点54:业务数 ...
2026-02-23CDA一级知识点汇总手册 第四章 战略与业务数据分析考点43:战略数据分析基础考点44:表格结构数据的使用考点45:输入数据和资源 ...
2026-02-22CDA一级知识点汇总手册 第三章 商业数据分析框架考点27:商业数据分析体系的核心逻辑——BSC五视角框架考点28:战略视角考点29: ...
2026-02-20CDA一级知识点汇总手册 第二章 数据分析方法考点7:基础范式的核心逻辑(本体论与流程化)考点8:分类分析(本体论核心应用)考 ...
2026-02-18第一章:数据分析思维考点1:UVCA时代的特点考点2:数据分析背后的逻辑思维方法论考点3:流程化企业的数据分析需求考点4:企业数 ...
2026-02-16