SAS 聚类分析—— K-均值聚类

2024-04-30 05:32
文章标签 聚类 均值 聚类分析 sas

本文主要是介绍SAS 聚类分析—— K-均值聚类,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

K-均值方法,有时也叫劳埃德方法或 Lioyd-Forgy 方法。
K-均值聚类的核心思想是 为指定划分数目的最佳划分。
对于 n 个观测,每个观测是 m 维的实数向量,现在需要找到 k 个聚类 (其中 k <= n,即 n 个子集),使得每个类别分组内的方差最小化。

  • K-均值聚类的基本步骤如下:

1.随机选取 k 个真实/或虚拟的数据点作为初始质心(即 选择 k 个样品作为初始凝聚点,或者将所有样品分成 k 个初始类,然后将这 k 个类的重心(均值)作为初始凝聚点)。初始质心的选择对聚类结果具有重要影响,因此如何科学选择这些初始质心很重要,一般选择彼此尽可能远的若干样本。

2.分配类别阶段:对所有的样品逐个归类,将每个样品归入凝聚点离这个样品最近的那个类(通常采用欧氏距离)。例如:计算第一个样品分别到第 k 个类(均值)的欧式距离,将第一个样品归到欧氏距离小的那一个类,如果第一个样品在归类之前就已经在这个类当中,就不需要重新分配(移动)。

3.更新质心阶段:通过第2步的归类步骤,有一个新的样品归入了那个类,所以要重新计算这 k 个类别的均值,这 k 类的凝聚点更新为这一类目前的均值,直至所有样品都归了类。例如:计算第二个样品到新的 k 个类的均值的距离,将第二个样品归类到距离小的那个类中去。

4.重复步骤2和步骤3,直至所有的样品都不能再分配为止。

下面看一个具体例子:(例子来源于王学民编著的《应用多元统计分析》第五版)
下表列出各个国家和地区男子径赛记录的数据,使用 k 均值法进行聚类分析,聚类前先对各变量作标准化变换。(限于篇幅,我就只截取了部分数据供大家参考)
数据来源:1984年洛杉矶奥运会IAAF田径统计手册
使用SAS代码进行 K-均值聚类 :

libname txy "D:\SASljk";
run;
proc standand data=txy.exec65 mean=0 std=1 out=stan;
proc fastclus data=stan maxc=5 drift list;var x1-x8;id nation;
run;

程序说明:
① “proc standard”是一个标准化过程,将SAS数据集中的指定变量按给定的均值和标准差进行标准化变换;
② 选项“mean=0 std=1”规定按均值为 0 、标准差为 1 进行标准化变换;
③ 选项“out = stan”要求生成一个包含标准化值的新数据集,并命名为 stan 。
注意:这里 stan 数据集名前面没有加逻辑库名,所以是默认保存在 work 临时逻辑库里面的。
④“proc fastclus”是一个动态聚类过程(或快速聚类过程)
⑤“maxc=5”’指定所允许的最大分类个数为 5
⑥选项“drift”表明使用 k 均值法
⑦选项“list”要求列出各观测所聚的类别

注:proc fastclus 的系统耗时与样本量 n 成正比,因此它是一种快速聚类方法,可用于处理较大规模的数据集。实践中一般将它用于较大规模数据的预先处理形成分区,然后使用 proc cluster 再次聚类。
但对于小数据量的数据,聚类结果可能因初始凝聚点的选择而对样本出现顺序敏感。而且由于 K-均值方法受数值较大的变量影响更大,通常需要对样本数据先做标准化处理。

SAS输出结果:

  • 初始凝聚点:(5个)
    在这里插入图片描述
  • 观测所归类及与最终凝聚点的距离
    在这里插入图片描述
  • 聚类汇总
    在这里插入图片描述
  • 各变量的类内均值及标准差
    在这里插入图片描述
    由输出结果知道,系统选择了 5 个点作为初始种子(质心),并最终形成了 5 个聚类。
    通过聚类列表,可以看出哪些国家和地区的男子径赛记录被划分成了一类。

这篇关于SAS 聚类分析—— K-均值聚类的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/948024

相关文章

【简单介绍下K-means聚类算法】

🌈个人主页: 程序员不想敲代码啊 🏆CSDN优质创作者,CSDN实力新星,CSDN博客专家 👍点赞⭐评论⭐收藏 🤝希望本文对您有所裨益,如有不足之处,欢迎在评论区提出指正,让我们共同学习、交流进步! 💓K-means聚类算法.🎈 💓K-means聚类是一种广泛用于数据挖掘和机器学习的划分方法,它的目标是将n个观测点划分到k个簇中,使得每个点都属于离它最近的均值(即簇中

「热图」ComplexHeatmap展示单细胞聚类

实用Seurat自带的热图函数DoHeatmap绘制的热图,感觉有点不上档次,于是我尝试使用ComplexHeatmap这个R包来对结果进行展示。 个人觉得好的热图有三个要素 聚类: 能够让别人一眼就看到模式 注释: 附加注释能提供更多信息 配色: 要符合直觉,比如说大部分都会认为红色是高表达,蓝色是低表达 在正式开始之前,我们需要先获取一下pbmc的数据,Seurat提供了R包Seura

混合型数据聚类(R)

利用聚类分析,我们可以很容易地看清数据集中样本的分布情况。以往介绍聚类分析的文章中通常只介绍如何处理连续型变量,这些文字并没有过多地介绍如何处理混合型数据(如同时包含连续型变量、名义型变量和顺序型变量的数据)。本文将利用 Gower 距离、PAM(partitioning around medoids)算法和轮廓系数来介绍如何对混合型数据做聚类分析。 ----------------------

马尔可夫聚类算法

马尔可夫聚类算法(Markov Clustering Algorithm,MCL)是一种用于图聚类的算法,广泛应用于生物信息学、社交网络分析、推荐系统等领域。 其核心思想是模拟随机游走过程,通过迭代地扩散和收缩图上的概率分布来识别图中的自然聚类或社区结构。 马尔可夫聚类算法的核心步骤 构建转移矩阵: 对于给定的图,生成转移矩阵(Markov Matrix),其中每个元素表示从一个节点转移

基于matlab的K-means聚类图像分割

1 原理 K-means聚类算法在图像分割中的应用是基于一种无监督的学习方法,它将图像中的像素点或特征区域划分为K个不同的簇或类别。以下是K-means聚类算法用于图像分割的原理,包括步骤和公式: 1.1 原理概述 选择簇的数量(K): 首先,用户需要指定要将图像数据分成多少个簇(即K的值)。初始化聚类中心: 随机选择K个像素点作为初始聚类中心。分配数据点到最近的聚类中心: 对于图像中的每个

sparkdataframe 对多列进行先filter后求均值

import org.apache.spark.sql.{Column, DataFrame, Dataset, Row, SparkSession} spark dataframe 对多列进行先filter后求均值 meanDf = df.select(df.columns.map(k=>mean(when(col(k)>0, col(k))).alias(k+“mean”)): _*) sp

【Rust日报】 2020-07-09 Rust 机器学习应用:K-means 聚类和可视化

Rust 机器学习应用:K-means 聚类和可视化 虽然机器学习的通用语言是 Python, 但是 Python 本身在计算密集型算法中实际上相当慢的。而 Rust 可能比 Python 快 25 倍。 对于基于 web 的机器学习应用程序来说,基于 Rust、WebAssembly 和 Node.js 的精简软件栈很有意义。Rust 允许我们编写高性能的机器学习函数。为了运行时安全性、跨平台

换手均值

#! coding:utf8import sysreload(sys)sys.setdefaultencoding('utf8')if __name__ == '__main__':print 'hello'print "中文"f = open("rdata")info=[]for line in f:info.append(line)print linef.close()index=1in

聚类算法分析总结

一、什么是聚类? 聚类(Clustering):聚类是一个人们日常生活的常见行为,即所谓“物以类聚,人以群分”,核心的思想也就是聚类。人们总是不断地改进下意识中的聚类模式来学习如何区分各个事物和人。同时,聚类分析已经广泛的应用在许多应用中,包括模式识别,数据分析,图像处理以及市场研究。通过聚类,人们能意识到密集和稀疏的区域,发现全局的分布模式,以及数据属性之间的有趣的相互关系。简单来说就是将给定

聚类算法:DBScan算法

对算法的用例是在Spark平台对学生上网记录处理的一个实例,参考地址见GitHub上的DBScan算法运用实例   一、问题提出  先考虑一个问题,对下左图中的数据集合怎么聚类?对右图的无规则的数据集合又该如何聚类?   二、概念介绍  邻域半径(radius):以当前对象为核心确定密度区域范围时引用的长度,二维平面中就指以当前对象为圆心确定圆时引用所用的半径。如下图中的Eps