机器学习 之 DBSCAN算法 及实现

2024-08-29 01:52

本文主要是介绍机器学习 之 DBSCAN算法 及实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1.K-means 与 DBSCAN 的比较

K-means 和 DBSCAN 都是聚类算法,但它们之间有显著的区别:

  • K-means

    • 基于中心点的方法,要求用户提前指定簇的数量。
    • 适用于球形簇,且簇大小相近。
    • 无法处理噪声数据和任意形状的簇。
  • DBSCAN

    • 基于密度的方法,无需提前指定簇的数量。
    • 可以发现任意形状的簇,并能识别噪声点。
    • 适合处理含有噪声的数据集和不规则形状的簇。

以下图中的数据为例,相比K-means,DBSCAN更适合作为数据的聚类算法。

2.DBSCAN 算法原理

DBSCAN (Density-Based Spatial Clustering of Applications with Noise) 是一种基于密度的聚类算法,其核心概念是通过密度来定义簇。DBSCAN 定义了一个点为核心点(Core Point),如果这个点周围半径 eps 内至少有 min_samples 个邻近点。如果一个点周围没有足够的邻近点,则被视为边界点(Border Point)。此外,任何不属于核心点或边界点的点都被视为噪声点。

3.实验代码详解

实验数据

data.txt 文件包含了多种啤酒的相关信息,具体来说,每一行代表了一种啤酒,并记录了四个属性:

  1. 名称 (name): 啤酒的品牌名称。
  2. 卡路里 (calories): 每份啤酒的卡路里含量。
  3. 钠含量 (sodium): 每份啤酒的钠含量。
  4. 酒精度 (alcohol): 啤酒的酒精百分比。
  5. 成本 (cost): 啤酒的成本或价格。

导入库和数据

import pandas as pd
from sklearn.cluster import DBSCAN
from sklearn import metrics# 读取文件
beer = pd.read_table("data.txt", sep=' ', encoding='utf8', engine='python')# 传入变量(列名)
X = beer[["calories", "sodium", "alcohol", "cost"]]

DBSCAN 聚类分析

db = DBSCAN(eps=20, min_samples=2).fit(X)
labels = db.labels_
解释:
  • 我们使用 DBSCAN 类进行聚类分析。
  • eps 参数定义了邻域的半径,即每个核心点周围必须有足够多的点才能成为核心点。
  • min_samples 参数定义了核心点周围必须有的最少邻近点数。
  • labels 是 DBSCAN 分配给每个样本的簇标签。标记 -1 表示该点被认为是噪声点。

添加结果至原始数据框

beer['cluster_db'] = labels
beer.sort_values('cluster_db')
解释:
  • 将 DBSCAN 的聚类结果添加到原始数据框 beer 中的新列 cluster_db
  • 使用 sort_values 方法按簇标签排序,这一步虽然不会改变数据框的内容(因为默认情况下它返回排序后的副本),但可以方便查看输出。

对聚类结果进行评分

score = metrics.silhouette_score(X, beer.cluster_db)
print(score)
解释:
  • 使用 metrics.silhouette_score 计算轮廓系数得分,该得分越高表示簇内的数据点越相似,簇间差异越大。
  • 输出得分以评估聚类的效果。

4.总结

通过上述步骤,我们完成了 DBSCAN 聚类分析的过程。与 K-means 相比,DBSCAN 具有以下优势:

  • 灵活性:DBSCAN 不需要预先知道簇的数量。
  • 噪声处理:DBSCAN 能够有效地识别和排除噪声点。
  • 任意形状簇:DBSCAN 能够发现任意形状的簇。

在本实验中,我们不仅实现了 DBSCAN 算法,还通过轮廓系数得分来评估聚类结果的质量。DBSCAN 的这些特性使其在处理复杂数据集时特别有用,尤其是在需要识别噪声和发现不规则簇形状的情况下。

这篇关于机器学习 之 DBSCAN算法 及实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1116503

相关文章

HarmonyOS学习(七)——UI(五)常用布局总结

自适应布局 1.1、线性布局(LinearLayout) 通过线性容器Row和Column实现线性布局。Column容器内的子组件按照垂直方向排列,Row组件中的子组件按照水平方向排列。 属性说明space通过space参数设置主轴上子组件的间距,达到各子组件在排列上的等间距效果alignItems设置子组件在交叉轴上的对齐方式,且在各类尺寸屏幕上表现一致,其中交叉轴为垂直时,取值为Vert

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

不懂推荐算法也能设计推荐系统

本文以商业化应用推荐为例,告诉我们不懂推荐算法的产品,也能从产品侧出发, 设计出一款不错的推荐系统。 相信很多新手产品,看到算法二字,多是懵圈的。 什么排序算法、最短路径等都是相对传统的算法(注:传统是指科班出身的产品都会接触过)。但对于推荐算法,多数产品对着网上搜到的资源,都会无从下手。特别当某些推荐算法 和 “AI”扯上关系后,更是加大了理解的难度。 但,不了解推荐算法,就无法做推荐系

【前端学习】AntV G6-08 深入图形与图形分组、自定义节点、节点动画(下)

【课程链接】 AntV G6:深入图形与图形分组、自定义节点、节点动画(下)_哔哩哔哩_bilibili 本章十吾老师讲解了一个复杂的自定义节点中,应该怎样去计算和绘制图形,如何给一个图形制作不间断的动画,以及在鼠标事件之后产生动画。(有点难,需要好好理解) <!DOCTYPE html><html><head><meta charset="UTF-8"><title>06

学习hash总结

2014/1/29/   最近刚开始学hash,名字很陌生,但是hash的思想却很熟悉,以前早就做过此类的题,但是不知道这就是hash思想而已,说白了hash就是一个映射,往往灵活利用数组的下标来实现算法,hash的作用:1、判重;2、统计次数;

hdu1043(八数码问题,广搜 + hash(实现状态压缩) )

利用康拓展开将一个排列映射成一个自然数,然后就变成了普通的广搜题。 #include<iostream>#include<algorithm>#include<string>#include<stack>#include<queue>#include<map>#include<stdio.h>#include<stdlib.h>#include<ctype.h>#inclu

康拓展开(hash算法中会用到)

康拓展开是一个全排列到一个自然数的双射(也就是某个全排列与某个自然数一一对应) 公式: X=a[n]*(n-1)!+a[n-1]*(n-2)!+...+a[i]*(i-1)!+...+a[1]*0! 其中,a[i]为整数,并且0<=a[i]<i,1<=i<=n。(a[i]在不同应用中的含义不同); 典型应用: 计算当前排列在所有由小到大全排列中的顺序,也就是说求当前排列是第

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个

综合安防管理平台LntonAIServer视频监控汇聚抖动检测算法优势

LntonAIServer视频质量诊断功能中的抖动检测是一个专门针对视频稳定性进行分析的功能。抖动通常是指视频帧之间的不必要运动,这种运动可能是由于摄像机的移动、传输中的错误或编解码问题导致的。抖动检测对于确保视频内容的平滑性和观看体验至关重要。 优势 1. 提高图像质量 - 清晰度提升:减少抖动,提高图像的清晰度和细节表现力,使得监控画面更加真实可信。 - 细节增强:在低光条件下,抖

【数据结构】——原来排序算法搞懂这些就行,轻松拿捏

前言:快速排序的实现最重要的是找基准值,下面让我们来了解如何实现找基准值 基准值的注释:在快排的过程中,每一次我们要取一个元素作为枢纽值,以这个数字来将序列划分为两部分。 在此我们采用三数取中法,也就是取左端、中间、右端三个数,然后进行排序,将中间数作为枢纽值。 快速排序实现主框架: //快速排序 void QuickSort(int* arr, int left, int rig