Shark源码分析(六):k-means算法

2024-04-27 00:48
文章标签 算法 分析 源码 means shark

本文主要是介绍Shark源码分析(六):k-means算法,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Shark源码分析(六):k-means算法

k-means算法是原型聚类算法中一个非常典型的算法。关于聚类算法,我之后应该会在博客中进行详细说明。

对于整个聚类算法来说,可以分为两类:硬聚类与软聚类。对于硬聚类,每一个数据点只能属于某一个簇。对于软聚类来说,则没有这一限制。

首先还是来看一下整个聚类算法基类。

ClusteringModel类

ClusteringModel类定义在<include/shark/Models/Clustering/ClusteringModel.h>文件中。

template <class InputT, class OutputT>
class ClusteringModel : public AbstractModel<InputT, OutputT>
{
public:typedef AbstractModel<InputT, OutputT> base_type;typedef AbstractClustering<InputT> ClusteringType;typedef typename base_type::BatchInputType BatchInputType;typedef typename base_type::BatchOutputType BatchOutputType;ClusteringModel(ClusteringType* clustering): mep_clustering(clustering){ SHARK_CHECK(clustering, "[ClusteringModel] Clustering must not be NULL"); }//稍后你可能会发现AbstractClustering类其实并没有parameterVector这一函数,其子类中是含有的,那么编译起来不会报错吗//注意到这里mep_clustering的定义类型是ClusteringType*,那么它肯定会使用到多态//只要其传入的对象中定义有parameterVector这一函数即可RealVector parameterVector() const{ return mep_clustering->parameterVector(); }void setParameterVector(RealVector const& newParameters){ mep_clustering->setParameterVector(newParameters); }std::size_t numberOfParameters() const{ return mep_clustering->numberOfParameters(); }void read(InArchive& archive){ archive & *mep_clustering; }void write(OutArchive& archive) const{ archive & *mep_clustering; }using base_type::eval;//计算数据所属簇的标签void eval(BatchInputType const& patterns, BatchOutputType& outputs,  State& state)const{eval(patterns,outputs);}protected:ClusteringType* mep_clustering; // 使用的是基类指针,方便使用多态
};

AbstractClustering类

在ClusteringModel类中你可能发现了AbstractClustering这个类,那么这个类又是干什么的呢?如果你熟悉基于原型的聚类算法的话,你应该知道,其中最重要的一点就是计算各个簇的中心,Shark中将聚类中心也包装成为一个类,而AbstractClustering类就是聚类中心类的基类。

ClusteringModel类包含了AbstractModel类和AbstractClustering类。其中只是提供了一些访问的接口,主要的数据是存储在AbstractClustering类中。

该类的定义位于<include/shark/Models/Clustering/AbstractClustering.h>文件中。

template <class InputT>
class AbstractClustering : public INameable, public IParameterizable, public ISerializable
{
public:typedef InputT InputType;typedef unsigned int OutputType;typedef typename Batch<InputType>::type BatchInputType;typedef Batch<OutputType>::type BatchOutputType;enum Feature {HAS_SOFT_MEMBERSHIP = 1,};SHARK_FEATURE_INTERFACE;//表示该聚类方法是否能进行软聚类bool hasSoftMembershipFunction()const{return m_features & HAS_SOFT_MEMBERSHIP;}//返回聚类结果中簇的数目virtual std::size_t numberOfClusters() const = 0;//计算一个数据所对应的簇的标号,有batch与非batch的重载版本//这个函数是针对硬聚类来说的,对于软聚类也有同样的版本virtual unsigned int hardMembership(InputType const& pattern) const{typename Batch<InputType>::type b = Batch<InputType>::createBatch(pattern);get(b,0) = pattern;return hardMembership(b)(0); //将非batch形式转换为batch形式进行处理}// 默认语意是返回softMembership函数返回值的最大值// 可以看出,硬聚类也是建立在软聚类之上的,只是输出最可能的簇virtual BatchOutputType hardMembership(BatchInputType const& patterns) const{std::size_t numPatterns = boost::size(patterns);RealMatrix f = softMembership(patterns); // 函数返回的应该是对每个簇的隶属度SHARK_ASSERT(f.size2() > 0);SHARK_ASSERT(f.size1() == numPatterns);BatchOutputType outputs(numPa

这篇关于Shark源码分析(六):k-means算法的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/939111

相关文章

SpringBoot中六种批量更新Mysql的方式效率对比分析

《SpringBoot中六种批量更新Mysql的方式效率对比分析》文章比较了MySQL大数据量批量更新的多种方法,指出REPLACEINTO和ONDUPLICATEKEY效率最高但存在数据风险,MyB... 目录效率比较测试结构数据库初始化测试数据批量修改方案第一种 for第二种 case when第三种

解决1093 - You can‘t specify target table报错问题及原因分析

《解决1093-Youcan‘tspecifytargettable报错问题及原因分析》MySQL1093错误因UPDATE/DELETE语句的FROM子句直接引用目标表或嵌套子查询导致,... 目录报js错原因分析具体原因解决办法方法一:使用临时表方法二:使用JOIN方法三:使用EXISTS示例总结报错原

MySQL中的LENGTH()函数用法详解与实例分析

《MySQL中的LENGTH()函数用法详解与实例分析》MySQLLENGTH()函数用于计算字符串的字节长度,区别于CHAR_LENGTH()的字符长度,适用于多字节字符集(如UTF-8)的数据验证... 目录1. LENGTH()函数的基本语法2. LENGTH()函数的返回值2.1 示例1:计算字符串

Android kotlin中 Channel 和 Flow 的区别和选择使用场景分析

《Androidkotlin中Channel和Flow的区别和选择使用场景分析》Kotlin协程中,Flow是冷数据流,按需触发,适合响应式数据处理;Channel是热数据流,持续发送,支持... 目录一、基本概念界定FlowChannel二、核心特性对比数据生产触发条件生产与消费的关系背压处理机制生命周期

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

Java中的雪花算法Snowflake解析与实践技巧

《Java中的雪花算法Snowflake解析与实践技巧》本文解析了雪花算法的原理、Java实现及生产实践,涵盖ID结构、位运算技巧、时钟回拨处理、WorkerId分配等关键点,并探讨了百度UidGen... 目录一、雪花算法核心原理1.1 算法起源1.2 ID结构详解1.3 核心特性二、Java实现解析2.

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

python中Hash使用场景分析

《python中Hash使用场景分析》Python的hash()函数用于获取对象哈希值,常用于字典和集合,不可变类型可哈希,可变类型不可,常见算法包括除法、乘法、平方取中和随机数哈希,各有优缺点,需根... 目录python中的 Hash除法哈希算法乘法哈希算法平方取中法随机数哈希算法小结在Python中,

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

关于MyISAM和InnoDB对比分析

《关于MyISAM和InnoDB对比分析》:本文主要介绍关于MyISAM和InnoDB对比分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录开篇:从交通规则看存储引擎选择理解存储引擎的基本概念技术原理对比1. 事务支持:ACID的守护者2. 锁机制:并发控制的艺