距离度量方法——余弦相似度、汉明距离、马氏距离、编辑距离

2024-04-09 14:36

本文主要是介绍距离度量方法——余弦相似度、汉明距离、马氏距离、编辑距离,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

目录

一、 余弦相似度(Cosine Similarity)

1、简介

2、代码实现

二、汉明距离(Hamming Distance)

1、简介

2、代码实现

三、马氏距离(Mahalanobis Distance)

1、简介

2、代码实现

四、编辑距离(Levenshtein Distance)

1、简介

2、代码实现


一、 余弦相似度(Cosine Similarity)

1、简介

  • 余弦相似度是一种常用的向量相似性度量方法,通常用于文本挖掘、信息检索和推荐系统等领域。它衡量了两个向量之间的夹角的余弦值,而不考虑它们的大小。
  • 余弦相似度的计算公式如下:
    • d(A,B)=\frac{AB}{\left \| A \right \|\left \| B \right \|},其中 A 和 B 是两个向量,||A|| 表示向量 A 的模长。

2、代码实现

  • 计算两个向量 a(1,2,3)b(4,5,6) 之间的余弦相似度。
  • import numpy as npdef cosine_similarity(a, b):dot_product = np.dot(a, b)norm_a = np.linalg.norm(a)norm_b = np.linalg.norm(b)similarity = dot_product / (norm_a * norm_b)return similaritya = np.array([1, 2, 3])
    b = np.array([4, 5, 6])
    similarity = cosine_similarity(a, b)
    print("余弦相似度:", similarity)

二、汉明距离(Hamming Distance)

1、简介

  • 汉明距离是一种用于比较两个等长字符串之间的差异性的度量。它衡量了两个字符串之间在相同位置上不同字符的数量。具体来说,汉明距离是通过对比两个字符串中对应位置上的字符来计算的,不同字符的数量即为汉明距离。
  • 例如,假设有两个等长字符串 "1011101" 和 "1001001",它们之间的汉明距离为 2,因为在第 2 和第 5 个位置上的字符不同。

2、代码实现

  • 计算两个字符串 26d700000006000100520004 和 17eb00000006000100480003 之间的汉明距离。
  • def hamming_distance(str1, str2):if len(str1) != len(str2):raise ValueError("两个字符串必须具有相同的长度")distance = sum(c1 != c2 for c1, c2 in zip(str1, str2))return distancestr1 = "26d700000006000100520004"
    str2 = "17eb00000006000100480003"
    distance = hamming_distance(str1, str2)
    print("汉明距离:", distance)

三、马氏距离(Mahalanobis Distance)

1、简介

  • 马氏距离是一种考虑了数据协方差结构的距离度量方法,通常用于多维空间中数据点之间的距离计算。它衡量了两个数据点在多维空间中的差异性,同时考虑了各个特征之间的相关性。
  • 马氏距离可以看作是欧氏距离的一种修正,修正了欧氏距离中各维度尺度不一致且相关的问题。
  • 单个数据点的马氏距离:
    • d(x)=\sqrt{(x-\mu )^TS^{-1}(x-\mu)},其中 \mu 为样本均值。
  • 数据点 x, y 之间的马氏距离:
    • d(x,y)=\sqrt{(x-y)^TS^{-1}(x-y)},其中 S^{-1} 为样本集的协方差矩阵的逆矩阵。
    • 协方差矩阵的计算公式如下:
      • S=\frac{1}{n-1}\sum_{i}^{n}(x_i-\bar{x})(x_i-\bar{x})^T,其中 x_i 表示第 i 个样本,\bar{x} 表示所有样本的均值向量。(x_i-\bar{x}) 是每个样本与均值向量的偏差,(x_i-\bar{x})^T 表示它的转置。

2、代码实现

  • 计算一样本数据集 { [1, 2], [3, 4], [4, 6], [6, 8] },其中两个数据 [1, 2] 和 [3, 4] 的马氏距离。
  • import numpy as npdef mahalanobis_distance(x, y, covariance_inv):diff = np.array(x) - np.array(y)distance = np.sqrt(np.dot(np.dot(diff, covariance_inv), diff.T))return distance# 计算协方差矩阵
    data = np.array([[1, 2], [3, 4], [4, 6], [6, 8]])  # 样本数据
    covariance_matrix = np.cov(data, rowvar=False)  # 计算协方差矩阵# 计算协方差矩阵的逆矩阵
    covariance_inv = np.linalg.inv(covariance_matrix)# 两个点
    x = [1, 2]
    y = [3, 4]# 计算马氏距离
    distance = mahalanobis_distance(x, y, covariance_inv)
    print("马氏距离:", distance)

四、编辑距离(Levenshtein Distance)

1、简介

  • 编辑距离是衡量两个字符串之间的相似度的一种度量方法。它表示通过插入、删除或替换操作将一个字符串转换为另一个字符串所需的最小编辑次数。
  • 每次修改的方式如下:
    • 增加一个字符。如:abc -> abcd
    • 删除一个字符。如:abc -> ab
    • 修改一个字符。如:abc -> abd

2、代码实现

  • 计算两个字符串 26d700000006000100520004 和 17eb00000006000100480003 之间的编辑距离。
  • def edit_distance(str1, str2):m = len(str1)n = len(str2)# 创建一个(m+1) x (n+1)的二维数组来保存编辑距离dp = [[0] * (n + 1) for _ in range(m + 1)]# 初始化第一行和第一列for i in range(m + 1):dp[i][0] = ifor j in range(n + 1):dp[0][j] = j# 动态规划计算编辑距离for i in range(1, m + 1):for j in range(1, n + 1):if str1[i - 1] == str2[j - 1]:dp[i][j] = dp[i - 1][j - 1]else:dp[i][j] = min(dp[i - 1][j - 1], dp[i - 1][j], dp[i][j - 1]) + 1return dp[m][n]str1 = "26d700000006000100520004"
    str2 = "17eb00000006000100480003"
    distance = edit_distance(str1, str2)
    print("编辑距离:", distance)

这篇关于距离度量方法——余弦相似度、汉明距离、马氏距离、编辑距离的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/888417

相关文章

MyBatis-Plus通用中等、大量数据分批查询和处理方法

《MyBatis-Plus通用中等、大量数据分批查询和处理方法》文章介绍MyBatis-Plus分页查询处理,通过函数式接口与Lambda表达式实现通用逻辑,方法抽象但功能强大,建议扩展分批处理及流式... 目录函数式接口获取分页数据接口数据处理接口通用逻辑工具类使用方法简单查询自定义查询方法总结函数式接口

MySQL深分页进行性能优化的常见方法

《MySQL深分页进行性能优化的常见方法》在Web应用中,分页查询是数据库操作中的常见需求,然而,在面对大型数据集时,深分页(deeppagination)却成为了性能优化的一个挑战,在本文中,我们将... 目录引言:深分页,真的只是“翻页慢”那么简单吗?一、背景介绍二、深分页的性能问题三、业务场景分析四、

JAVA中安装多个JDK的方法

《JAVA中安装多个JDK的方法》文章介绍了在Windows系统上安装多个JDK版本的方法,包括下载、安装路径修改、环境变量配置(JAVA_HOME和Path),并说明如何通过调整JAVA_HOME在... 首先去oracle官网下载好两个版本不同的jdk(需要登录Oracle账号,没有可以免费注册)下载完

Java中读取YAML文件配置信息常见问题及解决方法

《Java中读取YAML文件配置信息常见问题及解决方法》:本文主要介绍Java中读取YAML文件配置信息常见问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要... 目录1 使用Spring Boot的@ConfigurationProperties2. 使用@Valu

Java 方法重载Overload常见误区及注意事项

《Java方法重载Overload常见误区及注意事项》Java方法重载允许同一类中同名方法通过参数类型、数量、顺序差异实现功能扩展,提升代码灵活性,核心条件为参数列表不同,不涉及返回类型、访问修饰符... 目录Java 方法重载(Overload)详解一、方法重载的核心条件二、构成方法重载的具体情况三、不构

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I

Python中反转字符串的常见方法小结

《Python中反转字符串的常见方法小结》在Python中,字符串对象没有内置的反转方法,然而,在实际开发中,我们经常会遇到需要反转字符串的场景,比如处理回文字符串、文本加密等,因此,掌握如何在Pyt... 目录python中反转字符串的方法技术背景实现步骤1. 使用切片2. 使用 reversed() 函

Python中将嵌套列表扁平化的多种实现方法

《Python中将嵌套列表扁平化的多种实现方法》在Python编程中,我们常常会遇到需要将嵌套列表(即列表中包含列表)转换为一个一维的扁平列表的需求,本文将给大家介绍了多种实现这一目标的方法,需要的朋... 目录python中将嵌套列表扁平化的方法技术背景实现步骤1. 使用嵌套列表推导式2. 使用itert

Python使用pip工具实现包自动更新的多种方法

《Python使用pip工具实现包自动更新的多种方法》本文深入探讨了使用Python的pip工具实现包自动更新的各种方法和技术,我们将从基础概念开始,逐步介绍手动更新方法、自动化脚本编写、结合CI/C... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

在Linux中改变echo输出颜色的实现方法

《在Linux中改变echo输出颜色的实现方法》在Linux系统的命令行环境下,为了使输出信息更加清晰、突出,便于用户快速识别和区分不同类型的信息,常常需要改变echo命令的输出颜色,所以本文给大家介... 目python录在linux中改变echo输出颜色的方法技术背景实现步骤使用ANSI转义码使用tpu