Levenshtein距离及其python实现

2024-01-02 06:08

本文主要是介绍Levenshtein距离及其python实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

  1. 概念
     Levenshtein距离,又称L氏 编辑距离, 是指两个字串之间,由一个转成另一个所需的最少编辑操作次数。原子 编辑操作包括增、删、改,即 插入一个字符,删除一个字符, 将一个字符 替换成另一个字符 。一般来说, Levenshtein 距离越小,两个串的相似度越大。 Levenshtein 距离已经在DNA分析、拼音纠错、命名实体抽取、实体共指、机器翻译等方面有广泛应用。

  1. 算法实现
     具体计算公式参见维基百科,下面从自然语言表达和python实现两个方面介绍其计算逻辑。
     2.1 自然语言表达
     例如要计算“垃圾消息”和“A垃圾信息”的  Levenshtein距离,步骤如下:
     第一步:依据两字符串长度构造字符串矩阵,并填入相应的位置数据,如下表:




0
1
2
3
4
A
1




2




3




4




5





第二步:从3,3格开始,开始计算。取以下三个值的最小值:
(1)如果最上方的字符等于最左方的字符,则为左上方的数字。否则为左上方的数字+1。(对于3,3来说为1)
(2)左方数字+1(对于3,3格来说为2)
(3)上方数字+1(对于3,3格来说为2)
因此格3,3的取值为1,如下表:




0
1
2
3
4
A
1
1



2




3




4




5





     第三步:循环使用第二步操作,将其他格子填满。结果如下表:




0
1
2
3
4
A
1
1
2
3
4
2
1
2
3
4
3
2
1
2
3
4
3
2
2
3
5
4
3
3
2

     第四步:取右下角数值2,即为L氏编辑距离。

     2.2 python实现

def  levenshtein_distance(first second):
    '''
    计算两个字符串之间的L氏编辑距离
    :输入参数 first: 第一个字符串
    :输入参数 second: 第二个字符串
    :返回值: L氏编辑距离
    '''
    if  len(first) ==  or  len(second) ==  0:
        return  len(first) +  len(second)
    first_length =  len(first) +  1
    second_length =  len(second) +  1
    distance_matrix = [ range(second_length)  for  in  range(first_length)]  # 初始化矩阵
    for in  range( 1 first_length):
        for in  range( 1 second_length):
            deletion = distance_matrix[i- 1][j] +  1
            insertion = distance_matrix[i][j- 1] +  1
            substitution = distance_matrix[i- 1][j- 1]
            if first[i- 1] != second[j- 1]:
                substitution +=  1
            distance_matrix[i][j] =  min(insertion deletion substitution)
    return distance_matrix[first_length- 1][second_length- 1]


if __name__ ==  '__main__':
    print levenshtein_distance( u"垃圾消息" u"A垃圾信息"# 运行结果为:2
   
   
  
参考资料
https://en.wikipedia.org/wiki/Levenshtein_distance

这篇关于Levenshtein距离及其python实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/561535

相关文章

使用Python删除Excel中的行列和单元格示例详解

《使用Python删除Excel中的行列和单元格示例详解》在处理Excel数据时,删除不需要的行、列或单元格是一项常见且必要的操作,本文将使用Python脚本实现对Excel表格的高效自动化处理,感兴... 目录开发环境准备使用 python 删除 Excphpel 表格中的行删除特定行删除空白行删除含指定

Linux下删除乱码文件和目录的实现方式

《Linux下删除乱码文件和目录的实现方式》:本文主要介绍Linux下删除乱码文件和目录的实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录linux下删除乱码文件和目录方法1方法2总结Linux下删除乱码文件和目录方法1使用ls -i命令找到文件或目录

SpringBoot+EasyExcel实现自定义复杂样式导入导出

《SpringBoot+EasyExcel实现自定义复杂样式导入导出》这篇文章主要为大家详细介绍了SpringBoot如何结果EasyExcel实现自定义复杂样式导入导出功能,文中的示例代码讲解详细,... 目录安装处理自定义导出复杂场景1、列不固定,动态列2、动态下拉3、自定义锁定行/列,添加密码4、合并

mybatis执行insert返回id实现详解

《mybatis执行insert返回id实现详解》MyBatis插入操作默认返回受影响行数,需通过useGeneratedKeys+keyProperty或selectKey获取主键ID,确保主键为自... 目录 两种方式获取自增 ID:1. ​​useGeneratedKeys+keyProperty(推

Spring Boot集成Druid实现数据源管理与监控的详细步骤

《SpringBoot集成Druid实现数据源管理与监控的详细步骤》本文介绍如何在SpringBoot项目中集成Druid数据库连接池,包括环境搭建、Maven依赖配置、SpringBoot配置文件... 目录1. 引言1.1 环境准备1.2 Druid介绍2. 配置Druid连接池3. 查看Druid监控

Python通用唯一标识符模块uuid使用案例详解

《Python通用唯一标识符模块uuid使用案例详解》Pythonuuid模块用于生成128位全局唯一标识符,支持UUID1-5版本,适用于分布式系统、数据库主键等场景,需注意隐私、碰撞概率及存储优... 目录简介核心功能1. UUID版本2. UUID属性3. 命名空间使用场景1. 生成唯一标识符2. 数

Linux在线解压jar包的实现方式

《Linux在线解压jar包的实现方式》:本文主要介绍Linux在线解压jar包的实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录linux在线解压jar包解压 jar包的步骤总结Linux在线解压jar包在 Centos 中解压 jar 包可以使用 u

Python办公自动化实战之打造智能邮件发送工具

《Python办公自动化实战之打造智能邮件发送工具》在数字化办公场景中,邮件自动化是提升工作效率的关键技能,本文将演示如何使用Python的smtplib和email库构建一个支持图文混排,多附件,多... 目录前言一、基础配置:搭建邮件发送框架1.1 邮箱服务准备1.2 核心库导入1.3 基础发送函数二、

c++ 类成员变量默认初始值的实现

《c++类成员变量默认初始值的实现》本文主要介绍了c++类成员变量默认初始值,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 目录C++类成员变量初始化c++类的变量的初始化在C++中,如果使用类成员变量时未给定其初始值,那么它将被

Python包管理工具pip的升级指南

《Python包管理工具pip的升级指南》本文全面探讨Python包管理工具pip的升级策略,从基础升级方法到高级技巧,涵盖不同操作系统环境下的最佳实践,我们将深入分析pip的工作原理,介绍多种升级方... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核