Levenshtein距离及其python实现

2024-01-02 06:08

本文主要是介绍Levenshtein距离及其python实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

  1. 概念
     Levenshtein距离,又称L氏 编辑距离, 是指两个字串之间,由一个转成另一个所需的最少编辑操作次数。原子 编辑操作包括增、删、改,即 插入一个字符,删除一个字符, 将一个字符 替换成另一个字符 。一般来说, Levenshtein 距离越小,两个串的相似度越大。 Levenshtein 距离已经在DNA分析、拼音纠错、命名实体抽取、实体共指、机器翻译等方面有广泛应用。

  1. 算法实现
     具体计算公式参见维基百科,下面从自然语言表达和python实现两个方面介绍其计算逻辑。
     2.1 自然语言表达
     例如要计算“垃圾消息”和“A垃圾信息”的  Levenshtein距离,步骤如下:
     第一步:依据两字符串长度构造字符串矩阵,并填入相应的位置数据,如下表:




0
1
2
3
4
A
1




2




3




4




5





第二步:从3,3格开始,开始计算。取以下三个值的最小值:
(1)如果最上方的字符等于最左方的字符,则为左上方的数字。否则为左上方的数字+1。(对于3,3来说为1)
(2)左方数字+1(对于3,3格来说为2)
(3)上方数字+1(对于3,3格来说为2)
因此格3,3的取值为1,如下表:




0
1
2
3
4
A
1
1



2




3




4




5





     第三步:循环使用第二步操作,将其他格子填满。结果如下表:




0
1
2
3
4
A
1
1
2
3
4
2
1
2
3
4
3
2
1
2
3
4
3
2
2
3
5
4
3
3
2

     第四步:取右下角数值2,即为L氏编辑距离。

     2.2 python实现

def  levenshtein_distance(first second):
    '''
    计算两个字符串之间的L氏编辑距离
    :输入参数 first: 第一个字符串
    :输入参数 second: 第二个字符串
    :返回值: L氏编辑距离
    '''
    if  len(first) ==  or  len(second) ==  0:
        return  len(first) +  len(second)
    first_length =  len(first) +  1
    second_length =  len(second) +  1
    distance_matrix = [ range(second_length)  for  in  range(first_length)]  # 初始化矩阵
    for in  range( 1 first_length):
        for in  range( 1 second_length):
            deletion = distance_matrix[i- 1][j] +  1
            insertion = distance_matrix[i][j- 1] +  1
            substitution = distance_matrix[i- 1][j- 1]
            if first[i- 1] != second[j- 1]:
                substitution +=  1
            distance_matrix[i][j] =  min(insertion deletion substitution)
    return distance_matrix[first_length- 1][second_length- 1]


if __name__ ==  '__main__':
    print levenshtein_distance( u"垃圾消息" u"A垃圾信息"# 运行结果为:2
   
   
  
参考资料
https://en.wikipedia.org/wiki/Levenshtein_distance

这篇关于Levenshtein距离及其python实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/561535

相关文章

windos server2022里的DFS配置的实现

《windosserver2022里的DFS配置的实现》DFS是WindowsServer操作系统提供的一种功能,用于在多台服务器上集中管理共享文件夹和文件的分布式存储解决方案,本文就来介绍一下wi... 目录什么是DFS?优势:应用场景:DFS配置步骤什么是DFS?DFS指的是分布式文件系统(Distr

NFS实现多服务器文件的共享的方法步骤

《NFS实现多服务器文件的共享的方法步骤》NFS允许网络中的计算机之间共享资源,客户端可以透明地读写远端NFS服务器上的文件,本文就来介绍一下NFS实现多服务器文件的共享的方法步骤,感兴趣的可以了解一... 目录一、简介二、部署1、准备1、服务端和客户端:安装nfs-utils2、服务端:创建共享目录3、服

Python MySQL如何通过Binlog获取变更记录恢复数据

《PythonMySQL如何通过Binlog获取变更记录恢复数据》本文介绍了如何使用Python和pymysqlreplication库通过MySQL的二进制日志(Binlog)获取数据库的变更记录... 目录python mysql通过Binlog获取变更记录恢复数据1.安装pymysqlreplicat

利用Python编写一个简单的聊天机器人

《利用Python编写一个简单的聊天机器人》这篇文章主要为大家详细介绍了如何利用Python编写一个简单的聊天机器人,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 使用 python 编写一个简单的聊天机器人可以从最基础的逻辑开始,然后逐步加入更复杂的功能。这里我们将先实现一个简单的

基于Python开发电脑定时关机工具

《基于Python开发电脑定时关机工具》这篇文章主要为大家详细介绍了如何基于Python开发一个电脑定时关机工具,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1. 简介2. 运行效果3. 相关源码1. 简介这个程序就像一个“忠实的管家”,帮你按时关掉电脑,而且全程不需要你多做

C#使用yield关键字实现提升迭代性能与效率

《C#使用yield关键字实现提升迭代性能与效率》yield关键字在C#中简化了数据迭代的方式,实现了按需生成数据,自动维护迭代状态,本文主要来聊聊如何使用yield关键字实现提升迭代性能与效率,感兴... 目录前言传统迭代和yield迭代方式对比yield延迟加载按需获取数据yield break显式示迭

Python实现高效地读写大型文件

《Python实现高效地读写大型文件》Python如何读写的是大型文件,有没有什么方法来提高效率呢,这篇文章就来和大家聊聊如何在Python中高效地读写大型文件,需要的可以了解下... 目录一、逐行读取大型文件二、分块读取大型文件三、使用 mmap 模块进行内存映射文件操作(适用于大文件)四、使用 pand

python实现pdf转word和excel的示例代码

《python实现pdf转word和excel的示例代码》本文主要介绍了python实现pdf转word和excel的示例代码,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价... 目录一、引言二、python编程1,PDF转Word2,PDF转Excel三、前端页面效果展示总结一

Python xmltodict实现简化XML数据处理

《Pythonxmltodict实现简化XML数据处理》Python社区为提供了xmltodict库,它专为简化XML与Python数据结构的转换而设计,本文主要来为大家介绍一下如何使用xmltod... 目录一、引言二、XMLtodict介绍设计理念适用场景三、功能参数与属性1、parse函数2、unpa

C#实现获得某个枚举的所有名称

《C#实现获得某个枚举的所有名称》这篇文章主要为大家详细介绍了C#如何实现获得某个枚举的所有名称,文中的示例代码讲解详细,具有一定的借鉴价值,有需要的小伙伴可以参考一下... C#中获得某个枚举的所有名称using System;using System.Collections.Generic;usi